(For USM Staff/Student Only)

EngLib USM > Ω School of Electrical & Electronic Engineering >

Investigations on human perceptual maps using a stereo-vision mobile robot / Eng Swee Kheng

Investigations on human perceptual maps using a stereo-vision mobile robot_Eng Swee Kheng_E3_2018_MYMY
Kognitif ruang adalah cabang psikologi kognitif mengenai pemerolehan, penyusunan, penggunaan, dan semakan pengetahuan tentang persekitaran ruang. Teori pengiraan baru untuk pemetaan kognitif ruang manusia telah dicadangkan dalam kesusasteraan dan dianalisis menggunakan robot mudah alih berasaskan laser. Berbeza dengan pendekatan SLAM (Penyetempatan dan Pemetaan Secara Serentak) yang membina peta persekitaran yang tepat dan sempurna, prosedur pembinaan peta persepsi manusia yang dicadangkan lebih mewakili pemetaan kognitif ruang dalam otak manusia, di mana peta persepsi persekitaran yang tidak tepat dan tidak lengkap boleh dibina dengan mudah. Langkah-langkah utama dalam metodologi adalah memperolehi imej-imej stereo penglihatan persekitaran, mewujudkan objek rujukan, menjejaki jumlah baki objek rujukan, dan mengembangkan peta apabila titik-titik had persekitaran dicapai. Sumbangan utama penyelidikan ini adalah penggunaan teknik penglihatan komputer dan algoritma pengiraan pemetaan pada robot mudah alih berasaskan stereo penglihatan untuk merumuskan peta persepsi manusia secara sistematik dan menilai peta persepsi manusia yang berkaitan dengan persekitaran dalaman dan persekitaran luaran secara komprehensif. Pengesahan peta persepsi manusia dengan menggunakan teknik berasaskan penglihatan adalah penting kerana dua sebab. Pertama, penglihatan memainkan peranan penting dalam pembangunan kognitif ruang manusia; Kedua, sistem penglihatan komputer kurang mahal dan kaya dengan maklumat dalam mewakili persekitaran. Secara khusus, teknik penglihatan komputer dibangunkan terlebih dahulu untuk menganalisis imej stereo yang berkaitan dan memperolehi maklumat anjakan robot bergerak, serta mewujudkan objek rujukan. Beberapa algoritma pengiraan pemetaan digunakan kemudian untuk membina persepsi manusia terhadap persekitaran dalam penyelidikan ini. Empat persekitaran dunia nyata iaitu dua persekitaran dalaman dan dua persekitaran luaran yang besar, dinilai secara empirik. Geometri ruang dari persekitaran pemeriksaan adalah berbeza-beza, dan persekitaran tertakluk kepada pelbagai kesan semula jadi termasuk pantulan dan hingar. Pantulan dan hingar terjadi di banyak bahagian imej. Oleh itu, algoritma tambahan dibangunkan untuk menyingkirkan pantulan dan hingar. Penyingkiran pantulan dan hingar ketara mengurangkan objek-objek rujukan (TROs) yang dibuat, untuk setiap pandangan semasa. Hasilnya menunjukkan bahawa teknik penglihatan komputer dan algoritma pengiraan pemetaan yang dicadangkan untuk pembinaan peta persepsi manusia adalah mantap dan berguna. Teknik penglihatan komputer yang dicadangkan dapat membina peta persepsi manusia yang tidak tepat dan tidak lengkap dengan perwakilan ruang yang baik untuk seluruh persekitaran. Peta yang tidak tepat dan tidak lengkap merujuk kepada peta yang dihasilkan tidak tepat dalam istilah metrik dan mempunyai permukaan yang hilang. Hasil kajian menunjukkan bahawa kedua-dua sistem berasaskan penglihatan dan laser dapat menghasilkan geometri ruang yang agak tepat bagi persekitaran yang diuji. __________________________________________________________________________________ Spatial cognition is a branch of cognitive psychology concerning the acquisition, organization, utilization, and revision of knowledge about spatial environments. A new computational theory of human spatial cognitive mapping has been proposed in the literature, and analyzed using a laser-based mobile robot. In contrast with the well-established SLAM (Simultaneous Localization and Mapping) approach that creates a precise and complete map of the environment, the proposed human perceptual map building procedure is more representative of spatial cognitive mapping in the human brain, whereby an imprecise and incomplete perceptual map of an environment can be created easily. The key steps in the methodology are capturing stereo-vision images of the environment, creating the tracked reference objects (TROs), tracking the number of remaining TROs, and expanding the map when the limiting points of the environment are reached. The main contribution of this research is on the use of computer vision techniques and computational mapping algorithms on a stereo-vision mobile robot for formulating the human perceptual map systematically, and evaluating the resulting human perceptual maps pertaining to both indoor and outdoor environments comprehensively. Validating the human perceptual maps using vision-based techniques is important for two reasons. Firstly, vision plays an important role in the development of human spatial cognition; secondly, computer vision systems are less expensive and information-rich in representing an environment. Specifically, computer vision techniques are first developed for analyzing the associated stereo images and retrieving the displacement information of a mobile robot, as well ascreating the necessary tracked reference objects. A number of computational mapping algorithms are then employed to build a human perceptual map of the environment in this research. Four real-world environments, namely two large indoor and two large outdoor environments, are empirically evaluated. The spatial geometry of the test environments vary, and the environments are subject to various natural effects including reflection and noise. The reflection and noise occurrin many parts of the images. Therefore, additional algorithms are developed in order to remove the reflection and noise. The removal of reflection and noise significantly reduces the number of TROs createdfor every immediate view. The outcomes indicate that the proposed computer vision techniques and computational mapping algorithms for human perceptual map building are robust and useful. They are able to create imprecise and incomplete human perceptual maps with good spatial representation of the overall environments. The map is imprecise and incomplete in the sense that it is not accurate in metric terms and has perceived surfaces missing. It is shown that both vision-based and the laser-based systems are able to computer a reasonably accurate spatial geometry of the tested environment.
Contributor(s):
Swee Kheng Eng - Author
Primary Item Type:
Thesis
Identifiers:
Accession Number : 875008780
Language:
English
Subject Keywords:
Simultaneous; representation; representing
Sponsor - Description:
Pusat Pengajian Kejuruteraan Elektrik & Elektronik -
First presented to the public:
6/1/2018
Original Publication Date:
7/9/2020
Previously Published By:
Universiti Sains Malaysia
Place Of Publication:
School of Electrical & Electronic Engineering
Citation:
Extents:
Number of Pages - 175
License Grantor / Date Granted:
  / ( View License )
Date Deposited
2020-07-09 08:34:06.711
Submitter:
Mohamed Yunus Yusof

All Versions

Thumbnail Name Version Created Date
Investigations on human perceptual maps using a stereo-vision mobile robot / Eng Swee Kheng1 2020-07-09 08:34:06.711