LuanVan.vnLuận Văn
Gửi thư

Techniques for Vision-Based Human-Computer Interaction

Luận án · Tiến sĩ · năm 2006 · đề tài tham khảo

Loại tài liệuLuận án
Bậc họcTiến sĩ
Tác giảJason J Corso
Cơ sở đào tạoĐại học Quốc gia TP. Hồ Chí Minh
Năm2006
NguồnThư viện số Đại học Quốc gia TP. Hồ Chí Minh · trang gốc

Tóm tắt

With the ubiquity of powerful, mobile computers and rapid advances in sens¬ing and robot technologies, there exists a great potential for creating advanced, in¬telligent computing environments. We investigate techniques for integrating passive, vision-based sensing into such environments, which include both conventional inter-faces and large-scale environments. We propose a new methodology for vision-based human-computer interaction called the Visual Interaction Cues (VICs) paradigm. VICs fundamentally relies on a shared perceptual space between the user and com¬puter using monocular and stereoscopic video. In this space, we represent each inter-face component as a localized region in the image(s). By providing a clearly defined interaction locale, it is not necessary to visually track the user. Rather we model interaction as an expected stream of visual cues corresponding to a gesture. Example interaction cues are motion as when the finger moves to press a push-button, and 3D hand posture for a communicative gesture like a letter in sign language. We ex¬plore both procedurally defined parsers of the low-level visual cues and learning-based techniques from machine learning (e.g. neural networks) for the cue parsing. Individual gestures are analogous to a language with only words and no grammar. We have constructed a high-level language model that integrates a set of low-level gestures into a single, coherent probabilistic framework. In the language model, every low-level gesture is called a gesture word. We build a probabilistic graph¬ical model with each node being a gesture word, and use an unsupervised learning technique to train the gesture-language model. Then, a complete action is a sequence of these words through the graph and is called a gesture sentence. We are especially interested in building mobile interactive systems in large scale, unknown environments. We study the associated where am I problem: the mobile system must be able to map the environment and localize itself in the en¬vironment using the video imagery. Under the VICs paradigm, we can solve the interaction problem using local geometry without requiring a complete metric map of the environment. Thus, we take an appearance-based approach to the image mod¬eling, which suffices to localize the system. In our approach, coherent regions form the basis of the image description and are used for matching between pairs of images. A coherent region is a connected set of relatively homogeneous pixels in the image. For example, a red ball would project to a red circle in the image, or the stripes on a zebra's back would be coherent stripes. The philosophy is that coherent image regions provide a concise and stable basis for image representation: concise meaning that there is drastic reduction in the storage cost of an image, and stable meaning that the representation is robust to changes in the camera viewpoint. We use a mixture-of-kernels modeling scheme in which each region is initial¬ized using a scale-invariant detector (extrema of a coarsely sampled discrete Laplacian of Gaussian scale-space) and refined into a full (5-parameter) anisotropic region using a novel objective function minimized with standard continuous optimization tech¬niques. The regions are represented using Gaussian weighting functions (kernels), which yields a concise, parametric description, permits spatially approximate match¬ing, and permits the use of techniques from continuous optimization for matching and registration. We investigate such questions as the stability of region extraction, detection and description invariance, retrieval accuracy, and robustness to viewpoint change and occlusion.
Bản toàn văn lưu tại thư viện Đại học Quốc gia TP. Hồ Chí Minh

Thông tin và tóm tắt ở trên lấy từ kho số mở của thư viện trường. Bản toàn văn do thư viện trường quản lý — có nơi cho đọc trực tuyến, có nơi cần tài khoản bạn đọc của trường.

Mở tại thư viện trường ↗
Dùng tài liệu tham khảo cho đúng
  • Đọc để hiểu cách người trước đặt câu hỏi, chọn phương pháp, trình bày số liệu — rồi tự làm với dữ liệu và bối cảnh của bạn.
  • Ý, số liệu, bảng biểu lấy từ tài liệu này phải trích dẫn (tác giả, năm, tên đề tài, cơ sở đào tạo).
  • Đề tài trùng tên vẫn làm được nếu khác đơn vị khảo sát, thời gian hoặc cách tiếp cận — nêu rõ điểm khác trong phần mở đầu.

Đề tài cùng ngành

Tác giả muốn gỡ, sửa thông tin hoặc bổ sung bản toàn văn: gửi yêu cầu qua trang Liên hệ, kèm đường dẫn trang này.