비젼 카메라를 이용한 멀티 터치 입력 장치

국문 초록 (Abstract)

본 논문에서는 비젼 카메라를 이용한 비주얼 멀티 터치 입력 장치를 제안한다. 제안된 입력 장치는 비젼 카메라를 이용하므로 기존 스마트 폰에서 사용하는 터치 스크린 입력 장치에 비해 non-touch로 명령을 입력할 수 있다는 장점이 있다. 또한, 제안된 장치는 컴퓨터 계산 시간이 짧아 실시간 구현이 가능하고, 카메라외에 다른 장치가 필요 없으므로 존재하는 입력장치보다 싸다는 장점이 있다. 이를 위해, 먼저, HSV 컬러 모델과 라벨링 방법을 이용한 영상 처리 알고리즘을 제안한다. 그 다음, 손이 움직이는 영역의 정확성을 개선하기위해, 기하학적인 특징점, 동심원, 칼만 필터에 기본한 움직임 인식 알고리즘을 제안한다. 마지막으로, 제안된 장치는 비디오 게임. 스마트 TV, 컴퓨터등을 원격으로 제어할 수 있음을 실험을 통해 보인다.

다국어 초록 (Multilingual Abstract)

In this paper, we propose a visual multi-touch air input device using vision cameras. The implemented device provides a barehanded interface which copes with the multi-touch operation. The proposed device is easy to apply to the real-time systems because of its low computational load and is cheaper than the existing methods using glove data or 3-dimensional data because any additional equipment is not required. To do this, first, we propose an image processing algorithm based on the HSV color model and the labeling from obtained images. Also, to improve the accuracy of the recognition of hand gestures, we propose a motion recognition algorithm based on the geometric feature points, the skeleton model, and the Kalman filter. Finally, the experiments show that the proposed device is applicable to remote controllers for video games, smart TVs and any computer applications.

목차 (Table of Contents)

• 요약
• Abstract
• 1. 서론
• 2. 손 영역 특징점 시스템 개요
• 3. 손 영역 추출
• 4. 무게 중심을 이용한 손 영역 특징점 추출
• 5. 실험 및 결과 고찰
• 6. 결론
• 참고문헌

참고문헌 (Reference)

1 김미진, "터치스크린 인터페이스 분석을 통한 모바일 게임 인터페이스 구현" 한국디자인학회 22 (22): 231-244, 2009

2 V. I Pavlovic, "Visual Interpretation of Hand Gestures for Human-computer Interaction: a Review" 19 (19): 677-695, 1997

3 Francis K. H. Quek, "Toward a Vision-Based hand Gesture Interface" 23-26, 1994

4 M. Ishikawa, "Recognition of a Hand-gestureBased on Self-organization Using a Data Glove" 739-745, 1999

5 M. Kolsch, "Multimodal Interaction with a Wearable Augmented Reality System" 26 (26): 62-71, 2006

6 J. Rantala, "Methods for Presenting Braille Characters on a Mobile Device with a Touchscreen and Tactile Feedback" 2 (2): 28-39, 2009

7 J. Han, "Low-Cost Multi-Touch Sensing through Frustrated Total Internal Reflection" 115-118, 2005

8 F. Karray, "Human-Computer Interaction: Overview on State of the Art" 1 (1): 137-159, 2008

9 T. Huang, "Hand Gesture Modeling, Analysis, and Synthesis" 73-79, 1995

10 S. S. Fels, "Glove-talk: A Neural Network Interface between a Data Glove and a Speech Synthesizer" 4 (4): 2-8, 1993

11 R. Cowie, "Emotion Recognition In Human-Computer Interaction" 18 : 32-80, 2001

12 C. Spence, "Cross-modal Attention and Multisensory Integration: Implications for Multimodal Interface Design" 2003

13 S. Oviatt, "Advances in Robust Multimodal Interface Design" 23 : 62-68, 2003

14 F. Wang, "A Study on Image Splicing Algorithm for Large Screen Multi-touch Technique" 526-529, 2010