Kinect 기반 손 모양 인식을 위한 손 영역 검출에 관한 연구

Abstract

손 모양 인식은 자연스러운 인간-컴퓨터 상호작용을 위한 기반 기술이다. 본 논문에서는 Kinect 기반 손 모양 인식을 위해 효과적으로 손 영역을 검출하기 위한 방법에 대해 논의한다. Kinect는 컬러 영상과 적외선 영상(혹은 깊이 영상)을 동시에 획득할 수 있는 카메라이기 때문에, 손 영역을 검출하는 과정에서 컬러 정보와 깊이 정보를 활용할 수 있다. 즉, 손 영역은 스킨 컬러를 가지는 영역으로 검출될 수도 있으며, 일정한 깊이 값을 가지는 영역으로 검출될 수도 있다. 그러므로, 이러한 방법들의 성능을 분석하여, 손 영역의 실루엣이 깔끔하게 도출될 수 있도록 적절히 결합하는 방법이 마련되어야 한다. 이는 손 모양 인식률을 크게 좌우하기 때문이다. 최종적으로 일반적인 환경에서 손 영역 검출 방법의 차이에 따른 손 모양 인식률을 비교함으로써, 성능이 우수한 손 영역 검출 방법을 제안한다.

Hand shape recognition is a fundamental technique for implementing natural human-computer interaction. In this paper, we discuss a method for effectively detecting a hand region in Kinect-based hand shape recognition. Since Kinect is a camera that can capture color images and infrared images (or depth images) together, both images can be exploited for the process of detecting a hand region. That is, a hand region can be detected by finding pixels having skin colors or by finding pixels having a specific depth. Therefore, after analyzing the performance of each, we need a method of properly combining both to clearly extract the silhouette of hand region. This is because the hand shape recognition rate depends on the fineness of detected silhouette. Finally, through comparison of hand shape recognition rates resulted from different hand region detection methods in general environments, we propose a high-performance hand region detection method.