해리스 코너 검출과 Visual Saliency Map을 이용한 자막 영역 검출 기법

Abstract

본 논문에서는 Harris 코너 검출과 visual saliency map을 이용하여 비디오 영상에서 자막을 효과적으로 검출하는 방법을 제안한다. 우리는 다양한 비디오에 대한 분석을 통하여, 자막 영역에서 코너 점들이 많이 분포하고 있고, 시각적으로는 주변 배경 영역과는 구별되는 밝기 또는 색상으로 나타나는 것을 확인할 수 있다. 그러므로, 비디오 영상에서 자막을 효율적으로 검출하기위해서, 먼저 Harris 코너 검출기를 이용한 코너 맵(map)을 생성하고, 다음 단계에서는 시각적으로 주변 영역과 구별되는 특징을 추출하기 위하여, Pulse Cosine Transform (PCT)를 이용한 visual saliency map을 생성한다. 최종적으로 코너 맵과 saliency map을 효과적으로 통합함으로써 정확한 자막 영역을 검출한다. 실험 결과로써, 제안하는 알고리즘이 비디오 영상에서 효율적으로 자막 영역을 검출하는 것을 보인다.

In this paper, we propose a new approach to detect video texts from TV contents. By analyzing various video contents, the text regions include many corner pointers and are distinguished by intensity and color, compared with backgrounds. Therefore, in order to effectively detect the text regions from video contents, a corner map including corner pointers detected by the Harris corner detector is first generated. Then, a visual saliency map by performing the Pulse discrete Cosine Transform is generated to visually distinguish characteristics of text regions from surroundings. Finally, by integrating the corner map and the saliency map, the exact text regions are detected. As experimental results, the proposed method shows to effectively detect the text regions from video contents.