HEVC 비트스트림을 활용한 효율적인 실시간 이동 객체 검출

Abstract

지능형 영상 분석을 통한 CCTV 객체 검출은 많은 연구가 진행되고 있는 분야이지만 계산량의 문제 때문에 실시간 감시의 사각지대가 크게 존재한다. 본 연구에서는 이를 해결하기 위해 압축 동영상 기반의객체 검출을 수행하고자 한다. 최근 모델 중 비교적 간단한 네트워크 구조를 가진 SSD MobileNet,CenterNet, EfficentDet 을 사용하여 움직이는 객체를 검출한다. 특히 최신 코덱인 HEVC로 인코딩된 비 트스트림을 사용, PU 특징만을 추출하여 효율적인 검출을 수행한다. 실험에 사용된 데이터는 실제 CCTV와 비슷한 환경으로 촬영한 20개의 동영상 클립을 사용했다. 실험 결과 모델별로 평균 f1-score 기준 각 0.70, 0.84, 0.72의 결과를 내었으며 SSD MobileNet이 FPS 평균 13 수준으로 가장 빠른 속도를 보였다.추후 비트스트림의 MV 특징을 더 추가하여 PU와 조합함으로써 보다 강건한 모델을 개발할 예정이다.