영상 중요도 정보에 기반한 스타일 전이 기법

Abstract

스타일 전이 기법은 참조 영상에 나타나는 질감/색상과 같은 스타일을 결과 영상에 반영하는 기법이다. 기존의 스타일 전이 기법 연구들은 색상이나 질감 중 하나의 특징에 초점을 맞추어 진행되었으며, 두 가지 특징을 동시에 반영한 연구는 활발히 연구되지 않았다. 또한 스타일 전이를 위해 후보 픽셀 집합을 구할 때 단순히 임의의 픽셀들로 구성하기 때문에 때때로 안 좋은 결과 영상을 생성하였다. 본 연구에서는 참조 회화 작품의 색상과 질감 정보를 동시에 반영하는 알고리즘을 제안한다. 이때 참조 영상의 스타일을 효과적으로 반영하기 위해 영상의 중요도 정보를 이용한다. 우리는 참조 영상과 대상영상의 중요도를 고려하여, 중요도가 유사한 영역간에 스타일이 반영될 수 있도록 하였다. 우리의 알고리즘은 색상과 질감을 동시에 반영하기 때문에 기존 연구에 비해 참조 영상의 느낌을 잘 전이할 수 있었다. 또한 임의의 픽셀을 기반으로 후보 집합을 구성하는 것이 아닌, 중요도 정보를 추가로 반영하기 때문에, 영역별로 보다 명확하게 특징을 반영할 수 있었다.