멀티스케일 특성을 활용한 비전 트랜스포머 기반 딥페이크 탐지에 관한 연구
DC Field | Value | Language |
---|---|---|
dc.contributor.author | 정해민 | - |
dc.contributor.author | 조혁주 | - |
dc.contributor.author | 김우주 | - |
dc.contributor.author | 이광연 | - |
dc.date.accessioned | 2024-07-02T06:30:43Z | - |
dc.date.available | 2024-07-02T06:30:43Z | - |
dc.date.issued | 2024-06 | - |
dc.identifier.issn | 2288-4866 | - |
dc.identifier.issn | 2288-4882 | - |
dc.identifier.uri | https://scholarworks.bwise.kr/ssu/handle/2018.sw.ssu/49822 | - |
dc.description.abstract | 딥페이크는 이미지나 영상에서 특정 사람의 얼굴을 다른 사람으로 대체하는 딥 러닝 기술, 또는 이 기술을 이용해 생성한 가짜 이미지나 영상을 지칭한다. 딥 러닝 기술이 널리 보급되면서 딥페이크 기술에 대한 접근성이 높아졌고, 결과적으로 이를 악용한 범죄도 증가하고 있다. 이에 따라 효과적인 딥페이크 탐지 기술의 필요성이 점점 더 커지고 있다. 딥페이크 생성은 주로 신원 교체와 표정 재연이라는 두 가지 방식으로 이루어지는데, 기존의 탐지 기술은 딥페이크가 어떤 방식 으로 생성되었는지에 따라 탐지 성능의 편차를 보인다. 본 연구에서는 딥페이크 탐지 모델의 성능 편차를 줄임으로써 기존 방법론들의 한계를 보완할 수 있는 연구를 제안하고자 하였다. 제안하는 모델은 먼저 영상을 프레임 단위의 이미지들로 자른 다음, 딥페이크의 주된 대상 영역인 얼굴 부분과, 일종의 지역 정보라고 할 수 있는 입 부분을 각각 추출하여 멀티스케일 특성으로 활용한다. 각 특성을 서로 다른 비전 트랜스포머 구조에 입력한 다음, 출력되는 예측 결과들을 종합하여 동영상이 딥페이크인지 아닌지를 효과적으로 판단하게 된다. 특히, 얼굴 부분은 신원 교체 방식으로 생성된 딥페이크를 대응하는 데 도움이 되고, 입 부분은 표정 재연 방식의 딥페이크를 대응하는 데 도움이 되기 때문에 모델은 서로 다른 딥페이크 생성 방식에 대한 강건성을 갖게 된다. 제안하는 방법론을 두 개의 데이터셋에 대해 실험한 결과, 상대적으로 높은 탐지 성능과 함께 다양한 딥페이크 생성 방식에 대해 보다 범용적으로 대응할 수 있는 가능성을 확인하였다. | - |
dc.format.extent | 11 | - |
dc.language | 한국어 | - |
dc.language.iso | KOR | - |
dc.publisher | 한국지능정보시스템학회 | - |
dc.title | 멀티스케일 특성을 활용한 비전 트랜스포머 기반 딥페이크 탐지에 관한 연구 | - |
dc.title.alternative | Vision Transformer-based Deepfake Detection Using Multiscale Features | - |
dc.type | Article | - |
dc.identifier.doi | 10.13088/jiis.2024.30.2.275 | - |
dc.identifier.bibliographicCitation | 지능정보연구, v.30, no.2, pp 275 - 285 | - |
dc.identifier.kciid | ART003095258 | - |
dc.citation.endPage | 285 | - |
dc.citation.number | 2 | - |
dc.citation.startPage | 275 | - |
dc.citation.title | 지능정보연구 | - |
dc.citation.volume | 30 | - |
dc.identifier.url | https://www.kci.go.kr/kciportal/ci/sereArticleSearch/ciSereArtiView.kci?sereArticleSearchBean.artiId=ART003095258 | - |
dc.publisher.location | 대한민국 | - |
dc.description.isOpenAccess | N | - |
dc.subject.keywordAuthor | 딥페이크 탐지 | - |
dc.subject.keywordAuthor | 멀티스케일 특성 분석 | - |
dc.subject.keywordAuthor | 비전 트랜스포머 | - |
dc.subject.keywordAuthor | Deepfake Detection | - |
dc.subject.keywordAuthor | Multiscale Feature Analysis | - |
dc.subject.keywordAuthor | Vision Transformer | - |
dc.description.journalRegisteredClass | kci | - |
Items in ScholarWorks are protected by copyright, with all rights reserved, unless otherwise indicated.
Soongsil University Library 369 Sangdo-Ro, Dongjak-Gu, Seoul, Korea (06978)02-820-0733
COPYRIGHT ⓒ SOONGSIL UNIVERSITY, ALL RIGHTS RESERVED.
Certain data included herein are derived from the © Web of Science of Clarivate Analytics. All rights reserved.
You may not copy or re-distribute this material in whole or in part without the prior written consent of Clarivate Analytics.