비디오 부분 복사 검출을 위한 트랜스포머 기반 세그먼트 Fingerprint 생성 방법

초록

최근 비디오 촬영 기기의 보편화와 더불어 다양한 멀티미디어 플랫폼이 발전함에 따라 비디오 컨텐츠 이용량이 매년 증가하고 있다. 하지만 이에 따른 부작용으로 비디오 컨텐츠의 저작권을 침해 범죄 또한 증가하고 있다. 본 논문에서는 이러한 문제를 해결하기 위해서 다양한 변형에 강건한 비디오 복사 검출 시스템을 위한 세그먼트 Fingerprint 생성 방법을 제안한다. 하이브리드 비전 트랜스포머로 프레임 Fingerprint를 생성하고, 생성된 프레임 Fingerprint에 트랜스포머 인코더로 주요 프레임에 가중치를 부여하고 Maxpooling으로 융합하여 세그먼트 Fingerprint를 생성하는 방법을 제안한다. VCDB 데이터셋을 사용해서 F1 Score를 측정하여 0.772의 성능을 기록했다.

키워드