Combating Falsification of Speech Videos with Live Optical Signatures (Extended Version)
Created by
Haebom
저자
Hadleigh Schwartz, Xiaofeng Yan, Charles J. Carver, Xia Zhou
개요
VeriLight는 고화질 음성 비디오의 위변조 방지를 위한 저오버헤드, 비침범적 시스템입니다. 기존의 디지털 위변조 탐지 방법과 달리, VeriLight는 행사 현장에서 동적인 물리적 서명을 생성하고 미세하게 조절된 빛을 통해 모든 비디오 녹화에 이를 삽입합니다. 이 물리적 서명은 화자의 신원과 얼굴 움직임을 포함한 음성 이벤트에 고유한 의미론적 특징을 암호화하여 스푸핑을 방지합니다. 서명은 어떤 비디오에서도 추출되어 묘사된 음성 콘텐츠와 검증되어 무결성을 확인할 수 있습니다. VeriLight의 핵심 요소는 (1) locality-sensitive hashing 기반의 매우 작은(150비트) 자세 불변 음성 비디오 특징 생성 프레임워크와 (2) 비디오 및 라이브 모두에서 인지할 수 없으면서 200bps 이상을 비디오에 삽입하는 광 변조 방식입니다. 광범위한 비디오 데이터 세트에 대한 실험 결과, VeriLight는 위변조 비디오 탐지에서 AUC ≥ 0.99 및 100%의 진양성률을 달성합니다. 또한, 녹화 조건, 비디오 후처리 기술 및 특징 추출 방법에 대한 화이트박스 적대적 공격에 대해 매우 강력합니다. VeriLight 데모는 https://mobilex.cs.columbia.edu/verilight 에서 확인할 수 있습니다.