영상 조작

Video manipulation

영상조작은 영상처리와 영상편집 기법을 이용해 디지털 영상을 표적으로 하는 미디어 조작의 일종이다.이러한 방법의 적용 범위는 교육용 비디오에서부터[1] (대량) 조작과 선전을 목적으로 하는 비디오에 이르기까지 다양하며, 이는 사진 조작의 오랜 가능성을 단적으로 확장한 것이다.이런 형태의 컴퓨터가 만들어낸 오보는 가짜뉴스에 한몫을 해왔고, 정치운동 때 이 기술이 사용된 사례도 있다.[2]다른 용도는 덜 불길하다; 오락 목적과 무해한 장난은 사용자들에게 영화 같은 예술적 가능성을 제공한다.

역사

비디오 조작의 개념은 비디오테이프 레코더에 사용된 2인치 쿼드플렉스 테이프를 수동으로 자르고 쪼개던 1950년대까지 거슬러 올라갈 수 있다.페로플루오르로 코팅된 후 접합되어야 할 테이프의 양끝에는 철제 필링과 탄소 테트라클로라이드가 혼합되어 도색되었는데, 이는 현미경을 통해 볼 때 테이프의 트랙을 볼 수 있게 하여 이 작업을[3] 위해 설계된 스플라이서로 정렬할 수 있도록 하기 위한 독성 및 발암성 화합물이다.

비디오 카세트 녹음기가 1960년대, 1970년대, 1980년대, 1990년대에 개발되면서, 기존의 자기 테이프를 통해 녹음할 수 있는 능력이 가능해졌다.이로 인해 필름의 특정 부분을 오버레이하여 일관되게 녹화된 하나의 비디오에 대한 환상을 주는 개념으로 이어졌는데, 이것은 비디오 조작의 첫 번째 식별 가능한 사례다.

1985년에 콴텔은 최초의 디지털 비디오 편집 및 효과 합성 시스템인 "The Harry"를 출시했다.최대 80초 분량의 8비트 압축되지 않은 디지털 비디오 녹화 및 효과를 적용했다.몇 년 후인 1991년에 Adobe는 첫 번째 버전의 Premier for the Mac을 출시했는데, 이 프로그램은 이후 편집의 업계 표준이 되었고 현재 비디오 조작에 흔히 사용되고 있다.1999년 애플은 어도비 프리미어(Adobe Premier)와 경쟁해 <인기의 법칙>, <노인을 위한 나라는 없다> 등의 제작 주요 영화에 사용된 파이널 컷 프로를 출시했다.[4]

안면검출은 2000년대 초반부터 현재까지 계속 연구되고 있는 주요 연구과목이 되었다.2017년 아마추어 코더인 '딥페이크'는 오리지널 동영상에 등장하는 연예인들의 얼굴을 디지털로 대체해 포르노 영상을 바꾸고 있었다.딥페이크라는 단어는 알고리즘과 얼굴 맵핑 기술을 사용하여 동영상을 조작하는 일반적인 명사가 되었다.

소비자 쪽에서는 비슷한 기술로 개발한 인기 영상조작 프로그램 페이스앱과 페이스왑이 갈수록 정교해지고 있다.

원칙 증명 소프트웨어 Face2Face는 에를랑겐 뉘른베르크 대학교, 맥스 플랑크 정보연구소, 스탠포드 대학교에서 개발되었다.[5]이러한 진보된 비디오 조작은 이전의 딥페이크 사례와 나란히 그리고 그 이상에 랭크되어야 한다.

비디오 조작 유형

컴퓨터 어플리케이션은 실제처럼 보이는 가짜 오디오와 비디오 콘텐츠를 만들 수 있다는 점에서 더욱 발전하고 있다.[6]연구진이 발간한 영상은 얼굴 인식을 이용한 영상과 오디오 조작이 어떻게 작동하는지를 그린다.[6]비록 비디오 조작은 다른 비디오 클립들을 압착하는 것으로 생각될 수 있지만, 비디오 조작의 종류는 그것보다 더 확장된다.예를 들어, 배우는 얼굴을 움직이는 카메라 앞에 앉을 수 있다.그러면 컴퓨터는 버락 오바마의 기존 비디오에서 실시간으로 똑같은 얼굴 움직임을 만들어 낸다.배우가 고개를 흔들면 오바마도 고개를 가로젓고, 배우가 말을 할 때도 마찬가지다.[6]이것은 가짜 콘텐츠를 만들 뿐만 아니라 비디오와 오디오가 한때 많은 사람들에게 가장 신뢰할 수 있는 유형의 매체였기 때문에 다른 유형의 가짜 뉴스보다 훨씬 더 진실한 것으로 그 내용을 가린다.

비디오 조작의 가장 위험한 부분 중 하나는 정치라는 개념이다; 선거 비디오는 다른 나라에 위협이 되도록 조작되고 있다.[2]다트머스 대학교 컴퓨터 과학 교수 Hany Farid는 비디오 조작과 그것의 위험에 대해 언급했다.패리드는 "배우들이 트럼프 대통령이 핵무기 발사를 주장하는 영상을 만들 수 있다"고 했다.이 조작된 영상들은 실수를 고치기 전에 소셜 미디어에 공유될 수 있고, 어쩌면 전쟁을 초래할 수도 있다.[2]조작된 영상과 오디오가 존재함에도 불구하고, 연구팀은 이 문제를 해결하기 위해 노력하고 있다.독일의 정보학자들을 위한 막스 플랑크-인스티튜트에서 이 기술을 연구하는 팀의 일원인 크리스티안 테오발트 교수는 연구원들이 가짜를 탐지하기 위한 법의학적 방법을 만들어냈다고 말한다.[6]

워싱턴포스트(WP)의 팩트체크팀은 다음의 3가지 범주로 분류되는 6가지 형태의 영상 조작을 확인했다.[7]

  1. 누락된 컨텍스트
    • 잘못된 표현:원본 비디오 영상을 잘못된 컨텍스트에 배치하여 시청자에게 잘못된 정보 제공
    • 분리: 전체 비디오와 다른 서사를 제공하는 비디오의 짧은 세그먼트 게시
  2. 기만 편집
    • 누락:동영상에서 주요 세그먼트를 제거하여 다른 사례 표시
    • 스플리싱: 다른 비디오의 세그먼트를 결합하여 개별 비디오에서 지원하지 않는 서사를 형성
  3. 악의적 변환
    • 치료:비디오 프레임 직접 수정
    • 제작:기술을 사용하여 딥페이크와 같은 가짜 비디오 구성

영상 조작과 가짜뉴스

가짜뉴스가 대중문화에서 점점 더 두드러지고 오디오와 영상조작 기술이 급속도로 발전하면서 대중은 점점 기만적인 동영상으로 뒷받침되는 가짜뉴스를 접하고 있다.[2]가짜뉴스의 유형별로 보면 분류될 가능성은 계속 확대되고 있지만 풍자나 패러디, 선별적 보도, 허술한 저널리즘, 클릭배트, 음모 등 5가지 주요 유형을 포함하고 있다.[2]가짜뉴스 5종류가 세계적으로 두드러지지만 가장 파괴적인 가짜뉴스 중 하나는 5종류 모두 안에 있으며 영상과 오디오 조작이다.영상과 오디오 조작은 얼굴 인식과 같은 인공지능의 보조적 방법에 기존의 영상 처리와 영상 편집 기법을 결합해 디지털 영상을 표적으로 하는 미디어 조작의 새로운 변형으로 정의된다.심미적 효과를 위해 제작된 예술 영상부터 (대량) 조작과 선전을 목적으로 한 영상까지 다양한 결과가 나와 사진 조작의 오랜 가능성을 직설적으로 확장한 것이다.

디지털 페이크

디지털 페이크(digital fake)는 디지털 애플리케이션 소프트웨어에 의해 변형되거나 조작된 디지털 비디오, 사진 또는 오디오 파일을 말한다.딥페이크 동영상은 디지털 페이크 미디어의 범주에 속하지만, 딥페이크라고 여겨지지 않고 디지털로 변형될 수도 있다.이러한 변경은 오락적인 목적이나, 악덕을 퍼뜨리는 것과 같은 더 사악한 목적을 위해 행해질 수 있다.이 정보는 악의적인 공격, 정치적 이득, 금융 범죄 또는 사기를 행하는 데 사용될 수 있다.

참조

  1. ^ Pea, Roy (2006). "Chapter 55: Video-as-Data and Digital Video Manipulation Techniques for Transforming Learning Sciences Research, Education, and Other Cultural Practices". In Weiss, J.; et al. (eds.). The International Handbook of Virtual Learning Environments. Springer. pp. 100–110.
  2. ^ a b c d e "Fake news: The dangerous new technology that will make us question our basic idea of reality — Quartz". qz.com. Retrieved 2018-11-14.
  3. ^ "Edit Suite: Once Upon a Time: The History of Videotape Editing - Videomaker". Videomaker. 1997-07-01. Retrieved 2018-11-14.
  4. ^ "Fun Facts and Dates in Digital Editing 'Firsts' - The Beat: A Blog by PremiumBeat". The Beat: A Blog by PremiumBeat. 2011-12-10. Retrieved 2018-11-14.
  5. ^ "Face2Face: Real-time Face Capture and Reenactment of RGB Videos". gvv.mpi-inf.mpg.de. Retrieved 2019-12-18.
  6. ^ a b c d Schellmann, Hilke. "Deepfake Videos Are Getting Real and That's a Problem". WSJ. Retrieved 2018-11-14.
  7. ^ "Seeing Isn't Believing: The Fact Checker's guide to manipulated video". The Washington Post. June 25, 2019. Retrieved January 19, 2021.