비디오 브라우징

Video browsing

탐색적 비디오 검색으로도 알려진 비디오 브라우징은 어떤 정보 요구를 충족하거나 비디오 컨텐츠가 관련이 있는지 대화식으로 확인하기 위해 비디오 컨텐츠를 훑어보는 대화식 과정입니다.당초 비주얼 [1]썸네일을 통해 단일 비디오를 검사할 수 있도록 제안되었지만, 최신 비디오 브라우징 툴을 사용하면 탐색 검색 접근 [2][3]방식을 통해 인간과 컴퓨터의 상호작용을 반복함으로써 비디오 아카이브에서 원하는 정보를 빠르게 찾을 수 있습니다.이러한 툴의 대부분은, 자동 컨텐츠 필터링 기능 뿐만이 아니라, 비디오 컨텐츠를 인터랙티브하게 검사하는 기능을 필요로 하는 스마트 유저를 상정하고 있습니다.그 때문에, 통상, 비디오의 고도의 네비게이션이나 컨텐츠 베이스의 쿼리에 의한 검색 등, 몇개의 비디오 인터랙션[4] 기능이 제공됩니다.비디오 브라우징 툴은 숏트랜지션 검출, 키 프레임 추출, 시맨틱 컨셉 검출 등의 하위 레벨의 비디오 콘텐츠 분석을 기반으로 구축되어 비디오 파일 또는 비디오 아카이브의 구조화된 콘텐츠 개요를 작성하는 경우가 많습니다.게다가 통상, [5]고도의 타임 라인, 비주얼 시커바, 선택된 섬네일 리스트등의 고도의 네비게이션 기능과 컨텐츠의 쿼리 수단을 제공합니다.콘텐츠 쿼리의 예로는 시각적 개념을 통한 샷 필터링(예: 자동차를 보여주는 샷만), 특정 특성(예: 색상 또는 모션 필터링), 사용자가 제공한 스케치(예: 시각적으로 그린 스케치) 또는 콘텐츠 기반 유사성 검색을 통한 샷 필터링이 있다.

역사

비디오 브라우징은 지멘스에서 일하던 이란 엔지니어 Farshid Arman, 대만 컴퓨터 과학자 Arding Hsu, 컴퓨터 과학자 Ming-Yee Chiu에 의해 [1][6]처음 제안되었으며 1993년 8월 ACM 국제회의에서 발표되었습니다.이들은 JPEG, MPEG 및 H.26x와 같은 이산 코사인 변환(DCT) 비디오 코딩 표준으로 인코딩된 압축 비디오의 샷 검출 알고리즘을 설명했습니다.기본적인 생각은 DCT 계수가 공간 영역과 수학적으로 관련되고 각 프레임의 내용을 나타내기 때문에 비디오 프레임 간의 차이를 검출하는 데 사용할 수 있다는 것이었다.프레임내의 블록의 서브셋과 각 블록의 DCT 계수의 서브셋을 프레임의 움직임 벡터 표현으로서 이용한다.이 알고리즘은 압축된 DCT 표현으로 동작함으로써 압축 해제에 필요한 계산 요건을 대폭 줄이고 효과적인 비디오 [7]브라우징을 가능하게 합니다.이 알고리즘은 비디오 시퀀스의 개별 샷을 R 프레임으로 나타냅니다.R 프레임은 모션트래킹 영역에 의해 프레임화된 샷의 섬네일입니다.이 개념의 변형은 나중에 QBIC 비디오 콘텐츠 모자이크를 위해 채택되었습니다. 여기서 각 r 프레임은 그것이 나타내는 [8]샷의 돌출부입니다.

비디오 노트북

최신 비디오 브라우징 솔루션에는 Mike Lanza가 2021년에 설립한 Menlo Park 스타트업 Video Notebook이 포함됩니다.이 스타트업은 컴퓨터 비전을 사용하여 슬라이드를 추출하고 광학 문자 인식 및 음성 인식을 통해 비디오 검색을 용이하게 합니다.소프트웨어는 클라이언트 측(브라우저 확장 사용)에서 사용할 수 있습니다.클라이언트 측에서는 비디오 시청 중에 슬라이드나 텍스트를 추출할 수 있습니다(YouTube나 Udemy [9][10]등의 비디오 플랫폼).처리된 비디오는 Video Notebook 웹 앱에서 볼 수 있으며, 추출된 타임스탬프 슬라이드가 있는 비디오 브라우징 사용자 인터페이스, 비디오(또는 비디오 모음)를 조회하기 위한 검색 바 및 텍스트 장을 갖추고 있습니다.Video Notebook 고객에는 Ernst 및 [11]Young 등의 조직이 포함되어 있습니다.

비디오 브라우저 대결

VBS([12]Video Browser Showdown)는 매년 열리는 비디오 검색 툴의 라이브 평가 대회로, 국제적인 연구자가 비디오 브라우징 툴을 사용하여 중간 정도의 대규모 데이터 세트에서 애드혹 비디오 검색 태스크를 가능한 한 신속하게 해결합니다.2012년 국제멀티미디어모델링회의(MM)에서 시작된 VBS의 주요 목표는 동영상 브라우징 툴의 성능을 향상시키는 것이다.2016년부터 VBS는 TECVID와도 [13]협력하고 있습니다.

레퍼런스

  1. ^ a b Arman, Farshid; Depommier, Remi; Hsu, Arding; Chiu, Ming-Yee (October 1994). "Content-based Browsing of Video Sequences". Proceedings of the Second ACM International Conference on Multimedia. Association for Computing Machinery: 97–103. doi:10.1145/192593.192630. ISBN 0897916867. S2CID 1360834.
  2. ^ 비디오 라이브러리 탐색 검색 지원: 스토리보드가 충분하지 않은 경우.M. G. 크리스텔2008.
  3. ^ 비디오 탐색기 - 빠른 콘텐츠 분석을 기반으로 한 단일 비디오 내에서 탐색 및 검색을 위한 도구입니다.K. 쇼프만, M.술잔, 그리고 L.보에조르메니2010.
  4. ^ 비디오 인터랙션 도구: 최근 연구 조사. K. Schoffmann, M. A. Hudelist 및 J.휴버, 2015년
  5. ^ 타임라인 기반의 모바일 비디오 브라우징을 위한 인터페이스.W. Hurst와 K.마이어, 2008년
  6. ^ Arman, Farshid; Hsu, Arding; Chiu, Ming-Yee (August 1993). "Image Processing on Compressed Data for Large Video Databases". Proceedings of the First ACM International Conference on Multimedia. Association for Computing Machinery: 267–272. doi:10.1145/166266.166297. ISBN 0897915968. S2CID 10392157.
  7. ^ Zhang, HongJiang (1998). "Content-Based Video Browsing And Retrieval". In Furht, Borko (ed.). Handbook of Internet and Multimedia Systems and Applications. CRC Press. pp. 83–108 (89). ISBN 9780849318580.
  8. ^ Steele, Michael; Hearst, Marti A.; Lawrence, A. Rowe (1998). "The Video Workbench: a direct manipulation interface for digital media editing by amateur videographers" (PDF): 1-19 (14). S2CID 18212394. Archived from the original (PDF) on 2019-02-26. Retrieved 18 October 2019. {{cite journal}}:Cite 저널 요구 사항 journal=(도움말)
  9. ^ "Video Notebook - Notes on all video platforms". chrome.google.com. Retrieved 2022-06-03.
  10. ^ "Video Screenshots and Notes - YouTube & more". www.videonotebook.com. Retrieved 2022-06-03.
  11. ^ "Videos made Browsable & Searchable - Video Notebook". www.videonotebook.com. Retrieved 2022-06-03.
  12. ^ 비디오 브라우저 대결
  13. ^ TECVID, NIST의 학술 벤치마크 이니셔티브