MPEG-7

MPEG-7

MPEG-7멀티미디어 콘텐츠 설명 표준이다.ISO/IEC 15938(멀티미디어 콘텐츠 설명 인터페이스)에서 표준화되었다.[1][2][3][4]이 설명은 사용자가 관심 있는 자료를 빠르고 효율적으로 검색할 수 있도록 내용 자체와 연관될 것이다.MPEG-7은 공식적으로 멀티미디어 콘텐츠 설명 인터페이스라고 불린다.따라서 MPEG-1, MPEG-2, MPEG-4와 같이 움직이는 사진과 오디오의 실제 인코딩을 다루는 표준은 아니다.메타데이터를 저장하기 위해 XML을 사용하며, 예를 들어 특정 이벤트에 태그를 지정하거나 가사노래동기화하기 위해 타임코드에 첨부할 수 있다.

표준화를 위해 다음과 같이 설계되었다.

  • 설명 체계 집합("DS") 및 설명자 집합("D")
  • Description Definition Language("DDL")라고 하는 이러한 체계를 지정하는 언어
  • 그 서술의 부호화 계획.

MPEG-4와 MPEG-7의 결합을 MPEG-47이라고 부르기도 했다.[5]

소개

MPEG-7은 콘텐츠 자체("비트에 관한 비트")가 아니라 콘텐츠에 관한 정보를 나타내는 이전의 MPEG 표준에 보완 기능을 제공하기 위한 것이다.이 기능은 멀티미디어 콘텐츠 설명의 표준화다.MPEG-7은 다른 MPEG 표준과 독립적으로 사용될 수 있다 - 설명은 아날로그 동영상에 첨부될 수도 있다.MPEG-4 내에서 정의되는 표현, 즉 객체에 관한 시청각 데이터의 표현은 MPEG-7 표준에 구축될 내용에 매우 적합하다.이러한 표현은 분류 과정의 기본이다.또한 MPEG-7 설명은 이전 MPEG 표준의 기능을 향상시키기 위해 사용할 수 있다.이 도구들로 우리는 MPEG-7 Description을 만들어서 배치할 수 있다.요구사항 문서에 따르면, 1 "설명서는 데이터를 설명하는 설명 체계(구조)와 설명자 값 집합(인스턴트)으로 구성된다."Descriptor Value는 "특정 데이터 세트(또는 그 부분 집합)에 대한 Descriptor의 인스턴스화"이다.Descriptor는 콘텐츠의 통사적, 의미적 정의다.추출 알고리즘은 상호운용성을 허용하기 위해 표준의 표준화가 필요하지 않기 때문에 표준의 범위 내에 있다.

부품.

MPEG-7(ISO/IEC 15938)은 서로 다른 부품으로 구성된다.각 부분은 전체 명세서의 특정 측면을 다룬다.

MPEG-7 부품[4][6]
부분 숫자 첫 공개일(제1판) 최신 공개 날짜(편집) 최근 수정안 제목 설명
1부 ISO/IEC 15938-1 2002 2002 2006 시스템들 MPEG-7의 아키텍처 프레임워크, MPEG-7 컨텐츠 운반 - TeM(MPEG-7의 텍스트 형식) 및 MPEG-7 설명의 이진 형식(BiM)[7]
2부 ISO/IEC 15938-2 2002 2002 설명 정의 언어
3부 ISO/IEC 15938-3 2002 2002 2010 비주얼
4부 ISO/IEC 15938-4 2002 2002 2006 오디오
5부 ISO/IEC 15938-5 2003 2003 2015 멀티미디어 설명 체계
6부 ISO/IEC 15938-6 2003 2003 2011 참조 소프트웨어.
7부 ISO/IEC 15938-7 2003 2003 2011 적합성 시험
8부 ISO/IEC TR 15938-8 2002 2002 2011 MPEG-7 설명 추출 및 사용
9부 ISO/IEC 15938-9 2005 2005 2012 종단 및 수준
10부 ISO/IEC 15938-10 2005 2005 스키마 정의
11부 ISO/IEC TR 15938-11 2005 2005 2012 MPEG-7 프로필 스키마
12부 ISO/IEC 15938-12 2008 2012 쿼리 형식
13부 ISO/IEC 15938-13 2015 2015 시각적 검색을 위한 콤팩트한 설명자

설명과 내용 사이의 관계

설명과 내용 사이의 독립성

MPEG-7 아키텍처 요건은 설명은 시청각 콘텐츠와 분리되어야 한다는 것이다.

반면에 내용과 서술 사이에는 관계가 있어야 한다.따라서 설명은 내용 자체와 함께 다중화된다.

오른쪽에서 설명과 내용 사이의 관계를 볼 수 있다.

MPEG-7 도구

MPEG-7의 공구와 공법의 관계

MPEG-7은 다음과 같은 도구를 사용한다.

  • 설명자(D): 구문론적으로 정의된 형상을 의미론적으로 표현한 것이다.그것은 독특한 개체가 여러 설명자에 의해 설명되었을 수도 있다.
  • 기술 체계(DS): 구성 요소 간의 관계에 대한 구조와 의미 체계를 명시하십시오. 이러한 구성 요소는 기술자(D) 또는 기술 체계(DS)가 될 수 있다.
  • 설명 정의 언어(DDL): 설명자 간의 구조적 관계를 정의할 때 사용되는 XML 언어를 기반으로 한다.기술 체계를 만들고 수정할 수 있으며, 또한 새로운 기술자(D)를 만들 수 있다.
  • 시스템 도구:이러한 도구는 설명자의 이진화, 동기화, 전송 및 저장을 다룬다.지적재산권 보호도 다룬다.

오른쪽에는 MPEG-7 도구 사이의 관계를 볼 수 있다.

MPEG-7 응용 프로그램

MPEG-7 표준의 혜택을 받을 많은 응용 프로그램과 응용 프로그램 도메인이 있다.몇 가지 적용 예는 다음과 같다.

  • 디지털 라이브러리:이미지/비디오 카탈로그, 음악 사전
  • 멀티미디어 디렉토리 서비스: 예를 들어 노란색 페이지.
  • 방송 매체 선택: 라디오 채널, TV 채널
  • 멀티미디어 편집:개인 맞춤형 전자 뉴스 서비스, 미디어 제작
  • 보안 서비스:교통 통제, 생산 체인...
  • E-비즈니스:제품 검색 프로세스.
  • 문화 서비스: 미술관, 박물관...
  • 교육용 애플리케이션.
  • 생물의학 응용.
  • 공식적인 표현과 자동화된 추론을 통해 낮은 수준의 멀티미디어 의미론을 활용하는 지능형 멀티미디어 애플리케이션.[8]

MPEG-7용 소프트웨어 및 데모자

  • 칼리프 & 에미:MPEG-7(GPL) 기반 영상의 주석 및 검색.MPEG-7 XML [9]파일 작성
  • C# 구현:C#에서 MPEG-7 설명자의 오픈 소스 구현.
  • Frameline 47 비디오 표기법:다목적 배송 시스템의 Frameline 47.첫 번째 상용 MPEG-7 애플리케이션인 Frameline 47은 MPEG-7 규약(상업 도구)에 따라 전체 비디오 파일 또는 해당 비디오 파일 내의 세그먼트와 세그먼트를 공증할 수 있도록 MPEG-7에 기반한 고급 콘텐츠 스키마를 사용한다.
  • Eptascape ADS200은 아날로그 카메라 비디오 신호에 실시간 MPEG 7 인코더를 사용하여 특히 보안 감시 애플리케이션에서 흥미로운 이벤트를 식별하고 데모를 점검하여 MPEG-7이 작동하는 것을 확인(상업 도구)
  • IBM VideoAnnEx 주석 도구: 구조를 설명하고 통제된 어휘에서 키워드를 제공하는 비디오 스트림을 위한 MPEG-7 문서 작성(이중 릴리즈, 제한적 라이센스)
  • iFinder Medienanaly- Und Retrievalsystem:MPEG-7(상업 도구) 기반 메타데이터 추출 및 검색 엔진
  • MPEG-7 오디오 인코더: 낮은 수준의 오디오 특성을 설명하는 오디오 문서에 대한 MPEG-7 문서 작성(이진 & 소스 릴리스, Java, GPL)
  • MPEG-7 Visual Descriptor 추출:이미지 및 이미지 영역에서 MPEG-7 시각적 설명자를 추출하는 소프트웨어.
  • XM 기능 추출 웹 서비스:eXperimation Model(XM)의 기능은 웹 서비스 인터페이스를 통해 사용할 수 있도록 하여 영상의 MPEG-7 저수준 시각적 설명 특성 자동화를 가능하게 한다.
  • TU 베를린 MPEG-7 오디오 분석기(웹-데모):오디오 문서(WAV, MP3)용 MPEG-7 문서(XML) 작성.17개의 MPEG-7 로우 레벨 오디오 설명자 모두 구현(상업)
  • TU 베를린 MPEG-7 음성 콘텐츠 시연자(웹-데모):입력 음성 신호(WAV, MP3)에서 SpeakContent 설명이 포함된 MPEG-7 문서(XML) 작성(상업)
  • MP7JRS C++ 라이브러리 Joanfirmed Research Institute for Information and Communication Technologies - AudioVisual Media Group이 3, 4, 5부(시각, 오디오 및 MDS)의 MPEG-7 구현 완료.
  • BilVideo-7: MPEG-7 호환, 분산형 비디오 인덱싱 및 검색 시스템, 복잡한 멀티모달 복합 질의 지원; 빌켄트 대학교 멀티미디어 데이터베이스 그룹(BILMDG)에서 개발.
  • UniSay: MPEG-7을 기반으로 한 정교한 포스트 프로덕션 파일 분석 및 오디오 처리.

참고 항목

제한 사항

MPEG-7 표준은 원래 반구조화된 데이터구성하는 XML 스키마(XSD)로 작성되었다.예를 들어, XML의 MPEG-7을 사용하여 주석을 단 영화의 실행시간은 기계 판독이 가능한 데이터여서, 소프트웨어 에이전트는 실행시간을 표현하는 숫자가 양의 정수라는 것을 알겠지만, 그러한 데이터는 '대양적 간격'이라고 알려진 의미론(의미)을 전달하지 않기 때문에 기계 해석(에이전트가 이해할 수 없음)이 불가능하다.이 문제를 해결하기 위해 MPEG-7 XML 스키마를 MPEG-7 표준의 용어(MPEG-7Ontos, COMM, SWIntO 등)에 해당하는 구조화된 데이터Web Ontology Language(OWL)에 매핑하려는 시도가 많았다.그러나, 낮은 수준의 비디오 기능만으로는 비디오 의미론을 나타내기에는 불충분하기 때문에, 이러한 매핑은 실제로 "Semantic Gap"[10]을 연결하지 못했다.즉, 색상 분포와 같이 자동으로 추출되는 비디오 기능에 주석을 달면 실제 시각 콘텐츠의 의미가 제공되지 않는다는 것이다.[11]

비교하다

참조

  • B.S. Manjunath(에디터), Philipe Salembier(에디터), Thomas Sikora(에디터):MPEG-7 소개: 멀티미디어 콘텐츠 설명 인터페이스Wiley & Sons, 2002년 4월 - ISBN0-471-48678-7
  • Harald Kosch: MPEG-7과 MPEG-21에서 지원되는 분산 멀티미디어 데이터베이스 기술.CRC 프레스, 2004년 1월 - ISBN 0-8493-1854-8
  • 조르고스 스타무(에디터)와 스테파노스 콜리아스(에디터):멀티미디어 콘텐츠 및 시맨틱 웹: 표준, 방법 및 도구Wiley & Sons, 2005년 5월 - ISBN 0-470-85753-6
  • 김형국, 니콜라스 모로, 토마스 시코라: MPEG-7 오디오 및 그 이상:오디오 콘텐츠 인덱싱 및 검색.Wiley & Sons, 2005년 10월 - ISBN 0-470-09334-X
  1. ^ ISO. "ISO/IEC 15938-1:2002 - Information technology -- Multimedia content description interface -- Part 1: Systems". Retrieved 2009-10-31.
  2. ^ MPEG. "About MPEG - Achievements". chiariglione.org. Archived from the original on July 8, 2008. Retrieved 2009-10-31.
  3. ^ MPEG. "Terms of Reference". chiariglione.org. Archived from the original on February 21, 2010. Retrieved 2009-10-31.
  4. ^ a b MPEG. "MPEG standards - Full list of standards developed or under development". chiariglione.org. Archived from the original on April 20, 2010. Retrieved 2009-10-31.
  5. ^ NetworkDictionary. "Complete Protocol dictionary, glossary and reference - M". Archived from the original on 2010-01-01. Retrieved 2009-12-26.
  6. ^ ISO/IEC JTC 1/SC 29 (2009-10-30). "MPEG-7 (Multimedia content description interface)". Archived from the original on 2013-12-31. Retrieved 2009-11-10.
  7. ^ ISO/IEC JTC1/SC29/WG11 (October 2004). "MPEG-7 Overview (version 10)". chiariglione.org. Retrieved 2009-11-01.
  8. ^ "MPEG-7 Ontology". Retrieved 29 June 2017.
  9. ^ 럭스, 마티아스"Caliph & Emir: MPEG-7 사진 주석 및 검색."멀티미디어에 관한 제17회 ACM 국제회의의 진행.ACM, 2009.
  10. ^ Sikos, Leslie F.; Powers, David M.W. (2015). "Knowledge-Driven Video Information Retrieval with LOD": 35–37. doi:10.1145/2810133.2810141. {{cite journal}}:Cite 저널은 필요로 한다. journal=(도움말)
  11. ^ Boll, Susanne; Klas, Wolfgang; Sheth, Amit (1998). "Overview on Using Metadata to Manage Multimedia Data". Using Metadata to Integrate and Apply Digital Media. McGraw-Hill. p. 3. ISBN 978-0070577350.

외부 링크