비세메

Viseme

시각(Viseme)은 예를 들어 입술 판독(Fisher 1968년) 시와 동일하게 보이는 여러 음성 소리 중 하나이다.

visemes와 음핵은 일대일 통신을 공유하지 않는다. Often several phonemes correspond to a single viseme, as several phonemes look the same on the face when produced, such as /k, ɡ, ŋ/, (viseme: /k/), /t͡ʃ, ʃ, d͡ʒ, ʒ/ (viseme: /ch/), /t, d, n, l/ (viseme: /t/), and /p, b, m/ (viseme: /p/). 따라서 애완동물, 종, 남자 등의 단어는 모두 /pet/처럼 보이듯이 립글을 읽는 사람이 구별하기 어렵다. 단, 단 한 장의 사진으로 촬영할 수 없는 주어진 동작의 시각적 '서명' 측면에서 실제 음성에서의 타이밍과 지속시간에 차이가 있을 수 있다. 반대로 음향학적으로 구별하기 어려운 몇몇 소리들은 얼굴 (Chen 2001)에 의해 명확하게 구별된다. 예를 들어, 음향학적으로 말하는 영어 /l/와 /r/는 상당히 비슷할 수 있지만(특히 '그래스' 대 '유리'와 같은 클러스터에서는), 시각적 정보는 뚜렷한 대비를 보여줄 수 있다. 이것은 직접보다 전화에서 말을 잘못 듣는 일이 더 빈번하게 일어나는 데서 증명된다. 일부 언어학자들은 언어는 양면체(농어와 시각적)로 가장 잘 이해되며, 이 두 영역 중 하나가 없을 경우 이해력이 저하될 수 있다고 주장해왔다(McGurk와 MacDonald 1976).

비셈은 종종 "사랑해"와 같은 립레드가 나타날 때 "코끼리 주스"라는 구절에서처럼 유머러스하게 보일 수 있다.

시각장애 연구 지원서는 음성 처리, 음성 인식, 컴퓨터 얼굴 애니메이션 등이 있다.

참고 항목

참조

  • 첸, T. (1998년 5월) "다중 모드 통신에서의 시청각 통합" IEEE 86, 837–852의 절차.
  • 첸, T.(2001년). "시청각 음성 처리" IEEE 신호 처리 매거진, 9-31.
  • 피셔, C. G. (1968년) "시각적으로 인식되는 자음 사이의 충돌" 음성 및 청각 연구 저널, 11:796–804.
  • 맥거크, H., 맥도날드, J. (1976년 12월) "입술 고르고 목소리 보고" 네이처, 746-748
  • 패트릭 루시, 테렌스 마틴, 스리다 스리다하란(2004) "소음 환경에서의 시각적 클래스에 따라 분류된 음소의 차이" 2004년 12월 8~10일 시드니 맥쿼리 대학교에서 열린 제10회 호주 음성 과학 기술 국제 컨퍼런스에서 발표. 기사 온라인(PDF 문서)