Sonic 인터랙션 설계

Sonic interaction design

Sonic Interaction Design은 인터랙티브 [1][2]컨텍스트에서 정보, 의미 및 미적/감정적 특성을 전달하는 주요 채널 중 하나로서 소리를 연구하고 활용하는 것입니다.Sonic 인터랙션 설계는 인터랙션 설계와 사운드음악 컴퓨팅의 교차점에 있습니다.상호작용 설계가 사람과 상호작용하는 대상을 설계하는 것이고, 그러한 상호작용이 계산수단에 의해 촉진된다면, 음향 상호작용 설계에서는 소리는 프로세스의 표시 또는 입력 매체로서 상호작용을 매개한다.

연구 분야

음파 상호작용에 대한 지각, 인지 및 감정 연구

영역의 연구는 대화형 맥락에서 [3]인간의 소리 수신에 대한 실험적인 과학적 발견에 초점을 맞추고 있다.

클로즈드 루프 상호 작용 중에 사용자는 소리를 내는 인터페이스를 조작하고 소닉 피드백은 사용자의 조작에 영향을 줍니다.즉, 청각적 지각과 [4]행동 사이에는 긴밀한 결합이 있다.소리를 듣는 것은 소리가 어떻게 만들어졌는지에 대한 표현을 활성화 할 뿐만 아니라 듣는 사람이 소리에 반응하도록 준비시킬 수도 있습니다.소리의 인지적 표현은 행동 계획 스키마와 연관될 수 있으며, 소리는 무의식적으로 [5]듣는 사람의 더 큰 반응을 나타낼 수 있습니다.

소닉 인터랙션은 사용자의 감정에 영향을 미칠 가능성이 있습니다.소리의 품질은 인터랙션의 쾌적함에 영향을 미치고 조작의 어려움은 사용자가 통제력을 느끼는지 [6]여부에 영향을 미칩니다.

제품 사운드 디자인

소닉 인터랙션 디자인의 맥락에서 제품 디자인은 현저한 소닉 거동을 가진 인터랙티브 제품을 설계하기 위한 방법과 경험을 다룬다.이 맥락에서 제품은 [7][8]조작할 수 있도록 설계된 유형 및 기능적 객체이거나 가상 프로토타이핑에서와 같이 이러한 객체의 사용 가능한 시뮬레이션입니다.이 영역의 연구 및 개발은 다음과 같은 다른 분야의 연구에 의존합니다.

  • 제품 [9]음질
  • 음향 생태학, 소리를 통해 생물과 그 환경 사이의 관계
  • 필름 [10]사운드
  • 컴퓨터비디오 게임 [11]사운드
  • 건전한 문화,소리의 생산과 소비가 역사를 통해 그리고 다른 사회 내에서 어떻게 변화해왔는지에 대한 연구.

소닉 제품의 디자인 연구에서는 다양한 분야에서 일련의 관행이 계승되어 왔습니다.그러한 관행은 연구와 교육학이 자연스럽게 혼합되는 맥락에서 시험되었다.이러한 프랙티스에 대해서는, 다음과 같이 언급해 주세요.

  • 바디스토밍(특히 보이스 [12]스케치와 조합할 경우)은 특히 참가자가 상호작용하는 동안 사물의 소닉 동작을 모방하기 위한 성대 모사를 제작하는 것입니다.
  • 연극적 은유 및 연극적 [13]공연과 같은 연극적 연습
  • 시연 및 상호주체성에 기초한 기본 [14]설계
  • 소닉 오버레이를 사용한 비디오[15] 프로토타이핑;
  • 영화 [16]제작에서의 폴리 예술성
  • 사운드 드라마를 [17]연기하고 있습니다.

인터랙티브 아트 및 음악

소닉 인터랙션 디자인의 맥락에서 인터랙티브 아트 및 음악 프로젝트는 소닉 인터랙션이 초점인 심미적 경험을 설계하고 연구합니다.창조적이고 표현적인 측면, 즉 미학은 소리를 통해 정보를 전달하는 것보다 더 중요합니다.실천에는 설치, 공연, 공공 예술, 디지털로 증강된 사물/환경을 통한 인간 간의 상호작용 등이 포함됩니다.임베디드 테크놀로지, 제스처 대응 디바이스, 스피커, 컨텍스트 인식 시스템 등의 요소를 통합하는 경우가 많습니다.

이 경험은 인간이 소리에 어떻게 영향을 받는지, 그리고 그 반대인 것에 초점을 맞추고 있다.인터랙티브한 예술과 음악은 연구자들이 통제 패러다임(인간이 기계를 제어하는 것)을 넘어 기술과 소리와 어떻게 상호작용하는지에 대한 기존 패러다임과 모델에 의문을 제기할 수 있게 해준다.사용자는 동작과 인식을 포함하는 루프의 일부입니다.

인터랙티브한 예술과 음악 프로젝트는 탐색적인 행동과 즐거운 참여를 유도합니다.다감각적인 측면도 있는데, 특히 햅틱[18] 오디오와 시청각 프로젝트가 인기가 있습니다.다른 많은 영향들 중에서, 이 분야는 악기 제작자, 작곡가 및 연주자의 [19]역할의 발전에 의해 정보를 얻고 있습니다.

소닉 인터랙션 디자인에서의 예술적 연구는 인터랙티브 아트 및 퍼포먼스 아트에서의 제작에 관한 것으로, 사운드를 증강한 인터랙티브 오브젝트에 [20]대한 능동적인 관여의 역할을 활용합니다.

소니제이션

음파는 변환이 체계적이고 객관적이며 재현 가능한 경우 과학적 [21]방법으로 사용될 수 있도록 데이터에 의존하는 소리의 생성이다.

소닉 인터랙션 설계의 경우, 소닉화는 사용자가 전달된 정보를 인식하거나 해석할 수 있도록 관련 데이터를 인코딩하는 인터랙션 사운드를 생성하는 일련의 방법을 제공합니다.초음파 검사는 반드시 대량의 데이터를 소리로 나타낼 필요는 없지만, 1개 또는 소수의 데이터 값만 소리로 전달할 수 있습니다.예를 들어, 활성화 시 케이블을 통해 소비되는 전력에 따라 짧은 소리가 나는 조명 스위치를 상상해 보십시오. 에너지 소모가 많은 램프가 시스템적으로 더 성가신 스위치 소리를 발생시킬 수 있습니다.이 예에서는 소노라이제이션이 소리의 체계적인 변환을 사용하여 일부 정보를 제공하는 것을 목적으로 하고 있습니다.

인터랙션 사운드에 데이터 기반 요소를 통합하면 다음과 같은 다양한 목적을 달성할 수 있습니다.

  • 사용자가 청각적 피드백을 통해 자신의 행동을 개선할 수 있도록 한다.예: 원하는 벽의 방향에 도달하면 소리로 알려주는 초음파 처리 강화 드릴링[22] 머신.
  • 인간이 자신의 [23]신체 움직임을 어떻게 인지하는지에 영향을 미칠 수 있습니다.
  • 사용자가 반복된 상호작용에 대한 자세한 성능을 비교할 수 있도록 하는 상호작용을 위한 소닉 게슈탈트를 만듭니다. 예를 들어 노 젓는 스트로크를 음파 처리하여 운동선수가 동작을 더 잘 동기화할 수 있도록 할 수 있습니다.
  • 그렇지 않으면 사용할 수 없는 새로운 기능(예를 들어, 사용자가 다양한 잔에 같은 양의 액체를 더 쉽게 채울 수 있도록 유리잔에 얼마나 많은 액체를 붓는지 소리로 표시하는 병)을 가능하게 한다.

음파화 분야에서 음파 상호작용 설계는 청각 [24]피드백을 이해하고 사용하기 위한 인간 상호작용의 중요성을 인정한다.소닉 인터랙션 설계에서는 제품 또는 인터랙티브 시스템의 설계에 영감을 주고 안내하기 위한 솔루션, 방법 및 기술을 제공합니다.

「 」를 참조해 주세요.

레퍼런스

  1. ^ 다비데 로체소, 스테파니아 세라핀, 프라우케 베렌트, 니콜라 베르나르디니, 로베르토 브레신, 게르하르트 에켈, 카르멘 프라노비치, 토마스 헤르만, 산드라 파울레토, 패트릭 수시니, 욘 비셀, (2008).Sonic 인터랙션 설계: 사운드, 정보, 익스피리언스.인: CHI '08년 컴퓨터 시스템의 인적 요소에 관한 확장 요약 (Florence, 이탈리아, 2008년 4월 5일 ~ 10일)CHI ' 08년.ACM, 뉴욕, 뉴욕, 3969-3972.doi:10.1145/1358628.1358969
  2. ^ 다비데 로체소와 스테파니아 세라핀, (2009)."소닉 인터랙션 설계"특집호 편집International Journal of Human-Computer Studies 67 (11) (2009년 11월) : 905 ~ 906 . doi : 10 . 1016 / j . ijhcs . 2009 . 09 . 009
  3. ^ 기욤 레마이트레, 올리비에 후익스, 욘 비젤, 카르멘 프라노비치, 니콜라스 미스다리스, 패트릭 수시니(2009).「유형 인터페이스에서의 연속음의 설계와 평가를 향해서:스피노트론.International Journal of Human-Computer Studies 67 (11) (2009년 11월): 976~993.doi:10.1016/j.ijhcs.2009.07.002
  4. ^ 살바토레 M아글리오티와 마리엘라 파자글리아(2010)."음향으로 표현"'실험적 뇌 연구' 206(2): 141~151. doi: 10.1007/s00221-010-2344-x
  5. ^ Marzia De Lucia, Christian Camen, Stephanie Clarke 및 Mika M. Murray(2009)."청각 변별에서의 작용의 역할"'뉴로이미지' 48(2): 475~485.doi:10.1016/j.neuroimage. 2009.06.041
  6. ^ 기욤 레마이트레, 올리비에 후익스, 카르멘 프랑니노비치, 욘 비젤, 패트릭 수시니(2009)."플롭스 글라스: 음파 상호작용에서 발생하는 감정 반응을 연구하는 장치입니다."인프로그래프포르투갈, 포르토, 사운드 및 음악 컴퓨팅 컨퍼런스사용 가능: [1]
  7. ^ 다니엘 허그(2008년).병 속의 지니: 인터랙티브 커머셜의 오브젝트-사운드 재구성.인: Audiomostly 2008, 제3회 사운드와의 상호작용에 관한 회의(2008년).이용가능: 온라인
  8. ^ Karmen Franinovis, Daniel Hug 및 Yon Viseell(2007년 6월).사운드 구현: 작업장 환경에서 일상 사물을 위한 Sonic Interaction Design 탐색In: 2007년 6월 26일부터 29일까지 캐나다, 몽트렐, 제13회 청각 디스플레이 국제 회의의 진행 상황, 페이지 334~341.이용가능: 온라인
  9. ^ 리처드 H. 라이온 (2003)"인식에서 디자인까지 제품 음질"소리진동 37(3): 18~22.이용가능: 온라인
  10. ^ filmsound.org: 아트 오브 필름 사운드 디자인 전용 학습 공간 참조
  11. ^ gamesound.org에 대해서
  12. ^ Inger Ekman과 Michal Rinott, (2010).덴마크 오르후스의 음성 스케치를 사용하여 소닉 인터랙션을 디자인합니다.인터랙티브 시스템 아카이브 설계, 제8회 인터랙티브 시스템 설계에 관한 ACM 회의의 속행, ISBN978-1-4503-0103-9.이용 가능: 온라인.
  13. ^ 산드라 폴레토, 다니엘 허그, 스티븐 바라스와 메리 럭허스트(2009).극장 전략을 Sonic Interaction Design에 통합.인: 오디오 진행 대부분 2009– 제4회 사운드와의 상호작용에 관한 회의 (2009), 글래스고, 6 p. 이용 가능: PDF 어카이브 2011-08-27 (Wayback Machine 및 온라인)
  14. ^ 다비데 로체소, 피에트로 폴로티, 스테파노 델레 모나체(2009년 12월 28일)."연속 소닉 인터랙션 설계"국제 디자인 저널 3(3)이용가능: 온라인PDF
  15. ^ 웬디 E.맥케이와 앤 로레 페야드(1999년).비디오 브레인스토밍 프로토타이핑: 참여형 설계를 위한 기술(펜실베이니아주 피츠버그):컴퓨터 시스템의 인적 요소에 관한 컨퍼런스, 컴퓨터 시스템의 인적 요소에 관한 CHI '99 확장 요약, ISBN 1-58113-158-5.이용가능: 온라인
  16. ^ Michel Chion, (1994년.Audio-Vision: 화면상의 사운드.뉴욕: 콜롬비아 대학 출판부, ISBN 0-231-07898-6, ISBN 0-231-07899-4.f ilmsound.org에서의 서평
  17. ^ 다니엘 허그(2010)."인터랙티브 상품의 내러티브 및 퍼포먼스 사운드 디자인 전략 조사"컴퓨터 공학 강의 노트, 제5954/2010권: 12-40, doi:10.1007/978-3-642-12439-6_2.제공: 2012-12-17년 온라인 아카이브(archive.오늘)
  18. ^ 2010년 9월 16일부터 17일까지 덴마크 코펜하겐에서 열린 제5회 햅틱 및 오디오 인터랙션 디자인(HAID) 국제 워크숍.http://media.aau.dk/haid10/? page_id=46
  19. ^ 음악표현을 위한 새로운 인터페이스에 관한 국제회의 http://www.nime.org/
  20. ^ 존 톰슨, 조앤 쿠체라-모린, 마르코스 노박, 댄 오버홀트, 랜스 퍼넘, 그레이엄 웨이크필드, 웨슬리 스미스(2009).「알로브레인:인터랙티브, 입체, 3D 오디오, 몰입형 가상 세계.International Journal of Human-Computer Studies (2009년 11월) : 934~946.doi : 10.1016/j.ijhcs . 2009.05.005
  21. ^ Sonification – 정의 http://sonification.de/son/definition
  22. ^ Tobias Grosshauser와 Thomas Hermann(2010)."다중 폐쇄 루프 인간 기계 상호 작용" Proc.대화형 소음 워크숍(스톡홀름, http://interactive-sonification.org/ISon2010/proceedings
  23. ^ Effenberg, Alfred O. (2005). "Movement sonification: Effects on perception and action". IEEE MultiMedia. 12 (2): 53–59. doi:10.1109/MMUL.2005.31. S2CID 5211383.
  24. ^ 토마스 헤르만, 앤디 헌트(2005)."게스트 에디터 소개:인터랙티브 소니의 개요」를 참조.IEEE 멀티미디어 12(2): 20~24.doi:10.1109/MUL.26

추가 정보

  • 프랜노비치, K, 세라핀, 에즈Sonic 인터랙션 설계MIT Press, 매사추세츠주 캠브리지, 2013.
  • 스테파노 델레 모나체, 피에트로 폴로티, 다비데 로체소(2010).Sonic Interaction Design의 탐색을 위한 툴킷.인: 제5회 오디오 대부분 컨퍼런스: A Conference on Interaction with Sound, 2010, 뉴욕(AM '10), ISBN 978-1-4503-0046-9, doi: 10.1145/18597.1859800, 인용문
  • Eoin Brazil and Mikael Fernström, (2009).경험적 기반 청각 디스플레이 설계.인: 2009년 7월 23일~25일 포르투갈 포르토에서 열린 SMC 2009 - 제6회 사운드 및 음악 컴퓨팅 컨퍼런스 진행.이용 가능: 온라인.
  • 카르멘 프랑니노비치, 욘 비젤, 다니엘 허그, (2007).Sound Embediated: 일상적 아티팩트의 Sonic Interaction Design에 관한 보고서.인: 2007년 6월 26일부터 29일까지 캐나다 몬트렐에서 열린 제13회 청각 디스플레이 국제회의의 속행.이용 가능: 온라인.
  • 어니스트 A.Edmonds, Alastair Wickley, Linda Candy, Mark Fell, Roger Knott, Sandra Paulletto, (2005)「Studio as Laboratory: Creative Practice and Digital Technology Research」.국제 인간 기계 연구 저널 63(4-5): 452-481.이용 가능: 온라인.
  • 어니스트 에드먼즈, 앤드류 마틴, 산드라 폴레토(2004).디지털 아트에서의 시청각 인터페이스.인: 2004년 ACM SIGCHI International Conference on Advances in Computer Entertainment Technology (ACE '04), 싱가포르, 2004년 6월 3-5일, 페이지 331-336, doi:10.1145/1067343.1067392.이용 가능: 온라인.
  • 토마스 헤르만과 앤디 헌트, (2004).소음화에 있어서의 상호작용의 중요성.인: 2004년 7월 6일부터 9일까지 호주 시드니, 국제 청각 디스플레이 회의 ICAD 제10차 회의 진행.이용 가능: 온라인.
  • Niklas Röber와 Maic Masuch, (2004).소리와의 상호작용: 가상 청각 세계를 위한 상호작용 패러다임.인: 2004년 7월 6일부터 9일까지 호주 시드니, 국제 청각 디스플레이 회의 ICAD 제10차 회의 진행.이용 가능: 온라인.

외부 링크