실시간 델파이

Real-time Delphi
미래학
FuturesStudies.svg
개념
기술
기술 평가 및 예측

실시간 델파이(RTD)는 델파이 방식의 고급 형태다.선진화된 방법은 델파이 프로세스의 효율성을 높이기 위해 "컴퓨터 기술을 활용한 협의 과정"이다.

정의와 아이디어

Gordon과 Pease는 순차적 "원형"을 포함하지 않고 결과적으로 그러한 연구를 수행하는 데 필요한 시간대와 관련하여 높은 효율성으로 이어지는 델파이 연구를 수행하기 위한 혁신적인 방법으로 고급 접근방식을 정의한다.프리드발트, 폰 오르트젠, 쿠엘스는 "실시간-델피"에서 "참가자들이 두 번 판단할 뿐 아니라 다른 참가자들의 집계된 결과를 볼 때 얼마든지 의견을 바꿀 수 있다"고 그 측면을 강조한다.따라서 여기에서 Real-Time Delphi 접근방식은 실시간 계산과 그룹 응답의 제공을 필요로 한다는 것이 명백해진다.Friedewald 외 연구진은 Real-Time Delphi 방법이 그것의 탐색적이고 예측적인 요소들 또한 규범적이고 의사소통적인 요소들을 가지고 있다고 더 진술한다.[3]이들 후자는 볼로니니가 조사하는데,[4] 볼로니니는 컴퓨터 기반의 델피가 전자민주주의를 위한 통신 기법으로서 잠재력을 탐구한다.

폰 데어 그라흐트와 동료들에 대한 비교 연구는 실시간 델파이 연구가 기존의 라운드 기반 델파이 조사 결과와 비교해도 손색이 없다는 것을 밝혀냈다.[5]

역사

실시간, 그러므로 컴퓨터 기반(대개 웹 기반) 델파이 접근방식의 기본 아이디어는 1972년 투로프가 미국에서 행해진 온라인 델파이 회의에 대해 발표한 논문에서 유래한다.[6]콘퍼런스는 참가자의 원격 위치, 접근 및 판단을 위한 온라인 도구, 참가자의 익명성, 지속적인 운영 및 결과 분석(즉, 참가자가 다른 참가자의 주어진 답변을 실시간으로 볼 수 있음)과 비동기적 참여(참가자가 개입할 수 있음)로 특징지어졌다.얼마나 자주 그리고 언제 그들이 원하는지 빠르게 로그인하고 로그아웃한다.언급된 측면은 Real-Time Delphi 연구의 주요 특징들 중 몇 가지인데, 이는 그러한 연구를 수행한다는 최초의 발상이 각각의 해로 거슬러 올라갈 수 있다는 것을 보여준다.그럼에도 불구하고 오늘날에는 기술 혁신과 고급 컴퓨터 보조 설계 가능성(예: 초고속 인터넷 연결, 고화질 그래픽, 고급 프로세서 성능)이 이러한 맥락에서 보다 정교한 연구를 촉진한다.[7]투로프의 아이디어와 기본 개념을 이용해 보다 빠른 형태의 델파이 연구를 개발하려는 일반적인 생각은 미국 국방고등연구계획국(DARPA)이 2004년 "전술적 상황에서의 판단 수집의 속도와 효율성"을 향상시키기 위한 접근법을 개발하기 위해 보조금을 지급한 것에 의해 시작되었다.[2]샌프란시스코에 있는 Arctulate Software라는 작은 소프트웨어 회사가 DARPA가 요구하는 것을 개발하기 위한 혁신 연구 보조금을 받았다.[2]Articulate Software의 수석 컨설턴트 겸 CEO인 Adam Pease는 2006년 테오도르 고든과 함께 이 연구결과와 방법론을 발표했다.[2]

하이코 폰 데어 그라흐트는 본 세미날 논문의 연구결과를 바탕으로 2008년까지 제2의 실시간 델파이 플랫폼을 개발하였다.그 후 몇 년 동안 폰 데어 그라흐트와 동료들은 향후 연구 연구를 위해 플랫폼을 광범위하게 사용했다.2011년, Von der Gracht와 Gordon은 WFS Annual Summit 2011에서 두 플랫폼에 걸친 40개의 RTD 연구의 교훈을 요약한 공동 논문을 발표했다.[8]

2017년 안겐히스터와 동료들이 다양한 실시간 델파이 플랫폼을 비교한 연구결과를 발표했다.분석 기준에는 시각적 외관, 데이터 출력, 사용자 친화성, 관리 및 질문 유형이 포함된다.[9]비데르벡 외 연구진의 학문 간 교차 연구는 실시간 형식을 포함한 델파이 방식의 새로운 방향과 진보를 중점적으로 연구했다.저자들은 심리학 분야의 감정 분석을 포함한 델파이 조사를 설계하기 위한 방법론적 도구상자를 제공한다.[10]

기존 델파이 방식과 실시간 델파이 방식의 차이

이 문제는 실시간 델파이 연구가 일반 델파이 연구와 어떻게 다른지 발생한다.기본적인 틀은 온라인 설문지 형태로 진행되는 델파이 연구를 생각하는 것이다.그러나 인터넷을 통해 시행되는 재래식 라운드 기반 델파이 연구는 "인터넷 델파이"라고 불린다.인터넷 델파이와의 기본적인 차이점은 실시간 델피의 과정이 단일 반복 라운드로 특징지어지지 않는다는 것이다.실제로 실시간 계산과 대응 제공이 실시간 델피스의 핵심 특성이다.Real-Time Delphi에 대한 다양한 다른 라벨들은 문학에서 찾을 수 있으며 많은 작가들은 "전자식 델파이", "컴퓨터식 델파이", "컴퓨터 보조 델파이", "테크놀로지 델파이"와 [11]같은 차이점을 완전히 인식하지 못하고 있다.다만 실시간 계산과 충당부채가 적용됐는지 여부를 파악하기 위해 연구자가 선택한 설계와 공정을 진정으로 이해하는 것이 중요하다.

전형적인 실시간 델파이 프로세스는 참가자들이 원하는 만큼 자주 로그인하고 로그아웃할 수 있는 일정 기간 동안 온라인 설문지 포털에 접속하는 방식으로 설명할 수 있다.로그인할 때마다 이전 세션의 정량적, 정성적 답변을 모두 보게 되며 주어진 기간 내에 원하는 답변을 모두 변경할 수 있다.자체적인 답변 외에도, 그들은 다른 참가자들의 지속적인 – 따라서 실시간 - 반응을 볼 것이며, 측정지표 평가와 관련하여 그룹 전체가 중위수, 평균 및 사분위간 범위(IQR)의 관점에서 시각화될 것이다.다른 참가자들의 반응이 바뀌는 과정에서 수치적 시각화뿐만 아니라 질적 입력도 변화한다는 점을 지적해야 한다.[2]결과적으로, 참여자는 초기 시점에서의 자신의 반응이 여전히 그룹 의견(즉, IQR) 내에 있는지 확인할 수 있다.Real-Time Delphi 연구의 핵심 혁신은 실시간 계산과 결과 제공이다.[12]

방법론적 진보

Real-Time Delphi 연구의 핵심 방법론적 혁신은 반복된 라운드의 부재와 그룹 응답의 실시간 계산 및 제공이다.기존의 델파이 연구는 순차적인 라운드를 반복함으로써 특징지어지는 반면, 실시간 델파이 접근방식은 그러한 연구를 수행하는 데 필요한 시간을 단축시키는 연속적인 라운드리스 절차로 특징지어진다.[13]따라서, 비교적 짧은 시간에 거대한 복잡성에 대한 대규모 연구를 수행할 수 있게 된다.[13]또 다른 핵심적인 방법론적 혁신은 전문가들이 통상적인 델파이 연구처럼 라운드 수에 따라 한 두 번만 판단하지 않을 수 있다는 사실이다.Real-Time Delphi 동안, 전문가들은 그들이 원하는 만큼 자주 그들의 반응을 독립적으로 재평가할 수 있다.[3]

하트만과 볼드윈은 실시간 델파이 접근방식의 추가적인 이점에 대해 논의한다: 첫째, 연구 중 더 높은 자동화 정도와 연구 후 분석 가능성 향상으로 실시간 연구에 참여하는 전문가의 수를 늘릴 수 있다.또한, 인터넷은 연구에 참여할 세계적인 전문가 패널을 초대할 수 있는 가능성을 제공한다.둘째, 타인의 지적에 즉각 반응할 수 있기 때문에 전문가들 간의 상호작용의 정도를 높일 수 있다.또한, 자신의 답을 주는 것과 다른 사람의 반응을 통찰하는 것 사이의 시간이 매우 짧기 때문에, 문제의 각 이슈와 함께 더 강한 인지 검사를 장려한다.하트만과 볼드윈은 이 절차의 도움으로 결과의 타당성이 극대화되었다고 주장한다.

실시간 델파이 연구를 수행하기 위해서는 컴퓨터 소프트웨어(대개 웹 기반)가 실시간 계산과 결과의 시각화를 용이하게 하기 위해 필요하다.연구에 참여하는 전문가들은 정량적 질문에 답한 직후 주어진 모든 응답의 중위수와 사분위간 범위뿐만 아니라 그들 자신의 답안을 보는 것이 일반적으로 기존의 문헌에서 제안되고 있다.[2]정량적 평가 외에도 참가자의 정성적 판단이 제시될 수 있으며, 이는 해당 질문에 대한 수치적 평가의 정당성이 된다.또한, 얼마나 많은 응답자가 이미 답변을 했는지를 전문가에게 보여줄 수 있다.다른 참가자들의 질적 주장을 살펴보기 위해 버튼을 클릭하면 다른 참가자들의 관점을 밑줄을 긋는 "이유 창"이 열린다.따라서, 다른 사람들에 의해 주어진 각각의 정당성은 응답자가 자신의 관점을 되찾도록 야기할 수 있다.[2]다음 단계에서는 전문가가 자신의 답변을 변경하거나, 새로운 주장을 추가하여 자신의 관점을 강조하거나, 답변을 변경하지 않고 그대로 둘 수 있다.또한 응답자는 자신의 대답이 사분위간 범위 내 또는 외부에 있거나 중위수와 유의하게 다른 경우, 주의 표시기, 이른바 "평판"[13]을 보일 것이다.이 신청서는 자신의 평가를 즉시 보고 이해하는 데 도움이 되며, 집단 의견의 일탈이나 그 밖의 높은 수준의 동의에 대한 이유를 생각해 보는 데 도움이 된다.답변자의 관심은 다른 색깔로 편차가 심한 질문을 부각시키고, 그룹 의견에서 편차가 생긴 이유를 추가로 제시해 달라고 요청해 부를 예정이다.

서술한 절차에서 질문을 조작한 후, 참가자는 다음 질문으로 계속 진행하거나 프로그램의 "저장" 버튼을 누르면 중위수, 사분위간 범위, 주어진 인수의 즉시 업데이트가 되고, 그 후 프로그램을 종료할 수 있다.라운드리스 접근법의 두 번째 장점은 참가자가 연구에 참여하기 위해 제공된 기간 동안 원하는 만큼 개인화된 계정을 사용하여 로그인하고 로그아웃할 수 있다는 점이다.그들이 이미 제공한 답변은 저장되고 다음에 로그인할 때 회수될 것이다.따라서, 연구의 설계에 의해, 질문에 답할 수 있는 명시적인 단일 라운드가 없다.[2]다른 참가자에게 정보를 업데이트하고 재생하는 것은 대답하는 과정에 따라 즉시 이어진다.여기서 대답하는 과정이 동기식이나 비동기식으로 이루어질 수 있고, 웹 기반 툴의 주요 장점 중 하나인 세계적인 전문가 패널에 도달할 수 있다는 것이 명확해진다.Turoff와 Hiltz는 비동기 상호작용의 문제가 아마도 Real-Time Delphis의 가장 이해되지 않은 특징들 중 하나일 것이라고 주장한다.Zipfinger는 전문가들의 비동기 참여의 두 가지 장점을 지적한다.첫째, 원할 때마다 포털에 로그인할 수 있어 24시간 이용이 가능해 참여자의 참여 편의성이 높아진다고 주장할 수 있다.둘째로, 패널리스트들은 특히 각 질문을 한 번 이상 거쳤을 때, 그들이 원하는 질문의 어떤 측면에도 기여할 수 있다.[11]여기서 Real-Time Delphis의 실질적인 측면은 명백해진다.Turoff와 Hiltz는 Real-Time Delphi 연구가 모든 개인이 문제 해결 과정에 기여할 수 있는 순서와 속도를 선택할 수 있는 구조화된 의사소통의 설계를 제공한다고 설명한다.그래서 대면 토론에 비해 실시간 델파이 접근법은 참가자들의 개성과 다른 인지 능력을 발휘할 수 있는 여지를 준다.[11]

또 다른 장점은 연구 관리자가 참가자가 로그인하여 설문지에 참여해야 하는 임의의 시간을 설정할 수 있다는 점이다.따라서 연구자나 관리자가 기존 답변(즉, 양과 질 면에서)에 만족하면 언제라도 연구 종료를 선언하고 온라인 도구를 닫을 수 있다(즉, 응답을 "동결").[2][13]

익명성, 통제된 피드백, 그룹 대응 등 델파이 연구의 주요 특징도 실시간 델파이 연구의 맥락에서 충족된다.그러나 반복의 문제는 기술의 설계에 의해 Real-Time Delphi 연구에 더 이상 유효하지 않다는 것이다.Real-Time Delphi는 각 질문에 처음 대답하고 2차에서 그룹 응답이 있는 2차 시트를 받는 대신, 이미 각 질문에 답한 직후 2차 화면(즉, 그룹 응답)을 보여준다.각 질문에 한 번 이상 답한 참가자는 보통 단일 질문에 다시 접근할 수 있는 일종의 제어 패널 역할을 하는 "컨센서스 포털"에서 어떤 질문을 다시 평가할지 제어할 수 있다.그래서, 한편으로, 절차는 재래식 델파이와는 다르며, 다른 한편으로, 단일 라운드로의 반복은 누락되어 있다.

문제는 평범한 델파이 연구, 고든과 Pease[2]점을 지적한 실시간 델파이 연구는 인터넷 사이트나 다른 모든 네트워크(예를 들어 사내의 네트워크, 근거리 통신망)을 통해 있고, 따라서, paper-and-p에 실시하지 않는다 구현될 수 있는 수행을 어떻게 실시간 델파이 연구의 성취와 물었다.enc나는 더 이상 형성되지 않는다.

모든 델파이 연구와 마찬가지로, 전문가를 정의하고 선발하는 과정은 여전히 극히 중요하다.[2]그런 다음 Commonary Delphi 연구는 대응 라운드의 몇 단계, 촉진자를 통한 분석, 정보를 재생하는 단계, 다음 대응 라운드 등으로 나뉜다.그러나 Real-Time Delphi 연구는 온라인 도구에 대한 접근 권한을 부여한 후 오히려 자체 실행 과정이다.

Real-Time Delphi 연구의 기본 강점은 모든 델파이 주제(즉, 공통 문제 집합, 의사결정 문제, 교차 영향 연구 등)[2]에 대한 효율성과 적용 가능성이다.그림 2는 실시간 델파이 과정이 다르다는 것을 보여준다.중요한 것은 대응 단계(즉, 온라인 도구를 연 후) 중에 필요한 촉진자의 개입 횟수가 대개 적다는 점을 지적하는 것이다.온라인 도구를 미리 개발한 후, 연구 진행자가 행하는 중간 분석은 기존의 델파이(Delphi)에 비해 다소 복잡하지 않다.실시간 연구를 수행하는 데 필요한 전체 단축 시간은 접근방식이 일반적으로 더 효율적인 것으로 간주될 수 있다는 것을 의미한다.[2]

Gordon과 Pease는 Real-Time Delphi 연구가 전문가의 자문이 필요한 광범위한 가능한 상황에 적용 가능하다고 지적한다.한편 저자들은 '소프트웨어가 있는 웹 사이트에 무선으로 연결된 노트북 컴퓨터가 있는 회의실에서 동시에 작동하는 소그룹으로, 연습의 완료는 20분 정도 걸릴 것으로 예상한다'는 예를 제시한다.반면에, 더 긴 시간 내에 원격지에서 비동기적으로 활동하는 전문가들로 구성된 더 큰 패널을 생각할 수 있다.

실시간 접근법의 가장 큰 약점은 그것이 완전히 통합되고 과학적으로 기초된 개념을 놓치고 있다는 것이다.실시간 델파이 아이디어는 아직 매우 새로운 개념으로, 본격적인 운영을 위한 도구가 되려면 더 많은 연구와 응용이 필요하다.[2]특히 응답자의 알파(즉, 첫 번째) 입력의 편집, 그룹 결과의 실시간 표시, 시간의 경과에 따른 진행 추적을 일종의 관리자 패키지로 통합하여 실시간 델피의 달성을 덜 어렵게 해야 한다.[2]

실시간 Delphi 응용프로그램의 예

실시간 델파이 애플리케이션의 수많은 예를 찾아볼 수 있다.그 중 2009년 글렌, 고든, 플로레스쿠가 실시한 밀레니엄 프로젝트는 글로벌 이슈, 기회, 도전, 전략에 대한 글로벌 사고와 개선된 이해를 위한 맥락을 제공한다.이 프로젝트에 대한 자세한 내용은 www.millennium-project.org에서 확인할 수 있다.

독일 EBS 경영대학원대학교의 전 선물연구 및 지식경영연구소에서 실시간 델파이 연구를 기반으로 한 또 다른 프로젝트들은 PricewaterhouseCoopers와 함께 5개 연구의 T&L2030 시리즈가 실시되었다.교통 & 물류 2030 시리즈.학술지에 수록된 추가적인 사례로는 물류,[15] 사회적 사업,[16] 전문 서비스,[17] 소매 [18]및 자동차 관련 사례가 있다.[19]

메모들

  1. ^ a b c 하트만, F. T. & Baldwin, A. (1995년)Delphi Method를 개선하기 위해 기술을 사용한다.토목 공학 전산학 저널 9(4), 244-249.
  2. ^ a b c d e f g h i j k l m n o p 고든, T. J. & Pease, A. (2006)RT 델파이:효율적이고 "원형이 없는" 거의 실시간 델파이 방법.기술 예측 및 사회 변화 저널, 73(4), 321-333.
  3. ^ a b c 프리드발트, M, 폰 오우르첸, J, & 쿠를스, K. (2007)정보사회에 대한 유럽관점(EPS) (Delphi Report Deliverable 2.3.1)유럽 테크노-경제 정책 지원 네트워크(ETEPS Net).
  4. ^ 마우리치오 Bolognini(2001년), Democrazia elettronica:.메토도 델파이 epolitiche pubbliche(전자 민주주의:.델파이 방법 및 공공 Policy-Making)(이탈리아어로), 로마:Carocci Editore, 아이 에스비엔 978-88-430-2035-5.저자는 컴퓨터 기반 델파이 특히 e-democracy의 컨텍스트에서roundless 접근, 이는 통계적인 반응의 실시간 업데이트, 또는 panellists의 숫자가 많은 것 뿐만이 아니라 전 가능성 분할 패널 정책 입안자들, 전문가, citi 같은 다른 그룹(에 해당하는 설립을 위해 관련이 될 수 있다.관리자는 문제 및 의사결정 프로세스의 유형에 따라 다른 태스크와 권한을 부여할 수 있다.
  5. ^ 혁신적인 실시간 델파이 접근법 검증 – 실시간 델파이 연구와 기존 델파이 연구의 방법론적 비교.In: 기술 예측 및 사회 변화. 78, 9, 2011, 페이지 1681–1694, doi:10.1016/j.techore.2011.04.006.
  6. ^ 투로프, M. (1972)Delphi Conferencing:익명성을 통한 컴퓨터 기반 회의.기술 예측과 사회 변화 3, 159-204.
  7. ^ 헤더, M. (2002)델피-베프라궁겐아인 아르베츠부흐.비즈바덴:웨스트데우츠셔 베를라크.
  8. ^ 델파이 리서치의 뉴 프론티어: 선견지명이 있는 실시간 델파이와의 경험.인: 2011년 세계 미래 회의, 페이지 129-160, 10.2011년 7월, 리서치게이트를 통해.
  9. ^ Real-Time Delphi in practice — 기존 소프트웨어 기반 툴의 비교 분석.In: 기술 예측과 사회 변화.제118권, 2017년 5월, 페이지 15-27, doi:10.1016/j.techore.2017.01.023.
  10. ^ Delphi 설문 조사 준비, 수행 및 분석: 교차 학제 관행, 새로운 방향 및 진보.인: 메소드X.제8권, 2021권, 101401, doi:10.1016/j.mex.2021.101401.
  11. ^ a b c d e Turoff, M, & Hiltz, S. (1995년).컴퓨터 기반 Delphi 프로세스.M. Adler & E. Ziglio, E. (Eds)에서 오라클을 응시하는 것은 다음과 같다.Delphi Method와 그것의 사회정책과 공중보건 적용 (pp. 56-88).런던: 제시카 킹슬리 출판사.
  12. ^ Monguet, J, Ferruzca, M, Gutierrez, A, Alatriste, Y, 마르티네스, C, 코르도바, C, 페르난데스, J, 외 (2010)벡터 컨센서스:협업 혁신 커뮤니티를 위한 의사 결정.컴퓨터 및 정보 과학에서의 통신 (Vol. 110, 페이지 218–227)비아나 두 카스텔로, 포르투갈:스프링거.도이:10.1007/978-3-642-16419-4_22
  13. ^ a b c d 고든, T. J. (2007)델파이 연구를 실행하기 위한 "Roundless" 접근방식을 이용한 에너지 예측.예지력, 9(2), 27-35.
  14. ^ 집핑거, S. (2007)컴퓨터 지원 델파이:방법의 실시간 구현과 라운드 기반 비교에 관한 실험적 연구트라우너 베를라그
  15. ^ 운송 및 물류 산업을 위한 에너지 제한 및 저탄소 시나리오.인: 국제 물류 관리 저널.제27권, 제1호 2016, 페이지 142-166, doi:10.1108/IJLM-12-2013-0150.
  16. ^ 더 많은 사회적 미래로 나아가기 - 독일의 사회적 기업을 위한 시나리오In: Business & Society.제55권, 제1호 2014년, 페이지 56-89, doi:10.1177/0007650314523096.
  17. ^ 선견지명 전문가의 미래: 델파이 연구의 결과.In: Futures(일기)제71권, 2015년 8월 132-145페이지, doi:10.1016/j.futures.2015.03.005.
  18. ^ 델파이 기반의 전략 이슈 관리: 소비재 공급망 전략 수립.인: 국제물류유통물류관리저널.제44권, 제5호, 2014년호, 페이지 373-391, doi:10.1108/IJPDLM-09-2012-0289.
  19. ^ 미래의 멀티모달 도시를 향해 가고 있는가? 도시 이동성을 위한 다중 이해관계자 시나리오.In: 기술 예측과 사회 변화.제89권, 2014년 11월, 페이지 201-221, doi:10.1016/j.techore.2013.08.036.

참조

  • RTD 플랫폼에 대한 자세한 설명과 클래식 대 클래식 비교RT Delphi: 혁신적인 실시간 델파이 접근법 검증 – 실시간 델파이 연구와 기존 델파이 연구의 방법론적 비교.In: 기술 예측 및 사회 변화. 78, 9, 2011, 페이지 1681–1694, doi:10.1016/j.techore.2011.04.006.
  • 다른 RTD 플랫폼 비교: 실제의 실시간 델파이 — 기존 소프트웨어 기반 툴의 비교 분석.in: 기술 예측 및 사회 변화. 118, 2017, 페이지 15-27, doi:10.1016/j.techore.2017.01.023
  • 이 분야의 초기 연구: 델파이 방법을 사용하여 이해관계자를 참여시키는 방법: 두 가지 연구의 비교.In: Evaluation and Program Planning. 33, 2, 2010, 페이지 147-154, doi:10.1016/j.evaluprogplan.2009.06.006.006.