베르산트

Versant
다른 용도는 Versant(동음이의)를 참조하십시오.

Versant 테스트 제품군은 Pearson PLC에서 사용할 수 있는 구어의 컴퓨터화된 테스트다.베르산트 테스트는 고급 음성 처리 기술(음성 인식 포함)을 사용하여 비 원어민 화자의 구어 능력을 평가하는 완전히 자동화된 최초의 구어 테스트였다.베르산트어 스위트에는 영어, 스페인어, 네덜란드어, 프랑스어, 아랍어 시험이 포함되어 있다.항공영어 평가, 어린이 구술독해평가, 성인문해력평가에도 베르산트 기술이 적용됐다.

역사

1996년 자레드 번스타인과 브렌트 타운젠드는 음성 처리 기술과 언어 및 시험 이론을 사용하여 자동으로 전달되고 자동으로 점수가 매겨지는 구어 시험을 제공하는 시스템을 개발하기 위해 오르디네이트 사를 설립했다.첫 번째 영어 시험은 PhonePass라고 불렸다.음성 인식 기술을 이용한 구어 시험의 첫 번째 완전 전산화 시험이었다.2002년, PhonePass라는 명칭이 PhonePass SET-10(암묵 영어 시험) 또는 간단히 SET-10으로 변경되었다.2003년에 Ordinate는 Harcourt Assessment에 의해 취득되었고 이후 2005년에 현재의 이름인 Versant로 변경되었다.2008년 1월, Pearson에 의해 Harcourt Assessment(Ordinate Corporation 포함)가 인수되었고 Ordinate Corporation은 Pearson의 지식 기술 그룹의 일부가 되었다.2010년 6월, Versant Pro Speaking Test와 Versant Pro Writing Test가 시작되었다.

제품 설명.

버선 테스트는 일반적으로 성인 언어 학습자를 위한 말하기와 듣기 기술의 15분 테스트다. (테스트 길이는 테스트에 따라 약간 다르다.)시험은 전화나 컴퓨터를 통해 전달되며 미리 정해진 데이터 구동 알고리즘을 사용하여 컴퓨터로 채점된다.테스트 중에 시스템은 일련의 기록된 프롬프트를 대화 속도로 표시하고 테스트 작업자로부터 구두 반응을 이끌어낸다.[1]Versant 테스트는 다음과 같은 몇 가지 제품으로 이용할 수 있다.

  • 베르산트 영어 시험
  • Versant English - 배치 시험 [1]
  • Versant English - 쓰기 테스트
  • 베르산트 스페인어 시험
  • 베르산트 아랍어 시험
  • 베르산트 프랑스어 시험
  • 베르산트 항공 영어

또한, 다른 조직과 협력하여 Versant 프레임워크를 사용하여 몇 가지 도메인별 테스트가 작성되었다.이러한 시험에는 베르산트 항공 영어 시험(항공 직원용), 베르산트 주니어 영어 시험(영어 학습자용, 5세에서 12세 사이), 네덜란드 이민 시험(네덜란드 대사관을 통해 독점적으로 이용 가능)이 포함된다.베르산트 채점 시스템은 또한 2009년 말에 이용할 수 있는 4개 스킬 시험의 구어 부분에 대한 자동 채점을 제공한다.

베르산트 테스트 구성

베르산트 테스트는 일상적인 주제에 대해 구어를 이해하고 원어민 같은 대화 속도로 적절하게 대응할 수 있는 능력으로 정의되는 "구어 언어의 기능"을 측정한다.대화 속도에 보조를 맞추면서, 사람은 무슨 말을 하는지 추적하고, 말이 계속됨에 따라 의미를 추출하고, 적절하고 알기 쉬운 반응을 만들어 내야 한다.[2]베르산트 시험은 제2외국어로 구어 수행에 대한 이러한 실시간 심리 언어학적 측면을 측정하기 위해 고안되었다.

형식 및 작업 테스트

Versant 테스트는 일반적으로 읽기, 반복, 단답형 문제, 문장 작성, 스토리 리텔링, 개방형 질문의 6가지 과제를 가지고 있다.

과제 설명
A. 독서 수험생들은 인쇄된 번호의 문장을 읽는다.문장은 구조와 어휘가 비교적 단순해 대상 언어의 문맹자가 쉽고 유창하게 읽을 수 있다.
B. 반복 수험생들은 말 그대로 문장을 반복한다.문장은 난이도가 증가하는 순서대로 제시된다.오디오 항목 프롬프트는 자연스러운 대화 속도로 전달된다.
C. 단답형 질문 수험생들은 문제를 듣고 단어나 짧은 문구로 이 문제 하나하나에 답한다.각 질문은 기본적인 정보를 요구하거나 시간, 순서, 숫자, 어휘적 내용 또는 논리에 근거한 간단한 추론을 요구한다.
D. 문장 빌드 수험생에게는 세 개의 짧은 문구가 제시된다.구절은 임의 순서대로 제시되며, 수험자는 문장으로 다시 정렬하도록 요청 받는다.
E. 스토리 리텔링 수험생들은 이야기를 듣고 나서 무슨 일이 일어났는지 자신의 말로 설명해 달라는 요청을 받는다.수험생들은 상황, 인물, 행동, 결말 등 가능한 한 많은 이야기를 들려주도록 권한다.
F. 개방형 질문 수험생들이 의견을 묻는 질문을 듣고 해명과 함께 답한다.문제는 가족 생활이나 수험생의 선호도와 선택에 관한 것이다.이 작업은 자발적인 음성 샘플을 수집하는 데 사용된다.수험생의 응답은 자동으로 채점되지 않지만, 이러한 응답은 공인 리스너에 의한 인적 검토가 가능하다.

베르산트 기술

자동 관리

버전트 시험은 전화나 컴퓨터로 관리할 수 있다.수험생들은 유선전화나 인터넷 연결이 되어 있는 곳이라면 어디든 시험에 접속하여 시험을 치를 수 있다.

수험생에게는 시험지나 컴퓨터 화면에 필기체로 인쇄된 지시사항이 녹음된 시험관의 음성으로 전달된다.시험 내내 수험생들은 다양한 원어민이 읽는 녹음된 항목 안내문을 듣는다.시험이 자동화되어 있기 때문에 많은 수의 시험이 매우 빠르게 시행되고 점수가 매겨질 수 있다.

자동 채점 기술

다양한 시험 점수는 완료된 시험 후 몇 분 이내에 온라인에 게시된다.시험 관리자와 시험 응시자는 Versant 웹사이트에 시험 식별 번호를 입력하여 시험 결과를 보고 인쇄할 수 있다.Versant 점수 보고서는 전체 점수(점수별 가중 조합)와 4개의 진단 항목별 점수로 구성된다.문장 마스터리(예: 문법), 어휘, 유창성 및 발음.전체 점수와 항목별 점수는 20에서 80까지의 척도로 보고된다.

자동 채점 기술은 원어민과 비 원어민 모두의 음성 샘플을 대량으로 사용해 최적화됐다.일반적으로 그러한 음성 샘플을 충분히 수집하기 위해 광범위한 데이터 수집이 수행된다.이러한 음성 응답은 자동 음성 인식 시스템을 훈련하기 위해 기록된다.

각 수신 응답은 비원어 스피치에 최적화된 음성 인식기에 의해 자동으로 처리된다.단어, 일시 정지, 음절, 전화는 녹음된 신호에 위치한다.정확한 순서에 기대되는 올바른 단어의 유무와 구절과 문장에서 그 단어의 속도, 유창성, 발음에 따라 응답의 내용을 채점한다.기본 측정은 원어민과 비 원어민 화자의 통계적 모델에 기반한 세그먼트, 음절 및 단어에서 도출된다.[3]베르산트의 자동 득점 시스템의 정확성에 관한 많은 문서들이 작성되었다.

점수 사용

베르산트 시험은 현재 전 세계 학술 기관, 기업, 정부 기관에서 사용되고 있다.버선 테스트는 직원이나 학생이 효과적으로 상호작용하는 데 필요한 구어 능력을 가지고 있는지 여부를 판단하는 데 사용할 수 있는 정보를 제공한다.예를 들어 2002년 한일 월드컵에서 베르산트 영어시험은 1만5000명이 넘는 자원봉사자들의 영어 실력을 측정하고 가장 영어집약적인 과제에 적절한 인력을 배정하는 데 활용됐다.[4]베르산트 스페인어 시험은 블레이크 외 연구진에 의해 사용되었다.(2008) 거리 학습 과정이 구술 숙련도와 관련하여 일주일에 5번 만나는 전통적인 대면 수업만큼 외국어를 배우기 시작하는 유효한지 여부를 평가한다.[5]

확인

다른 테스트와의 관계

다양한 시험 점수는 공통 유럽 기준 프레임워크(CEFR)와 일치한다.아래는 CEFR에 대한 Versant 점수 및 기타 시험 점수 매핑이다.Versant English 전체 점수는 CEFR 등급의 구강 상호작용 기술을 합리적인 정확도로 예측하는 데 사용될 수 있다.[6]

베르산트[7] CEFR[8] 아이엘츠[9] 토익[10] 토플 iBT 스피킹[11] 토플 iBT[12]
20-80 A1-C2 0-9 10-990 0-30 0-120
20-25 <A1> 0
26-35 A1 1-2 8-13
36-46 A2 3 13-19
47-57 B1 3.5-4.5 550+ 19-23 57-86
58-68 B2 5-6 23-28 87-109
69-78 C1 6.5-7 880+ 28+ 110-120
79-80 C2 7.5+

일련의 검증 연구는 베르산트 영어 시험이 구어 영어 능력의 다른 척도들과 합리적으로 상관관계가 있다는 것을 발견했다.예를 들어, Versant English Test와 TOEFL iBT Speaking의 상관관계는 r=0.75이고 Versant English Test와 IELTS Speaking의 상관관계는 r=0.77이다.

기계-인간 상관 관계

베르산트 시험의 일반적인 비판 중 하나는 기계가 사람이 할 수 있는 것만큼 말하기 능력을 평가할 수 없다는 것이다.시험을 생산하고 관리하는 회사인 지식 테크놀로지는 버산트 영어 시험의 기계 생성 점수는 전체 수준에서 반복적인 독립적 인간 측정자가 부여한 점수와 사실상 구별할 수 없다고 주장한다.[13]

또 다른 비판은, Versant 테스트는 실제 참가자 사이에 상호 작용 교류가 없기 때문에 의사소통 능력을 측정하지 않는다는 것이다.다우니 등에 있는 베르산트.(2008) 시험에서 평가되는 심리언어 역량이 더 큰 구어 수행의 기초가 된다고 주장한다.이러한 주장은 베르산트 시험 점수가 ACTFL OPI 또는 ILR OPI와 같은 잘 알려진 구술 숙련도 면접 시험과 높은 상관관계가 있다는 동시 유효성 데이터에 의해 뒷받침된다.

베르산트 제품의 유용성은 제3자에 의해 도전을 받아왔다.[14]

관리

  • 알리스테어 반 모어, 대통령
  • Ryan Down, 제품 관리 이사

참고 항목

참조

  1. ^ Balogh, J, Barbier, I, Bernstein, J, 스즈키, M, & Harada, Y. (2005)다국어 자동 언어 테스트 개발을 위한 공통 프레임워크.JART Journal, 1(1), 67-79.
  2. ^ 번스타인, J. & 쳉, J. (2007)완전 자동 영어 시험의 논리 및 검증.M. Holland & F.P.에서.피셔(Eds). 컴퓨터 보조 언어 학습에서 음성 기술의 경로:연구에서부터 실천에 이르기까지 (pp. 174-194).플로렌스, KY: 루트리지.
  3. ^ Balogh, J. & Bernstein, J. (2006년).영어와 스페인어로 된 표준 성능의 실행 가능한 모델.Y. 마츠모토, D.Y.오시마,O.R.로빈슨,&P.세일즈(에드)에서는 언어의 다양성:관점 및 시사점 (pp. 20-41)스탠포드, CA: 언어 및 정보 간행물 연구 센터.
  4. ^ "Korean Organizing Committee For the 2002 FIFA World Cup-Korea/Japan Has Chosen Ordinate's..." AllBusiness.com. 2 Nov 2008.
  5. ^ Blake, R, Wilson, N.L. Pardo-Ballestar, C, & Cetto, M. (2008)거리, 대면 및 혼합 교실에서의 구술 능력 측정.언어 학습 및 기술, 12(3), 페이지 114-127.
  6. ^ 번스타인, J. & De Jong, J. H.A.L. (2001)Common Europe Framework Level Descriptors 내에서 숙련도를 예측하는 실험.Y.N. 렁 외 (Eds.)에서는 제10회 영어교육 국제심포지엄의 선정 논문 (pp. 8-14)이다.Taipei, ROC: The Crane Publishing.
  7. ^ 번스타인, J. De Jong, J. Pisoni, D. & Townsend, B. (2000)구어 능력 자동 채점에 관한 두 가지 실험P. Delcloque (Ed.) Procedures of InSTIL2000: Integrated Speech Technology in Learning (pp. 57-61).스코틀랜드 애버타이 던디 대학교
  8. ^ Council of Europe (2001). "Common European Framework of Reference for Languages" (PDF). Cambridge University Press.
  9. ^ IELTS 점수를 유럽 공동 유럽 프레임워크 위원회와 연관시킨다.: CS1 maint: 제목(링크)으로 보관된 사본
  10. ^ 탄넨바움, 리차드, 캐롤라인 E.윌리(2005년)."Research Reports: Mapping English Language Proficiency Test Scores onto the Common European Framework" (PDF). Educational Testing Services. Archived from the original (PDF) on November 21, 2008. Retrieved January 20, 2009.
  11. ^ "Mapping TOEFL iBT on the Common European Framework of Reference" (PDF). 2007. Archived from the original (PDF) on February 6, 2009. Retrieved January 20, 2009.
  12. ^ "Mapping TOEFL iBT on the Common European Framework of Reference" (PDF). 2007. Archived from the original (PDF) on February 6, 2009. Retrieved January 20, 2009.
  13. ^ 다우니, R, 파르하디, H, 현재토마스, R, 스즈키, M, 그리고 반 모어, A. (2008)영어 시험을 위한 Versant의 유용성에 대한 평가: 응답.언어 평가 분기별 5, 160-167.
  14. ^ 크리스티안 W.춘(2008):"영어시험의 유용성 평가: 응답"에 대한 의견:작성자 응답, 분기별 언어 평가, 5:2, 168-172

외부 링크