연구자 자유도
Researcher degrees of freedom연구자 자유도는 과학적 실험을 설계하고 수행하는 과정과 그 결과를 분석하는 과정에서 수반되는 고유의 유연성을 가리키는 개념이다.이 용어는 연구자들이 데이터를 수집하고 분석하는 여러 방법 중 하나를 선택할 수 있고, 이러한 결정은 임의로 또는 다른 가능한 선택과는 달리 긍정적이고 통계적으로 유의미한 결과를 낳기 때문에 이루어질 수 있다는 사실을 반영한다.[1]이와 같이, 연구자의 자유도는 종종 데이터 수정 및 기타 의심스러운 연구 관행과 관련이 있다.[2]그들의 광범위한 사용은 과학적 연구에 내재된 방법론적 한계를 나타내며, 거짓 양성 소견의 부풀려진 비율에 기여한다.[1]그것들은 또한 과대평가된 효과 크기로 이어질 수 있다.[3]
심리학 맥락에서 주로 연구자 자유도의 개념이 논의되어 왔지만, 그것은 어떤 과학적인 규율에도 영향을 미칠 수 있다.[1]출판 편향과 마찬가지로, 연구자 자유도의 존재는 깔때기 플롯 비대칭의 부풀려진 정도를 초래할 가능성이 있다.[4]또한 표본 크기가 작은 연구는 연구자 자유도의 편향 영향에 더 취약하다.[5]
예
Stegen 외 연구진(2016년)은 단일 원시 데이터 세트에서 시작하여 서로 다른 합리적인 데이터 처리 결정을 적용하면 어떻게 다수의 처리된 데이터 세트(데이터 멀티버스라고 함)를 발생시킬 수 있으며, 종종 다른 통계 결과를 초래할 수 있는지를 보여주었다.[6]위허츠 외 연구진(2016년)은 연구자들이 심리학 연구를 수행할 때 갖는 자유도(DF) 34도의 목록을 제공했다.나열된 DF는 가설의 형성에서부터 결과 보고에 이르기까지 연구 과정의 모든 단계에 걸쳐 있다.그들은 탐구적이고 가설이 없는 연구를 수행하는 것을 포함하는데, 이 연구는 저자들이 "...연구의 후반 단계에서 우리가 아래에 기술한 많은 연구자 DF를 지배한다."라고 언급하고 있다.이 문서에 열거된 다른 DF에는 복수의 조작된 독립 변수 생성과 나중에 분석을 위해 선택할 수 있는 추가 변수의 측정이 포함된다.[3]
참조
- ^ a b c Simmons, Joseph P.; Nelson, Leif D.; Simonsohn, Uri (November 2011). "False-Positive Psychology: Undisclosed Flexibility in Data Collection and Analysis Allows Presenting Anything as Significant". Psychological Science. 22 (11): 1359–1366. doi:10.1177/0956797611417632. ISSN 0956-7976. PMID 22006061.
- ^ Wicherts, Jelte M.; Veldkamp, Coosje L. S.; Augusteijn, Hilde E. M.; Bakker, Marjan; van Aert, Robbie C. M.; van Assen, Marcel A. L. M. (2016). "Degrees of Freedom in Planning, Running, Analyzing, and Reporting Psychological Studies: A Checklist to Avoid p-Hacking". Frontiers in Psychology. 7: 1832. doi:10.3389/fpsyg.2016.01832. ISSN 1664-1078. PMC 5122713. PMID 27933012.
- ^ a b Wicherts, Jelte M.; Veldkamp, Coosje L. S.; Augusteijn, Hilde E. M.; Bakker, Marjan; van Aert, Robbie C. M.; van Assen, Marcel A. L. M. (2016-11-25). "Degrees of Freedom in Planning, Running, Analyzing, and Reporting Psychological Studies: A Checklist to Avoid p-Hacking". Frontiers in Psychology. 7: 1832. doi:10.3389/fpsyg.2016.01832. ISSN 1664-1078. PMC 5122713. PMID 27933012.
- ^ Carter, Evan C.; McCullough, Michael E. (2014-07-30). "Publication bias and the limited strength model of self-control: has the evidence for ego depletion been overestimated?". Frontiers in Psychology. 5: 823. doi:10.3389/fpsyg.2014.00823. ISSN 1664-1078. PMC 4115664. PMID 25126083.
- ^ Schweizer, Geoffrey; Furley, Philip (March 2016). "Reproducible research in sport and exercise psychology: The role of sample sizes". Psychology of Sport and Exercise. 23: 114–122. doi:10.1016/j.psychsport.2015.11.005.
- ^ Steegen, Sara; Tuerlinckx, Francis; Gelman, Andrew; Vanpaemel, Wolf (September 2016). "Increasing Transparency Through a Multiverse Analysis". Perspectives on Psychological Science. 11 (5): 702–712. doi:10.1177/1745691616658637. ISSN 1745-6916. PMID 27694465.