본문으로 바로가기

정책동향

연구 재현성 위기 극복을 위한 「출판 보장형 연구 사전 심의제」 (registered reports)

  • 등록일2022-05-12
  • 조회수281
  • 분류정책동향 > 기타 > 기타


연구 재현성 위기 극복을 위한

 「출판 보장형 연구 사전 심의제」 (registered reports)


◈목차

1. 과학의 추락: 재현되지 않는 연구

2. 연구 재현성의 두 가지 의미

3. 연구 재현성 위기: 출판 편향과 실적 압박

4. 출판 보장형 연구 사전 심의제 (registered reports)

5. 효과와 우려

6. 시사점

 

 

 

◈본문


1. 과학의 추락: 재현되지 않는 연구
 

○ 네이처의 2016년 설문조사 결과에 따르면, 70% 이상의 연구자가 다른 연구자의 실험을 재현하는 데 실패했고, 절반 이상이 자신의 실험을 재현하는 데 실패했다고 응답함(Baker, 2016).
 
○ 영국의 고등교육 잡지인 THE(The Times Higher Education)는 연구재현성 문제의 심각성을 인지하고, 영국 의회의 관련 조사 관계자 5인의 의견을 빌어 과학 출판, 연구비 지원 등 다각적인 측면에서 재현성을 제고할 수 있는 방안을 모색한 바 있음(Bishop 등, 2022).
 
○ 심리학자 스튜어트 리치(Stuart Ritchie)는 저서『사이언스 픽션』 (Science Fictions)(2020)에서 연구가 재현되지 않는 문제의 원인을 기성 과학 출판 시스템과 동료 평가 과정에서 찾은 바 있음.
 
○ 이처럼 해외에서는 이미 연구 재현성 문제가 곧장 과학의 추락으로 직결될 수 있다는 데 경각심을 갖고, 그 원인을 철저히 규명함과 동시에 해결책도 적극적으로 강구하고 있음.
 
2. 연구 재현성의 두 가지 의미
 
○ 연구 재현성은 Reproducibility와 Replicability의 두 가지 의미 모두를 함의하고 있는 개념으로서 ―두 가지 중 하나의 의미로만 해석되어종종 개념상의 혼란을 야기하기도 함―, 각각의 의미는 아래와 같음.
 
○ Reproducibility는 되풀이되는 실험에서 그 결과가 일정하게 산출될 가능성을 뜻하는 개념으로 “입력 값, 계산 단계/방법/코드, 분석 조건 등을 동일하게 사용하여 일관된 결과를 얻는 것”(NASEM, 2019)을 의미함.
 
○ Replicability는 동일한 질문을 다루지만 데이터 세트가 다른 연구에서도 일관된 결론이 도출될 가능성을 뜻하는 개념으로(NASEM, 2019; Ritchie,2020), 그 결과가 다른 맥락에서도 복제될 수 있음을 의미함.
 
3. 연구 재현성 위기 : 출판 편향과 실적 압박
 
○ 실험과 통계 분석 방법을 주로 사용하는 심리학과 임상 의학 분야의 상당수 연구가 재현되거나 일반화되지 않는다는 문제는 이미 오래전부터 제기되어 왔음.
 
- 심리학 분야 연구 재현성 테스트 결과, 100개의 실험/상관관계 연구 중 39%만이 재현에 성공함(Open Science Collaboration, 2015).
 
- 전임상(preclinical) 암 연구 논문 53편 중 6편(11%)만이 과학적으로 유의미한 결과가 재현됨(Begley & Ellis, 2012).
 
○ 출판 편향(publication bias)과 실적 압박이 재현성과 일반성 위기를 촉발하는 주요 원인으로 지목되고 있음(Baker, 2016).
 
- ‘출판 편향’은 새롭고 흥미로운 가설을 증명한 것으로 보이는, 성공적인 연구 결과만 출판하려는 경향을 가리키는 말로서, 증명에 실패한 연구 결과는 세상에 발표되지 않는다는 점에서 소위 ‘책상 서랍 문제(file drawer problem)’1)로 일컬어지기도 함(Rosenthal, 1979).


...................(계속)


☞ 자세한 내용은 내용바로가기 또는 첨부파일을 이용하시기 바랍니다.


관련정보

자료 추천하기

받는 사람 이메일
@
메일 내용