연구제안서 평가의 정확성에 관한 연구: 평가위원의 전문성과 평가자-피평가자 간 지인관계를 중심으로A Study on the Accuracy of Research Proposal Appraisals: Measuring Expertise and Acquaintanceship of Evaluators
- Other Titles
- A Study on the Accuracy of Research Proposal Appraisals: Measuring Expertise and Acquaintanceship of Evaluators
- Authors
- 윤석민; 이영훈; 김영준
- Issue Date
- 2021
- Publisher
- 한국기술혁신학회
- Keywords
- Technology Evaluator Fit; bias; expertise; national R& D; scientific peer review; 과학적 동료평가; 국가연구개발; 기술 평가자 적합도; 전문성; 편향
- Citation
- 기술혁신학회지, v.24, no.5, pp.891 - 918
- Indexed
- KCI
- Journal Title
- 기술혁신학회지
- Volume
- 24
- Number
- 5
- Start Page
- 891
- End Page
- 918
- URI
- https://scholar.korea.ac.kr/handle/2021.sw.korea/138348
- DOI
- 10.35978/jktis.2021.10.24.5.891
- ISSN
- 1598-2912
- Abstract
- 일반적으로, 국가연구개발사업의 수행기관 선정은 해당 분야의 전문가들을 평가위원으로 위촉하는 과학적 동료평가 방 식으로 이루어진다. 본 연구에서는 평가위원의 전문성과 평가자-피평가자 간 지인관계가 연구개발과제의 선정 및 수행결 과에 미치는 영향을 각각 검증한 후, 결과를 조합하는 방식을 통하여 연구제안서 평가의 정확성을 분석하고 시사점을 제 시하였다. 설명변수인 평가위원의 전문성과 지인관계를 측정하기 위하여 평가위원회별 기술 평가자 적합도(Technology Evaluator Fit) 및 피평가자와의 공동연구 수행이력을 지표로 도입하였고, 10년간 한국산업기술평가관리원의 선정평가 위원회에 상정된 19,447개 과제를 분석한 결과 평가위원의 전문성 향상은 과소평가 편향을 감소시켜 평가의 정확성을 증 가시킴을 확인하였다. 한편, 과거 과제 공동수행 등 평가자-피평가자 간 지인관계는 해당 과제의 진정한 품질과 무관하게 선정가능성을 증가시킴을 확인하였다. 본 연구의 결과는 평가자-피평가자 간 지인관계의 영향을 배제한다면, 동료평가 방식의 연구제안서 평가가 인지적 편향을 내재하고 있음에도 불구하고 편향의 비용보다 전문성의 편익이 더 크다는 주장 을 실증적으로 뒷받침한다.
- Files in This Item
- There are no files associated with this item.
- Appears in
Collections - ETC > 1. Journal Articles
Items in ScholarWorks are protected by copyright, with all rights reserved, unless otherwise indicated.