피인용 특성 분석을 통한 출연(연) 임무중심형 기관평가의 질적 성과평가 개선 방향
Developments of Evaluation System for Qualitative Performance Measurement in Government-Supported Research Institute by Article Citation Method
이문영(한국천문연구원); 이찬구(충남대학교)
19권 4호, 768~798쪽
초록
본 연구는 과학기술계 정부출연 연구기관 평가에서 논문의 질적 평가를 위해 새로 도입된 피인용도 지표가 성과지표의 구성요건 중 적시성을 충족할 수 있는가라는 문제의식에서 출발하였다. 이에 피인용 반감기와 즉시성 지수 등 논문의 주기적 특성을 분석･활용하여 실질적인 질적 성과체계로 전환하기 위한 기관평가의 개선방향을 제시하고자 한다. 연구 결과는 기술의 발달과 의존성이 높아짐에 따라 학문의 변화속도 또한 빠르게 변화하고 있으나, 공공기술은 타 분야에 비해 인용속도가 느리고, 산업과 연관된 분야는 지식이전 속도가 빠른 것으로 분석되고 있다. 또한, 학문분야 특성에 따른 피인용 주기는 차이가 없었으며, 각 분야의 질적으로 우수한 논문의 평가 시 피인용 지수의 타당성을 확보하기 위해서는 6년 정도의 기간이 누적된 데이터가 필요한 것으로 분석되었다. 분야별 질적 성과평가를 위해 필요한 피인용의 시간적 특성을 기술통계적으로 도출한 결과를 반영하여 임무중심형 연구기관 평가의 문제점을 도출하였다. 이를 개선하기 위한 객관적이고 타당한 질적 평가를 위한 정책적 개선방향을 제시하였다.
Abstract
This study started from the awareness of the issue if the citation index newly introduced to evaluate the quality of papers satisfies the proper timing matter, which is a component of performance indicators for the evaluation of government-funded R&D institutes. Accordingly, the study will propose improvement ways to shift the previous evaluation system to quality evaluation for mission-oriented R&D institutes by analysing and using the periodical characteristics such as citation half-life and immediacy index of papers. As a result, it turned out that the speed of academic change is getting faster in proportion to the dependency on the technological development but that the citation speed in the field of public technology is relatively slower and the speed of knowledge transfer in the fields related to industry is faster. In addition, the citation index among the R&D fields showed no differences, and the minimum period for citation index measurement with validity should be over 6 years. The problems of evaluation for mission-oriented R&D institutes were deducted based on the technical and statistical analysis results of the temporal characteristic of citation necessary for quality evaluation of performance among R&D fields. To solve the problems, policy alternatives for object and valid quality evaluation were proposed from the points of evaluation period and evaluation criteria.
- 발행기관:
- 한국기술혁신학회
- 분류:
- 기술정책