近日,英国商业、能源与工业战略部发布独立调查委员会报告,分析了目前用以评估大学和研究机构科研水平的卓越研究框架(REF)。REF是英国政府从2012年开始运行的科研评估框架,每5-6年进行一轮评估,每年会依据新的数据对评估结果进行微调。REF评估主要按照各大学和研究机构提交的研究论文列表及工作影响报告进行评估,评估结果作为政府每年进行科研资金分配的依据。
报告分析目前的REF评估框架主要存在的问题包括:成本问题、评估内容、样本选择、同行评议、对研究影响的评估、跨学科与合作研究的评估、对职业生涯的影响、研究环境评估、科研影响案例研究、评估的周期性和动态性。
基于以上分析,报告提出九大改进建议:所有对科研项目负有重大责任的活跃研究人员和常见的文献数据在评估中都应该进入REF评估范围,以便准确描述大学和研究机构的科研与教学活动;对不同的研究单元使用统一的数据但要保持灵活性,对教师的评估要不同于科研人员;评估结果不能简单地划分等级;为同行评议小组提供评估指标体系,保证评估的透明性;各大学和机构应灵活展示跨学科研究项目的影响与效果,积极提交“机构”级的影响案例分析;影响案例分析应能够证明研究的质量,也可以是跨机构的研究成果;要制定REF指南,明确指导影响案例分析报告如何撰写,包括社会经济影响、对政府政策的影响、对公众参与和理解的影响、对文化生活的影响、在学术以外和教学的影响;建立新的研究环境评估机制,包括机构的未来研究战略,支持高质量研究和跨学科、跨机构研究的举措等;对于机构下的具体学术研究单元也要通过关键指标简要评估其研究环境与机制水平。