兰德-Developing-a-research-impact-performance-management-system-for-The-Research-Council,-Oman_-Final-Report_187页_4mb

研究影响绩效管理系统开发总结 - 《研究委员会》（TRC）, 阿曼

核心内容概述

本报告旨在总结为阿曼研究委员会（TRC）开发研究影响绩效管理系统的全过程。该系统的设计与应用是为了衡量TRC资助研究项目的影响力，并支持其战略目标的实现。报告包括了系统构建的各个阶段、核心指导原则、数据收集与分析方法以及主要发现。

主要观点

• 研究影响绩效管理系统 是一种用于衡量研究活动对社会、经济、文化等领域影响的工具。
• 该系统不仅包含一系列绩效指标（即“仪表盘”），还包括数据收集和分析的方法，以支持对研究影响的持续评估。
• TRC是阿曼的主要科研资助机构，其使命是创建一个能够响应本地需求和国际趋势、促进社会和谐、并推动创新与卓越的科研生态。
• 系统的设计与实施需考虑阿曼的科研背景、国家研究战略及TRC的使命和愿景。

关键信息

1. 项目概述

• TRC委托RAND Europe开发研究影响绩效管理系统，以评估其科研项目的影响。
• 项目分为多个阶段，最终成果包括本报告和《操作指南》。
• 系统设计注重适应性与灵活性，以满足未来TRC的发展需求。

2. 指导原则

• 指导原则1：系统应与TRC的战略目标和利益相关者的期望一致，具备多层级结构，便于未来扩展。
• 指导原则2：系统应关注科研与创新发展的不同阶段，并促进其可持续发展。
• 指导原则3：系统应便于研究人员、政策制定者及其他利益相关者使用。
• 指导原则4：系统应与国家科研战略的宗旨和目标保持一致。
• 指导原则5：系统应保持高度透明性。
• 指导原则6：系统应具备电子可访问性。
• 指导原则7：系统应利用现有数据，并为未来数据的使用做好准备。
• 指导原则8：系统应整合而非分割科研体系，为科研和创新提供支持。

3. 仪表盘与指标

• 系统分为两个层级：TRC顶层仪表盘 和 各科研项目层级仪表盘。
• 顶层仪表盘用于反映TRC各项目的整体表现，以及其对战略目标的贡献。
• 各项目层级仪表盘用于展示具体项目的输入、过程、产出和成果。
• 指标涵盖学术与非学术影响，如知识创造、社会影响、经济效益等。

4. 数据收集与主要发现

• 数据收集方法 包括：
  • 文献计量分析：评估阿曼科研产出的领域分布与影响力。
  • ImpactFinder调查：了解科研人员和利益相关者对科研影响的看法。
  • 影响案例研究：分析具体科研项目对社会、经济、文化等方面的实际影响。
• 主要发现：
  • 阿曼科研产出主要集中在某些领域，如环境、健康、信息技术等。
  • 调查结果显示，大多数受访者认为科研对社会、政策和经济有积极影响。
  • 案例研究表明，TRC资助的研究项目在促进技术转化、社会福祉和经济发展方面具有潜力。

5. 系统的未来应用

• 本报告为TRC提供了基础数据，用于建立研究影响绩效管理系统的基准。
• 《操作指南》将提供系统使用和更新的指导，以确保其在TRC发展过程中的持续适用性。
• 该系统将有助于TRC明确各科研项目对战略目标的贡献，并推动其向创新生态系统愿景迈进。

项目背景

1.3.1. 阿曼2020愿景与国家科研战略

• 阿曼2020愿景旨在推动经济多元化，发展非石油经济部门，如金融、教育、健康等。
• 国家科研战略（NRS）是TRC成立和发展的基础，其目标包括：
  • 建立科研能力
  • 促进科研卓越
  • 推动本地与国际知识转移
  • 实现科研成果的价值转化
  • 构建有利于科研的环境
• 2013年，TRC已资助114个研究项目，覆盖多个研究领域。

1.3.2. TRC的结构与未来方向

• TRC是一个涵盖科研与创新的广泛组织，设有多个部门，包括创新部、国际合作部、IT部、行政与财务部等。
• TRC的主要科研项目包括开放研究基金、战略研究基金、研究主席计划、研究中心计划等。
• TRC还致力于建设创新公园（Muscat Innovation Park）以促进科研与创新生态系统的形成。

概念框架

1.4.1. 研究影响绩效管理的挑战

• 归因问题：确定某一研究成果是否可归因于TRC的资助。
• 时间滞后：研究影响可能需要10-20年才能显现。
• 数据质量：数据的可靠性、有效性与准确性是影响评估的关键。
• 评估单位：确定应评估的单位（如整个创新生态系统、TRC、各项目或个别资助计划）。
• 评估成本：研究影响评估成本较高，需权衡其效益。

结论与建议

• 本项目为TRC提供了一个初步的绩效管理框架，以衡量其科研活动的影响。
• 系统将有助于TRC实现其战略目标，即建设一个创新、多元和可持续发展的科研生态系统。
• 未来，TRC需持续完善数据收集和系统更新，以确保其能全面反映科研对社会的贡献。

附录内容概览

• 附录1：TRC科研项目概述，包括资助领域和项目数量。
• 附录2：文献计量分析，涵盖研究领域、出版量与影响力。
• 附录3：ImpactFinder调查分析，包括科研人员与利益相关者对科研影响的认知。
• 附录4：影响案例研究，分析具体项目在技术、社会、经济等领域的实际影响。
• 附录5：各项目层级仪表盘，提供详细指标与数据。

参考文献

• OECD (2002) 《研究与结果导向管理的关键术语词典》
• Marjanovic, S., S. Hanney and S. Wooding (2009) 《研究评估研究的历史回顾》
• UNESCO (2014) 阿曼国家资料档案
• OECD (2014) 《主要科技指标》

项目团队与致谢

• 本报告由Joachim Krapels、Molly Morgan Jones、Sophie Castle-Clarke、David Kryl、Obaid Younossi共同完成。
• 感谢TRC秘书长Dr Hilal Al-Hinai的委托，以及Dr Saif Al-Hiddabi和Ms Samia Al-Jahwari的项目支持。
• 感谢Dr Susan Guthrie和Alexandra Pollitt对文档的评审，以及Professor Jonathan Grant作为特别顾问的支持。

图表概览

• 图1.1：研究绩效管理的“四A”概念（倡导、问责、分析、资源配置）
• 图1.2：TRC组织架构图
• 图1.3：科研投资与社会经济影响之间的时滞
• 图1.4：通用逻辑模型
• 图1.5：TRC影响路径的逻辑模型
• 图1.6：TRC研究影响绩效管理系统的概念框架
• 图1.7：项目任务描述

总结

本报告为TRC构建了一个研究影响绩效管理系统的初步框架，旨在衡量科研活动对社会、经济、文化等领域的贡献。系统设计基于阿曼2020愿景和国家科研战略，强调灵活性、透明度与数据驱动的决策。数据收集方法包括文献计量、调查与案例研究，为未来系统完善提供了基础。报告还指出，研究影响评估面临归因、时间滞后、数据质量等挑战，需在系统设计与实施过程中加以考虑。最终，TRC将利用该系统促进其科研目标的实现，并推动阿曼科研生态系统的持续发展。