2010年-世界发展银行全球_Monitoring_Monitoring___Assessing_Results_Measurement_at_the_World_Bank_40页_3mb

总结：Monitoring Monitoring - Assessing Results Measurement at the World Bank

核心内容

本讨论论文由世界银行健康、营养与人口（HNP）部门的Daniel Cotlear和Dorothy Kronick撰写，旨在评估世界银行拉丁美洲和加勒比地区人类发展部门（LCSHD）在项目结果监测方面的实践。论文基于定量和定性数据，分析了67个项目的项目评估文件（PADs）和近600份实施状态报告（ISRs），并结合对部门员工的访谈，揭示了世界银行在结果监测方面存在的问题和改进空间。

主要观点

1. 结果监测的重要性
   世界银行近年来对结果监测的重视程度显著提高，但仍缺乏一个系统化的结果监测框架。尽管部分项目采用了结果导向拨款（RBD）机制，并且一些项目在结果框架的设计和指标设定上有所改进，但整体来看，结果监测仍处于初级阶段。

2. 定量数据揭示的问题

   • 仅约25%的PDO指标在项目开始时有基线数据。
   • 约25%的PDO指标从未出现在ISRs中。
   • 约50%的PDO指标在ISRs中没有后续测量记录。
   • 少于10%的PDO指标每年至少被测量一次。
   • 结果框架在部门内部存在不一致，PDO指标与项目正文描述不匹配的情况普遍存在。

3. 定性数据的补充
   通过访谈，发现部门内部在结果监测方面存在知识和能力的不足，特别是在如何准确测量指标、如何有效使用数据以及如何在项目执行过程中进行持续监测方面。

4. 部门级问题与解决方案

   • 项目正文与结果附录之间的不一致问题已通过内部行动计划得到改善。
   • 项目团队正在利用研究结果提高PDO和指标的清晰度和可测量性。
   • 结果导向拨款的使用率较低，但已开始被更多项目考虑。

5. 银行级问题与建议

   • 缺乏统一的规则、流程和激励机制来支持结果监测。
   • 缺乏一个用于报告结果的物理平台。
   • 结果监测的系统性不足，导致学习和问责机制不健全。

关键信息

• 数据来源：67个项目的PADs和近600份ISRs，以及对部门员工的访谈。
• 指标数量：总共519个PDO指标、1168个中间指标、594份ISRs。
• 主要发现：
  • 项目初期结果框架的质量有所提升。
  • 有5个项目采用结果导向拨款，监测强度高于平均水平。
  • 与其它地区和机构的比较显示，LCSHD在结果监测方面表现较好。
• 建议：
  • Think Big：重新审视激励机制和平台建设，以系统化方式推动结果监测。
  • Define Success：明确结果监测的目标，如跟踪项目指标并支持长期学习。
  • Talk to TTLs：在改革过程中纳入操作人员的视角。

方法论

• 定量分析：从PADs和ISRs中提取数据，分析指标是否被跟踪、是否有基线数据、是否定期测量等。
• 定性分析：通过访谈了解部门员工对结果监测的看法和实践中的挑战。
• 研究范围：涵盖健康、教育和社会保护三个领域，时间跨度为2000年至2008年。

结论

尽管LCSHD在结果监测方面取得了一定进展，但世界银行整体仍缺乏一个全面、系统的结果监测机制。该研究建议，应从银行层面推动改革，建立统一的规则、平台和激励结构，以提升结果监测的有效性和一致性。