2016年-世界发展银行全球_Impact_Evaluation_in_Practice_Second_Edition_367页_6mb

总结：Impact Evaluation in Practice（第二版）

核心内容

《Impact Evaluation in Practice》是一本关于如何进行影响评估的实用指南，旨在帮助政策制定者、研究人员和开发人员设计和实施有效的评估。本书系统介绍了影响评估的基本概念、方法论、实施步骤和数据获取策略，强调了基于证据的政策制定的重要性。

主要观点

1. 影响评估的意义

   • 影响评估是政策制定过程中不可或缺的工具，用于判断干预措施的实际效果。
   • 它能够帮助政策制定者了解项目是否达到了预期目标，并提供改进政策的依据。
   • 评估应基于清晰的因果关系推断，通过对比实验组和对照组，确定干预的真实影响。

2. 评估方法论

   • 本书介绍了五种主要的评估方法：随机分配、工具变量法、回归不连续设计、双重差分法和匹配法。
   • 每种方法都有其适用场景、优缺点和操作步骤，帮助读者选择最适合的评估方法。
   • 在实际操作中，评估方法可能需要进行调整，以应对不完全合规、溢出效应、样本流失等问题。

3. 评估的实施

   • 评估应从项目设计阶段就开始考虑，以确保其有效性。
   • 项目团队与研究团队需要密切合作，明确各自的职责，确保评估过程的科学性和政治可行性。
   • 评估的设计需要结合项目实际运行规则，包括受益人选择标准、资源分配方式和实施时间等。

4. 数据获取与样本选择

   • 数据收集是影响评估的关键环节，需确保样本的代表性与充分性。
   • 本书提供了如何选择样本、进行样本量计算和利用现有数据的实用建议。
   • 强调了数据透明性和开放科学的重要性，以提高评估的可信度和可重复性。

5. 伦理与科学结合

   • 评估过程中应遵循伦理原则，确保不损害受试者利益。
   • 评估应公开数据和方法，以促进科学交流和政策改进。

关键信息

• 支持机构：本书由世界银行和美洲开发银行联合出版，得到了战略影响评估基金（SIEF）的资助。
• 适用范围：本书聚焦于影响评估在发展项目中的应用，涵盖基本教育、卫生系统、儿童发展和水与卫生等关键领域。
• 案例研究：书中以“健康保险补贴计划（HISP）”为案例贯穿多个章节，展示了不同评估方法的实际应用。
• 配套资源：本书配套有在线资源，包括HISP案例的解答、数据集、Stata分析代码、技术手册、PPT课件和电子版书籍。

结构概述

第一部分：影响评估导论（第1章至第2章）

• 第1章：为何进行评估

  • 探讨基于证据的政策制定的重要性。
  • 介绍影响评估的基本概念、前瞻性与回顾性评估的区别。
  • 讨论有效性研究与效力研究的不同。
  • 强调伦理考量和评估在政策决策中的作用。

• 第2章：准备评估

  • 介绍如何构建理论框架和结果链。
  • 提供如何选择结果指标和绩效指标的指导。
  • 提供数据获取的检查清单。

第二部分：如何进行评估（第3章至第10章）

• 第3章：因果推断与反事实

  • 强调反事实估计是影响评估的核心。
  • 提供反事实估计的正确与错误示例。

• 第4章：随机分配

  • 介绍随机分配作为评估工具的原理和应用。
  • 提供随机分配的操作步骤和检查清单。

• 第5章：工具变量法

  • 讨论在非完全合规情况下的评估方法。
  • 提供随机推广作为工具变量的案例和检查清单。

• 第6章：回归不连续设计

  • 介绍基于资格指数的项目评估方法。
  • 提供模糊回归不连续设计和有效性检验的指导。

• 第7章：双重差分法

  • 介绍该方法在评估项目影响时的使用场景和假设条件。
  • 讨论“趋势相等”假设的验证方法和局限性。

• 第8章：匹配法

  • 介绍如何构建人工对照组。
  • 说明倾向得分匹配（PSM）的应用和限制。

• 第9章：应对方法挑战

  • 讨论异质性处理效应、非预期行为效应、溢出效应、样本流失等常见问题。
  • 提供应对策略和检查清单。

• 第10章：评估多方面项目

  • 介绍如何评估结合多种干预手段的项目。
  • 讨论不同干预层级和交叉设计的评估方法。

第三部分：如何实施影响评估（第11章至第14章）

• 第11章：选择评估方法

  • 根据项目规则选择合适的评估方法。
  • 提供不同方法的比较和评估方法选择框架。

• 第12章：管理评估

  • 讨论团队组建、时间安排、预算管理、资金筹措和数据收集的策略。
  • 强调政策与研究团队之间的协作机制。

• 第13章：评估的伦理与科学

  • 强调评估的伦理责任，包括不剥夺合格受益者的权益。
  • 介绍机构审查委员会的作用和开放科学实践的重要性。

• 第14章：传播结果与实现政策影响

  • 提供如何有效传播评估结果以影响政策的建议。
  • 强调沟通策略的定制化和结果的可操作性。

第四部分：如何获取数据（第15章至第17章）

• 第15章：选择样本

  • 讨论样本选择、抽样方法和样本量计算。
  • 强调样本应能代表目标人群。

• 第16章：寻找合适的数据来源

  • 提供如何利用现有数据和收集新数据的建议。
  • 强调问卷设计和电子数据收集的优缺点。

• 第17章：结论

  • 总结影响评估的价值与复杂性。
  • 提供影响评估设计的核心要素和风险缓解建议。

检查清单

• HISP案例检查清单：用于评估不同方法在实际中的应用。
• 方法选择检查清单：帮助读者根据项目特点选择合适的方法。
• 风险缓解检查清单：提供实施过程中常见问题的应对策略。

附录与补充材料

• 术语表：解释影响评估相关术语。
• 案例框：提供多个实际案例，展示不同评估方法的应用。
• 图表与表格：包括结果链、反事实估计、随机分配步骤、样本量计算等，帮助读者理解评估方法。

书籍信息

• 作者：Paul J. Gertler, Sebastian Martinez, Patrick Premand, Laura B. Rawlings, Christel M. J. Vermeersch
• 出版信息：2016年出版，由世界银行和美洲开发银行联合出版。
• ISBN：纸版：978-1-4648-0779-4；电子版：978-1-4648-0780-0
• DOI：10.1596/978-1-4648-0779-4
• 配套网站：http://www.worldbank.org/ieinpractice，提供数据集、分析代码、技术手册、PPT课件等资源。