2008年-世界发展银行全球_Developing_Tests_and_Questionnaires_for_a_National_Assessment_of_Educational_Achievement_190页_1mb

报告摘要

总结：Developing Tests and Questionnaires for a National Assessment of Educational Achievement

核心内容

本卷《Developing Tests and Questionnaires for a National Assessment of Educational Achievement》是《National Assessments of Educational Achievement》系列的第二卷，主要聚焦于如何设计和开发用于国家教育评估的测试和问卷，尤其强调在发展中国家实施此类评估时的技术细节与注意事项。

主要观点

评估工具的重要性
任何国家教育评估的质量都取决于所使用的工具。如果工具设计不当，评估可能浪费大量时间和资源。
评估框架与蓝图
评估框架是指导测试和问卷开发的关键，它定义了评估的内容、目标和对象，帮助确保评估的全面性和一致性。蓝图（Table of Specifications）是评估框架的具体体现，用于确定测试内容的分布和覆盖范围。
测试与问卷的设计原则
- 有效性：测试必须准确反映所要评估的构念（如阅读或数学能力）。
- 语言选择：测试语言应适合目标学生群体，避免歧义。
- 题型设计：题型需多样化，包括选择题、填空题、开放性问题等，以适应不同评估目标。
- 题目偏见：需避免因文化、语言或社会背景差异导致的题目偏见。
预测试与数据管理
预测试是评估工具开发的重要环节，用于测试题目难度、清晰度和信度。数据录入和清理是确保结果准确性的关键步骤。
问卷设计与实施
问卷用于收集背景信息，如学生、教师、家长或学校管理层的反馈。设计问卷时需考虑内容、语言、格式和受访者的理解能力。
标准化实施
为确保所有学生在相同条件下完成测试，需设计详细的测试管理员手册，并对测试人员进行培训和监督。
资源与支持
评估项目需要多方面的支持，包括教育部门的指导、实施机构的组织、专家团队的参与，以及技术支持（如CD中的示例）。

关键信息

评估流程阶段：测试和问卷的开发分为八个阶段，包括框架准备、蓝图设计、题目编写、预测试、数据录入、数据分析、最终报告制作等。
时间安排：各阶段所需时间大致为几周，具体时间取决于题目数量、翻译需求和实施复杂度。
参与人员：包括教育部门（MOE）、国家指导委员会（NSC）、实施机构、测试开发经理、学科专家、题目编写者、数据分析师等。
CD资源：附带的CD提供了大量测试题目、问卷示例和管理员手册，帮助评估团队熟悉不同学科领域的题目类型和设计方式。
多国案例：书中引用了多个发展中国家和国际评估项目的案例，如巴布亚新几内亚、新西兰、菲律宾等，以展示不同背景下的评估实践。

详细结构

Part 1: 构建成就测试

Chapter 1: 引言
介绍国家评估的整体流程，强调测试和问卷开发的重要性。
Chapter 2: 构建评估框架
- 评估框架的作用：指导测试内容和设计。
- 包括构念定义、任务特征、结果解释等。
- 强调在评估开始前明确目的和对象。
Chapter 3: 题目编写
- 题目难度与偏见的控制。
- 刺激材料的选择与设计。
- 题目格式（如选择题、填空题、开放题）。
- 提供题目编写团队和审查流程的建议。
Chapter 4: 预测试
- 预测试设计、印刷、实施和评分。
- 可靠性评估与题目调整。
Chapter 5: 选择测试题目
- 分析题目数据以选择最合适的测试内容。
Chapter 6: 制作最终测试
- 设计最终测试的格式和布局。
- 印刷和校对流程。
Chapter 7: 手工评分
- 如何进行手工评分以确保一致性。