兰德-提升课堂学习条件-Elevate平台2023年直接支持实施模式评估(英)_25页_492kb
报告摘要
详细总结:Elevate 平台 2023 直接支持实施模型评估报告
核心内容概述
本报告评估了 PERTS 开发的 Elevate 平台在 2023 直接支持实施模型下的效果。Elevate 是一个帮助教师改善课堂学习条件的工具,旨在通过收集学生反馈、反思教学实践、选择教学策略、评估学生感知变化,从而提升学生的参与度和学习体验。研究目的是分析 Elevate 是否对学生的成绩、成长型思维、归属感等核心学习成果,以及教师的倦怠感、学校气候感知、教学条件等教师相关成果产生影响。
主要观点
- 核心成果无显著影响:在 2023 直接支持实施模型下,教师使用 Elevate 与学生的课程成绩、成长型思维和归属感之间没有显著关联。
- 教师倦怠无显著影响:教师使用 Elevate 与教师报告的倦怠感也没有显著关联。
- 积极关联的探索性发现:探索性分析显示,教师使用 Elevate 与学生对教师重视学生声音和关怀的评价,以及教师对重视学生声音的评价之间存在正向关联,这与 Elevate 平台的设计目标一致。
- 需要进一步研究:为确认探索性分析结果,需开展更严谨的研究以全面理解 Elevate 在课堂中的影响。
关键信息
项目背景
- Elevate 平台:由 PERTS 开发,帮助中高年级教师改善课堂学习条件。
- 学习条件定义:指影响学生学习心理体验的条件,与学生参与度和学业成果相关。
- 实施模型:2023 直接支持模型中,学校和学区直接与 PERTS 合作实施 Elevate,教师获得实施建议、实践社群、指导反思和 facilitator 网络等支持。
实施情况
- 参与学校与教师:共有六个参与站点,其中部分学校和教师选择使用 Elevate,其他则保持常规教学。
- 实施方式:教师在学年内完成 2-5 次 Elevate 循环,每次循环包括学生反馈、反思、选择教学策略和评估学生感知变化。
- 课程覆盖:教师主要在数学、英语、科学和历史课程中使用 Elevate。
数据收集
- 学生数据:包括年级、课程、教师信息,以及 2022-2023 年的课程成绩和 2023-2024 年的课程成绩。
- 教师数据:包括教师性别、种族、教学背景信息,以及教师对教学条件、学校气候和教师倦怠的评价。
- 调查问卷:在 Elevate 实施前和后分别对学生和教师进行调查,以评估学习条件和成果的变化。
分析方法
- 倾向得分加权:用于平衡 Elevate 课堂和对照课堂在可观测特征上的差异,以减少选择偏差。
- 普通最小二乘回归:用于分析教师相关成果。
- 样本分组:分为意图治疗(ITT)样本和实际治疗(TOT)样本,分别用于评估不同实施程度下的效果。
样本特征
- 学生样本:样本中约一半为男性(48%),大部分为白人(38%)或多种族(27%)。
- 年级分布:学生在 6-8 年级(39%)和 9-12 年级(61%)之间分布不均,主要因为传统高中多一个年级。
- 教师样本:在 ITT 和 TOT 样本中,使用 Elevate 的教师更可能为男性,且在某些教学条件指标上得分更高。
研究结论
- 主要成果无显著影响:Elevate 的使用未对学生的课程成绩、成长型思维和归属感产生显著影响。
- 探索性成果有积极关联:教师使用 Elevate 与学生对教师重视学生声音和关怀的感知,以及教师自身对重视学生声音的评价呈正相关。
- 样本限制:由于教师数量有限,未能成功实施倾向得分匹配;同时,部分学生和教师的背景信息缺失,需进行多重插补处理。
未来研究建议
- 进一步验证探索性结果:需要更严谨的研究设计来确认 Elevate 的潜在影响。
- 扩展研究范围:考虑更多变量和不同实施模型,以全面理解 Elevate 的影响机制。
附录信息
- 技术附录:提供了详细的样本特征、分析方法和结果,可访问 www.rand.org/t/RRA3955-1。
- 数据来源:包括行政记录、调查问卷和外部开发的标准化量表。
附:主要研究问题
- Elevate 与学生的课程成绩、学术态度、学校气候感知等成果的关系?
- Elevate 与教师的幸福感、学校气候感知、教学条件等成果的关系?
- 这些关系是否因学生特征或学科不同而变化?
附:样本特征
| 特征或成果 | 总体均值 | 治疗组均值 | 对照组均值 |
|---|---|---|---|
| 学生性别(男) | 0.48 | 0.45 | 0.50 |
| 学生种族(白人) | 0.38 | 0.39 | 0.38 |
| 学生种族(多种族) | 0.27 | 0.26 | 0.27 |
| 学生种族(其他) | 0.35 | 0.35 | 0.35 |
| 学生种族(弱势群体) | 0.34 | 0.30 | 0.36 |
| 年级 | 总体均值 | 治疗组均值 | 对照组均值 |
|---|---|---|---|
| 6年级 | 0.13 | 0.12 | 0.13 |
| 7年级 | 0.14 | 0.16 | 0.13 |
| 8年级 | 0.12 | 0.12 | 0.12 |
| 9年级 | 0.17 | 0.18 | 0.17 |
| 10年级 | 0.16 | 0.16 | 0.16 |
| 11年级 | 0.16 | 0.13 | 0.17 |
| 12年级 | 0.12 | 0.14 | 0.11 |
附:主要成果指标
| 成果类型 | 成果名称 | 数据来源 |
|---|---|---|
| 学生成果 | 课程成绩 | 行政数据 |
| 学生成果 | 成长型思维 | 改编自 Dweck 的量表 |
| 学生成果 | 学生声音 | PERTS 开发 |
| 学生成果 | 教师关怀 | PERTS 开发 |
| 学生成果 | 归属感 | 学校归属感量表 |
| 学生成果 | 身份安全 | 学生体验项目 |
| 教师成果 | 教师倦怠 | Marshall 等人(2023) |
| 教师成果 | 信任社区 | PERTS 开发 |
| 教师成果 | 学习文化 | PERTS 开发 |
| 教师成果 | 换位思考 | PERTS 开发 |
| 教师成果 | 教师效能 | PERTS 开发 |
| 教师成果 | 专制纪律信念 | Okonofua(2015) |
| 教师成果 | 教师对学生的态度 | 教师倦怠量表 |
附:研究局限性
- 样本规模有限:教师数量不足,导致倾向得分匹配无法有效实施。
- 数据缺失:部分学生和教师的背景信息缺失,需通过多重插补处理。
- 实施模型多样性:不同学校采用不同的实施方式,可能影响研究结果的一致性。
附:研究支持
- 资助方:Overdeck Family Foundation
- 研究团队:PERTS 研究人员 Sarah Gripshover, Isaac Ahuvia, Ellena Yohannes, Dave Paunesku
- 审稿人:Umut Özek, Ayesha Hashim
- 质量保证团队:Jonathan Schweig, Mirka Vuollo
- 编辑与出版团队:Babitha Balan
附:研究设计
- 预注册:研究设计在 Open Science Framework 上预注册(Gripshover 等,2025)。
- 平衡性检查:通过倾向得分加权确保治疗组和对照组在可观测特征上的平衡。
- 数据处理:采用多重插补方法处理缺失数据,不进行结果数据插补。
展开完整摘要
试读结束,高清完整版pdf/doc/ppt,请点下载