2025-03-16-ACT_Education_Corp.-_增强型ACT链接研究报告_25页_1mb

增强型ACT链接研究报告总结

核心内容

本报告详细分析了2024年6月ACT链接研究的结果，以评估增强型ACT测试与传统ACT测试之间的等价性及心理测量特性。研究旨在确保增强版ACT考试在结构、分数报告和测量精度方面与旧版保持一致，从而支持其在全国、州和地区以及国际范围内的推广。

主要观点

• 测试形式变更：从2025年4月开始，ACT将引入增强版形式。增强版测试包括缩短测试长度和总时间，增加每题时间，科学测试变为可选，以及将综合分数从EMRS（英语、数学、阅读和科学）调整为EMR（英语、数学和阅读）。
• 等价性评估：ACT通过链接研究确保增强版与传统版在测量结构上保持一致，并在相同的1-36分数量表上报告分数。
• 心理测量特性：增强版测试在可靠性、标准误差和分类一致性方面表现良好，尽管存在轻微的测量精度下降，但对分数解释影响极小。
• 完成率与感知时间：增强版测试对测试完成率和学生对时间充足性的感知产生了一定的积极影响，尤其是在阅读和科学部分。
• 人群不变性：链接结果在不同子群体中表现出稳健性，支持增强版与传统版之间的分数等效性。

关键信息

测试变更详情

• 英语：项目数从75减少到50，测试时间从45分钟减少到36分钟，平均每题时间从42秒增加到42秒（略有调整）。
• 数学：项目数从60减少到45，测试时间从60分钟减少到50分钟，平均每题时间从67秒增加到67秒。
• 阅读：项目数从40减少到36，测试时间从53分钟减少到40分钟，平均每题时间从67秒增加到60秒。
• 科学：项目数从40减少到40，测试时间从53分钟减少到40分钟，平均每题时间从60秒增加到60秒（注：科学测试在6月研究中为45分钟，后调整为40分钟）。

数据收集与样本

• 样本量：最终清洗后的数据集包含6,882名学生，其中传统形式2,298名，增强形式1和2分别为2,280名和2,304名。
• 人口统计：样本在性别和种族/民族分布上与ACT全国测试人群相似，平均综合分数也接近。

构建等价性

• 确认性因子分析：所有测试形式均通过了Hu和Bentler（1999）提出的可接受拟合标准（RMSEA < 0.06，CFI > 0.95）。
• 因子负荷：平均标准化因子负荷在0.49至0.56之间，表明项目与潜在因素之间的中等相关性。

心理学特性

• 可靠性：增强版测试的可靠性分别为EMRS综合指标0.96和EMR综合指标0.94，测试部分的可靠性介于0.83至0.88之间。
• 标准误差：增强版测试的SEM（标准误差）与传统版相似，但阅读部分SEM略高（约2.5）。
• 分类一致性：增强版测试的分类一致性指数在0.70至0.89之间，略低于传统版的0.77至0.92，但仍保持较高水平。

连接方法

• IRT真分数等值：ACT采用Stocking和Lord（1983）的程序，通过校准项目参数将增强版与传统版链接。
• 转换表：通过比较子群体与总群体的转换表，评估链接的稳健性，所有比较的WRMSD值均小于半分，表明人群不变性良好。

时序分析

• 快速响应率：增强版测试的快速响应率略低于传统版，但科学部分在两种形式中均较高。
• 完成率：增强版测试在科学和数学部分完成率有所提高，阅读部分略有下降，英语部分则略有下降。
• 省略率：增强版测试在阅读和科学部分的省略率低于传统版，显示出学生有更多时间审题。
• 时间感知：增强版测试在阅读和科学部分被更多学生认为有足够时间完成。

项目访问次数

• 重复访问项目：增强版测试中，更多项目被重复访问，尤其是在科学和数学部分，表明学生有更多时间审阅题目。

结论

增强版ACT测试保持了与传统ACT测试相同的测量结构，并在相同的1-36分数量表上报告分数。尽管测试长度缩短导致测量精度略有下降，但其对分数解释的影响非常小。增强版测试在完成率和时间感知方面有轻微的积极影响，且在人群不变性方面表现稳健。因此，增强版ACT测试与传统版测试的分数可以相互替代使用。

附录：相关表格与图表

• 表1：项目数量与测试时间的比较
• 表2：人口统计学特征
• 表3：一因子模型的模型拟合统计量
• 表4：可靠性估计和标准误差
• 表5：相关系数与去偏相关系数
• 表6：EMRS综合评分的有效权重
• 表7：EMR综合评分的有效权重
• 表8：ACT大学准备标准与WorkKeys NCRC指标的分类一致性
• 表9：正确比例原始分数的描述性统计
• 表10：规模得分的描述性统计
• 表11：子组与总组比较的WRMSD统计
• 图1-图12：测试特性曲线、完成率、省略率、时间感知等描述性统计图

致谢与参考文献

• 感谢辛·李、克里斯蒂娜·安古亚诺-卡拉斯科、凯特·沃尔顿和达娜·穆拉诺的贡献。
• 参考文献包括ACT技术手册、Dorans和Holland（2000）、Hu和Bentler（1999）、Kolen等人（1992）及Livingston和Lewis（1995）等。