20250301-ACT_Education_Corp.-_增强型ACT链接研究报告__25页_1mb
报告摘要
增强型ACT链接研究报告总结
核心内容
本报告总结了ACT在2025年4月引入增强版形式后的链接研究结果。研究的主要目标是评估增强版ACT测试与传统ACT测试之间的等价性,包括结构等价性、心理测量特性、分类一致性、以及测试完成情况和时间感知。
主要观点
- 测试形式变更:增强版ACT测试在2025年4月开始在线考试,2025年9月面向所有学生推出,2026年春季覆盖州和地区。主要变更包括测试长度和时间的减少,每项测试时间增加,科学测试变为可选,以及综合分数计算方式的调整。
- 评分标准不变:尽管测试形式发生变化,ACT仍保持1-36的评分标准,以确保历年分数的一致性。
- 结构等价性:增强版ACT测试与传统形式在测量结构上保持一致,通过确认性因子分析验证了其一因子模型的拟合指数和因子负荷量与传统形式相似。
- 测量特性:增强版ACT的可靠性略低于传统形式,但仍然保持高度可靠性(EMR综合得分为0.94,EMRS综合得分为0.96)。标准误差测量(SEMs)在增强版测试中略有上升,但对分数解释影响极小。
- 分类一致性:增强版ACT在分类一致性方面表现良好,与传统形式相比略有下降,但仍处于较高水平(0.70-0.89)。
- 测试完成率与时间感知:增强版ACT测试在某些部分提高了测试完成率,尤其是在科学和阅读部分。学生对时间充足程度的感知也有所提升,但英语和数学部分的完成率略有下降。
关键信息
测试结构与时间变化
- 英语:项目数量从75减少至50,测试时间从45分钟减少至36分钟,平均时间从42秒增加至45秒。
- 数学:项目数量从60减少至45,测试时间从60分钟减少至50分钟,平均时间从67秒增加至60秒。
- 阅读:项目数量从40减少至36,测试时间从53分钟减少至40分钟,平均时间从67秒增加至60秒。
- 科学:项目数量从40减少至40,测试时间从45分钟调整为40分钟,平均时间从68秒调整为60秒。
数据收集与样本特征
- 研究样本共6,882名学生,包括传统形式(2,298名)和两个增强形式(2,280名和2,304名)。
- 样本的性别和种族/民族分布与ACT国家测试的人口统计特征相似,且综合分数分布也具有代表性。
心理测量属性
- 可靠性:增强形式的可靠性分别为EMRS综合指标0.96和EMR综合指标0.94,测试部分的可靠性在0.83至0.88之间。
- 标准误差测量(SEMs):EMRS综合分数的SEMs约为1,EMR综合分数的SEMs约为1,测试部分的SEMs约为2,增强阅读测试的SEMs略高于2.5。
- 无衰减相关性:增强形式与传统形式之间的无衰减相关性相似,表明测试之间的等效性良好。
分类一致性
- ACT大学入学准备基准和WorkKeys NCRC指标的分类一致性在增强形式中分别为0.70-0.85和0.75-0.80,略低于传统形式(0.77-0.92)。
- 尽管分类一致性略有下降,但考虑到有五个NCRC类别,增强形式的协议率仍然相当高。
人口不变性评估
- 通过比较不同子群体的转换表,评估了链接函数的稳定性。
- 所有比较的加权均方根差异(WRMSD)均小于半分值,表明增强形式与传统形式在不同人群中表现一致。
测试完成率与时间感知
- 完成率:增强形式在科学和阅读部分的完成率略有上升,英语和数学部分的完成率略有下降。
- 时间感知:增强形式在阅读和科学部分的“时间充足”感知比例高于传统形式,英语和数学部分则较为接近。
结论
增强版ACT测试保持了与传统形式相同的测量结构和评分标准,对分数解释的影响极小。尽管测试长度减少导致测量精度略有下降,但对实际应用影响不大。因此,增强版ACT测试和传统ACT测试的分数可以相互替代使用。
展开完整摘要
试读结束,高清完整版pdf/doc/ppt,请点下载