今天分享的是：2026年CRASE5用于ACT写作技术报告
报告共计：31页
ACT推出升级版自动评分引擎CRASE5，写作评分迈入智能化新阶段
近日，ACT教育科技集团发布了《2026年CRASE5用于ACT写作技术报告》，详细介绍了其最新升级的构建式响应自动评分引擎CRASE5。作为ACT写作测试的核心评分工具，CRASE5的推出标志着大规模标准化考试的人工智能评分技术又向前迈进了一大步。
自2022年10月起，ACT开始使用其自动评分引擎CRASE为国际项目的写作论文提供评分服务。此后，这一技术逐步扩展至ACT区级考试、省级考试以及国家级数字考试。如今，随着CRASE5的研发完成，这一评分系统迎来了全面升级，不仅在评分准确性上有所提升，更增加了多项智能化功能，让机器评分更加接近人类评分员的判断标准。
技术升级：从模仿到理解的跨越
CRASE5的最大亮点在于其引入的几项创新功能。与传统自动评分系统不同，CRASE5具备了自动检测离题论文的能力，能够通过神经网络编码器模型精准判断考生的作文是否与题目要求相关。系统采用余弦相似度技术，当作文与提示语的语义相似度低于0.6时，将被判定为离题作文。
更值得关注的是，CRASE5还增加了令人不安内容的自动识别功能。这意味着系统能够检测出作文中可能包含的对考生自身、他人或财产造成伤害的建议性内容，从而让测试人员和学校管理层能够及时跟进，采取适当措施。这一功能的加入，体现了教育测评机构对考生心理健康和安全的高度重视。
此外，CRASE5还能提供对评分自信度的信息，让教育工作者了解系统对每一篇作文评分的确信程度，为人工复核提供参考依据。
数据验证：准确性令人信服
研究团队使用了约14000篇经过人工评分的ACT写作论文对CRASE5进行训练和验证。其中，8862篇论文用于训练模型，5128篇作为盲验证样本，确保验证过程的客观性和科学性。
验证结果显示，在1-6分的评分量表上，CRASE5与人类评分员的一致性令人满意。以写作的第一个领域“观点与分析”为例，CRASE5与评分员1的精确一致率达到71.1%，与评分员2的精确一致率达到71.6%，均超过了人类评分员之间68.0%的一致率。所有评分领域的二次加权Kappa系数均达到0.82以上，远高于行业标准要求的0.70门槛。
更令人惊叹的是，在2-12分的拓展量表上，CRASE5同样表现出色。系统评分与最终记录分数之间的二次加权Kappa系数高达0.88至0.91，显示出极强的评分一致性。这意味着CRASE5不仅能够准确判断作文的相对优劣，还能在更精细的分数层级上保持稳定的评判标准。
智能预检：多道关卡保障评分质量
在正式评分之前，CRASE5设置了多道预评分检查程序，确保只有符合要求的作文才会进入自动评分流程。系统会依次检查作文是否为空、是否使用非英语写作、是否难以辨认、是否符合最低字数要求、是否包含令人不安的内容以及是否离题。
展开全文特别值得一提的是，对于字数少于25词的极短作文，系统会将其交由人工评分员处理，避免因内容过少导致的评分偏差。同样，对于20%以上字符为大写的作文，也会转入人工评分通道，因为这类作文可能会影响语言识别程序和拼写检查机制的准确性。
这种多层级的预检机制，既充分发挥了自动评分的高效优势，又通过人工干预保障了特殊情况的评分质量，体现了技术应用中的审慎态度。
公平性分析：关注每一类考生群体
教育测评的公平性一直是社会各界关注的焦点。CRASE5技术报告专门对性别、西班牙裔身份以及种族/民族等不同考生群体的评分结果进行了深入分析。研究采用了ETS风格的子群体分析方法，对各项评分指标进行了细致比对。
分析结果显示，无论是在1-6分还是2-12分的评分量表上，不同性别、不同族裔背景的考生群体在CRASE5评分与人工评分的一致性上均表现良好。尽管个别子群体在某些领域的标准化平均差异略高于预设阈值，但总体来看，这些差异并不显著影响评分的准确性和公平性。与上一版本CRASE+相比，CRASE5在子群体评分一致性上还有所提升，偏离阈值的指标数量从四个减少到了两个。
这一研究结果有力回应了社会对自动评分技术可能存在偏见或歧视的担忧，为CRASE5的实际应用提供了重要的公平性证据。
未来展望：智能评分助力教育测评现代化
随着CRASE5的逐步推广应用，ACT写作测试的评分工作将更加高效、精准和智能。对于每年参加ACT考试的数十万考生而言，这意味着更快的成绩反馈和更稳定的评分标准。对于教育机构和学校管理者来说，CRASE5提供的离题检测和令人不安内容识别功能，将成为及时了解学生写作水平和心理状态的重要工具。
值得注意的是，CRASE5的设计理念充分体现了技术与教育的深度融合。它不是简单用机器替代人类，而是通过技术手段辅助和增强人类的评判能力。在未来应用中，对于大多数正常作文，CRASE5将提供快速准确的自动评分；而对于少数特殊情况，如离题作文、极短作文或包含敏感内容的作文，系统会自动转入人工评分通道，形成人机协同的最佳评分模式。
这种智能化的评分解决方案，不仅适用于ACT这样的大规模标准化考试，也为其他教育测评项目的自动评分技术发展提供了有益借鉴。随着自然语言处理技术的不断进步，我们有理由相信，自动评分技术将在未来教育测评中发挥更加重要的作用，为每一位学习者提供更加公平、准确、高效的评估服务。
以下为报告节选内容
报告共计： 31页
中小未来圈，你需要的资料，我这里都有！
