在花
返回时间线
· 21:46 · 已编辑 · 0 条回复 ·

出分了!首个AI高考全卷评测结果发布

2024年全国高考甫一结束,司南评测体系OpenCompass选取6个开源模型及GPT-4o进行高考“语数外”全卷能力测试。评测采用全国新课标I卷,参与评测的所有开源模型,开源时间均早于高考,确保评测 “闭卷”性。同时,成绩由具有高考评卷经验的教师人工评判,更加接近真实阅卷标准。

首个大模型高考全卷评测结果显示,Qwen2-72B、GPT-4o及书生·浦语2.0文曲星(InternLM2-20B-WQX)成为本次大模型高考的前三甲,得分率均超过70%。大部分模型“考生”语文、英语科目表现良好,但在数学方面还有很大的提升空间。其中,InternLM2-20B-WQX取得了数学单科的最高分,超越包括GPT-4o在内的所有模型。

评测细节(GitHub)
上海人工智能实验室

关注频道 @ZaiHuaPd
频道爆料 @ZaiHuabot

Telegram 评论区

0 条回复,可以前往 Telegram 继续讨论。

去评论区