AI参加高考,为何偏科严重
(资料图)
文综评测中,GPT-4o获237分,优于多数人类考生。国产大模型中,豆包文综成绩最高,得分224.5分,其中历史达到82.5分,在所有9款大模型中排第一。地理考卷有大量图片考题,图像理解能力较强的GPT-4o得到最高分,但仅有68分。
语文、英语评测中,多家大模型在客观题上拿满分。但写作文是弱项。多次参加全国高考语文阅卷的北京市级骨干教师、怀柔区语文学科带头人夏老师是本次评测的作文阅卷人。她认为,“AI作文有清晰完整的结构,有逻辑性,语言通顺流畅,但缺乏感情和感染力”。同理,在40分的英语写作考试中,大模型的最高分只有29分,主要丢分在表达空泛、缺少细节上。
值得注意的是,大模型高考呈现出严重的偏科现象:数学、物理、化学等数理学科全线不及格,总分最高分不到480。而河南理科一本线是511分。最顶尖的大模型无法进入理科考生的前30%。
数学评测中,仅GPT-4o、文心一言4.0和豆包获得60分以上成绩(满分150分)。大模型能准确运用求导公式和三角函数定理,但面对较为复杂的推导和证明问题就很难得分。物理有一道送分的选择题,人类考生根据“时间不会倒流”可以轻易选对答案,大模型则全军覆没。
“目前的大语言模型本质上是文字接龙,基于海量资料,预测下一个最可能出现的词句。通过不断预测,生成连贯和完整的文本。应对文科考试,大模型的用词不准或用了近义词,不太影响评分。但理科考试考验推理和计算,比如一道题有五步推理,大模型走偏一步,答案就全错。而且大模型的训练数据中,文科语料要远远大于理科语料。”国内一位大模型研发专家告诉科技日报记者。
近期,有一些国内外大模型在奥数题评测(非奥数现场比赛)上拿到不错的成绩。对此,该专家解释,用大家都训练过的公开数据集评测,大模型的准确率很高;但用比较新的数据集去测试,准确率就大大下降。最新的高考题是哪家大模型都没有训练过的,考验的是数学推理和计算的泛化能力,这就暴露了大模型的短板。
北京大学计算语言学研究所教授穗志方近日也表示,大模型在中国高考、公务员考试和美国SAT考试等标准化考试中的表现是优劣兼具的。一些大模型在SAT数学测试中表现优异,但在复杂推理或特定知识领域中的表现不够出色。
“在大模型内在机理没有探究清楚的情况下,我们目前的评测路径只能依靠从外部表现来推测内在能力。”穗志方说,未来应发展更系统的评测大纲、更具挑战的评测任务、更科学的评测方法。AI是否比人类更适合考试?尚未可定论。
标签:
原标题:AI参加高考,为何偏科严重
- AI参加高考,为何偏科严重
- 北京亦庄将建设全域人工智能之城-当前视点
- 上海二手房成交创三年新高背后,什么房子卖得好?|天天通讯
- 快递保鲜费,如何才能收得名正言顺?-环球观天下
- 视讯!以旧换新加速换车潮,动力电池回收却滞后成隐忧
- 特斯拉股价飙升10%,季度汽车交付量超预期-环球实时
- 特斯拉股价飙升10%,季度汽车交付量超预期
- 天天速讯:特斯拉股价飙升10%,季度汽车交付量超预期
- 上半年有24家中概股赴美上市,其中一只为IPO金额最大个股
- 上半年有24家中概股赴美上市,其中一只为IPO金额最大个股
- “中特估”之后,“科特估”能否引发下一轮A股行情?-当前信息
- “中特估”之后,“科特估”能否引发下一轮A股行情? 当前聚焦
- “中特估”之后,“科特估”能否引发下一轮A股行情?-环球快看
- 政策助力自动驾驶热潮!多家相关企业冲刺IPO,产业迎新机!
- 消息!政策助力自动驾驶热潮!多家相关企业冲刺IPO,产业迎新机!
- 政策助力自动驾驶热潮!多家相关企业冲刺IPO,产业迎新机!_天天看点
- 2024MWC上海展:移动AI时代渐行渐近|每日讯息
- 兰新高铁飞驰 助力西部发展|每日速递
- 给工资取个生活费等“别名”,就能逃避劳动关系了吗?-世界新动态
- 天天快讯:京雄城际铁路推出90天计次票 无需每次单独购票
- 全球视点!华为重申“不造车” 鸿蒙智行与引望将成汽车业务核心
- 印刷电路板行业发展趋势向好 多家公司透露下游需求增长
- 18个城市2个联合体 智能网联汽车万亿赛道提速 环球今日报
- 西平县市场监督管理局开展新《公司法》政策宣传工作-今日报
- 赛诺菲:首个合胞病毒预防手段乐唯初中国上市 可用于婴儿预防RSV感染 天天观察
- 6月北京二手房网签量同比增近三成|快消息
- 唱响红色经典 感受信仰力量
- 未来有你 灿若星河—驻马店市幼儿园举办大班毕业典礼
- 以劳育人“薯”与“泥”的快乐—驻马店实验小学开展劳动教育实践活动-时讯
- 天天观焦点:第二十六届中国科协年会聚焦科技助力发展新质生产力
- AI参加高考,为何偏科严重
- 北京亦庄将建设全域人工智能之城-当前视点
- 上海二手房成交创三年新高背后,什么房子卖
- 快递保鲜费,如何才能收得名正言顺?-环球
- 视讯!以旧换新加速换车潮,动力电池回收却
- 特斯拉股价飙升10%,季度汽车交付量超预期-
- 特斯拉股价飙升10%,季度汽车交付量超预期
- 天天速讯:特斯拉股价飙升10%,季度汽车交
- 上半年有24家中概股赴美上市,其中一只为IP
- 上半年有24家中概股赴美上市,其中一只为IP
- “中特估”之后,“科特估”能否引发下一轮
- “中特估”之后,“科特估”能否引发下一轮
- “中特估”之后,“科特估”能否引发下一轮
- 政策助力自动驾驶热潮!多家相关企业冲刺IP
- 消息!政策助力自动驾驶热潮!多家相关企业
- 政策助力自动驾驶热潮!多家相关企业冲刺IP
- 2024MWC上海展:移动AI时代渐行渐近|每日讯息
- 兰新高铁飞驰 助力西部发展|每日速递
- 给工资取个生活费等“别名”,就能逃避劳动
- 天天快讯:京雄城际铁路推出90天计次票 无
- 全球视点!华为重申“不造车” 鸿蒙智行与
- 印刷电路板行业发展趋势向好 多家公司透露
- 18个城市2个联合体 智能网联汽车万亿赛道
- 西平县市场监督管理局开展新《公司法》政
- 赛诺菲:首个合胞病毒预防手段乐唯初中国上
- 6月北京二手房网签量同比增近三成|快消息
- 唱响红色经典 感受信仰力量
- 未来有你 灿若星河—驻马店市幼儿园举办大
- 以劳育人“薯”与“泥”的快乐—驻马店实验
- 天天观焦点:第二十六届中国科协年会聚焦科