当前时讯:ChatGPT“高考成绩”出炉 人工智能居然也偏科?
。 对于ChatGPT“文强理弱”的偏科情况,该项目的负责人、复旦大学计算机科学技术学院教授邱锡鹏解释说,与
ChatGPT是美国OpenAI公司去年11月发布的一款人工智能技术驱动的自然语言处理工具,去年11月30日推出以来,60天内月活用户直接破亿,被认为是史上用户增长最快的消费级应用。
写代码、文案,做数学题,进行不同语言之间的翻译,ChatGPT的强大功能让学习人工智能相关专业的复旦大学硕士研究生张啸天感到既震惊又兴奋。
“我主要让它写代码,包括一些技术问题,解决方案。我感觉到它很聪明,笃定它可以通过图灵测试。但它的极限是什么?我想知道它究竟有多聪明。”
【资料图】
于是,去年12月,张啸天和两位同学一起搜集了2010年到2022年的高考全国卷试题,剔除部分含有图片的题目,让ChatGPT作答。
经过近5个月的测试,近日,ChatGPT的高考测试报告新鲜出炉。包括选择题、填空题和问答题在内,ChatGPT共回答了2811道题目。结果显示, ChatGPT更擅长文科,在历史、地理、政治上取得了不错的成绩;而在生物、化学、物理等理科学科上表现不佳,尤其在物理上。
高考全国卷满分为750分。复旦大学计算机科学技术学院硕士研究生宗一告诉看看新闻Knews记者,“综合历年得分情况,ChatGPT做文科卷的得分会更高一些,接近400分;理科题的话,只有300分出头。”。
对于ChatGPT“文强理弱”的偏科情况,该项目的负责人、复旦大学计算机科学技术学院教授邱锡鹏解释说,与文科试题侧重考察常识不同,理科试题更关注逻辑推理能力,这恰恰是目前通用人工智能模型的短板。
据悉,通过对超过1万亿个人类词汇和1700亿个模型参数进行高效迭代训练,ChatGPT具备强大的自我学习、推理和归纳总结能力。既然如此,为何它的“高考”成绩却不太理想呢?
邱锡鹏认为,一方面是因为高考试题确实有难度;另一方面,测试成绩与评价方式相关。“早期我们采用的是人工评分,发现ChatGPT的水平大概可以达到500分。现在我们使用了更严格的方式,也就是机器评分,所以成绩有一定的波动。”
值得注意的是,此次测试的版本为ChatGPT-3.5。随着该模型不断升级迭代,它的能力会越来越强。此次测试除了了解ChatGPT的高考水平外,研究团队还有一个更大胆的设想。
“我们构造一个数据集,这个数据集可以用来衡量不同大型语言模型的效果。因为现在不同的公司、单位、机构都在做自己的大模型,那么就是说我们就要有一个客观的评价标准。大家都说自己的模型水平可以达到ChatGPT的百分之七八十,到底怎么样,需要有一个客观的测试。我认为高考评测是比较客观综合的一种测试方式。”邱锡鹏表示,未来该数据集将大有可为。
(看看新闻Knews记者:周智敏 徐玮)
关键词:
。 对于ChatGPT“文强理弱”的偏科情况,该项目的负责人、复旦大学计算机科学技术学院教授邱锡鹏解释说,与
马卡报消息,巴萨与马竞存在一条协议,前者可以花费1900万欧签下卡拉斯科。马卡报表示,在今年1月马竞与巴
(王采怡)2023年海峡两岸孔子文化春会启动仪式4月27日在山东济南府学文庙举行,并以视频连线形式在江苏昆山
业绩和股价双双走高,中国平安(02318)迎来“价值拐点”,双双,寿险,产险,h股,健康险,中国平安,价值拐点,业绩
1、湘潭大学不是很清楚,长沙理工大学是这样的。2、长沙理工大学2014年前排名一直位列全国140左右,2014年
读特客户端·深圳新闻网2023年4月27日讯(记者冯牧原通讯员唐啸啸)为满足广大旅客的出行需求,海南航空计
IGPE中国粮油产业博览会交易量有望创造历史27日,第十三届IGPE中国国际粮油产业博览会及IEOE中国国际食用油
从五个维度看中国知识产权发展
为了让幼儿感受劳动之美,体验劳动之乐,4月27日,二七区马寨镇中心幼儿园开展了“我最勤劳”劳动节主题教
据界面新闻援引韩国《亚洲日报》消息,韩国今年公寓、多户型住宅等共同住宅的公示价格较去年平均下降了18 6
“五一”假期马上到了,很多人选择乘坐高铁出行。假期人流量大,乘车过程中难免出现各种小状况。比如乘错车
4月26日,北京市住建委发布《关于印发2023年全市保障性住房建设筹集计划(第一批)的通知》(以下简称《通
让您的硬木地板恢复活力或恢复活力。失去光泽的褪色木地板可以重新焕发活力或恢复原貌。在您处理硬木地板的
顺义曾是北京重要的粮食主产区。全区境内绝大部分都是平原,唯有东北、西北和东南三个角落,有一些散落的山
随着人工智能、大数据等新型信息技术的发展,算法广泛应用于互联网,为用户提供个性化、精准化、智能化的信
1、市内五区:沈河区,和平区,大东区,皇姑区,铁西区。2、外围:东陵区,于洪区,苏家屯区,浑南新区,沈
近日,中国地质大学(武汉)研究团队首次在火星横向风成脊表面识别出小型多边形裂隙。研究发现裂隙分布区的
同时,XE和XF也将在2023年左右停产,取代这两款车型位置的很可能是一款跨界纯电动车。目前一些外资品牌都在
1、跨界车(Crossover),其车型源轿车化的SUV,逐渐发展成为轿车、SUV、MPV和皮卡等车型的任意交叉组合,集
2023年全国“行走大运河”全民健身健步走主会场活动26日在天津静海举行,佟文、陈飞等奥运冠军、世界冠军带
中证网讯(王珞)4月26日晚,毅昌科技发布2022年年度报告。报告显示,公司2022年实现营业收入27 11亿元,实现归
永福股份2022年净利8370 46万同比增长105 33%董事长林一文薪酬107 42万2023 4 2710:07:32挖贝网雨婷挖贝网4月2
一、请求返还彩礼的案由请求返还彩礼的案由是“婚约财产纠纷”。可以返还彩礼的条件如下:1 双方未办理结婚
22日21时20分许,火车站综合枢纽站通道处聚集拉客的司机。两名男子在火车站东侧围栏外揽客男子在综合枢纽站
曾被誉为酱油界的茅台
Copyright 2015-2022 西南酒业网 版权所有 备案号:皖ICP备2022009963号-8 联系邮箱:39 60 29 14 2@qq.com