首席科学家姚顺雨腾讯首篇论文:道破为何AI死活听不懂人话
作者:周末游戏网时间:2026-02-05 16:19:00
快科技2月4日消息,近日,腾讯混元团队和复旦联合团队发布了首篇论文《CL-bench》。
值得一提的是,这也是姚顺雨入职腾讯首席AI科学家后,首次署名的研究论文。
他在文中提到,当前AI与真正智能之间的鸿沟,不在于知识的多少,而在于学习的能力。
一个装满知识却不会学习的AI,就像一个背了整本字典却不会写作的人,看起来博学,实则僵化。

人类并不只依赖多年前学到的死知识,而是在实时地从眼前的上下文中学习。
在这篇论文里,研究团队提到,大模型在上下文利用上,依然存在显著的能力短板。
为了衡量现有模型距离真正的“上下文学习者”还有多远,研究团队构建了CL-bench。
这是一个专门评测语言模型能否从上下文中学习新知识并正确应用的基准。
CL-bench包含由资深领域专家精心制作的500个复杂上下文、1899个任务和31607个验证标准。
CL-bench只包含一个简单但苛刻的要求:“解决每个任务要求模型必须从上下文中学习到模型预训练中不存在的新知识,并正确应用。”
通过实验发现,世界上排名前十的语言模型在CL-bench上的任务解决率平均只有17.2%。
也就是说即使是如今最强的语言模型,在上下文的利用方面仍然做得不好,甚至可以说是还不会利用上下文,从上下文中学习。
不过这也为大语言模型后续的迭代指出了一个可能的方向,强化模型从上下文中进行学习的能力。
相关文章
-
《仁王3》首发爆了!Steam峰值人数破5万 升至多半好评由Team Ninja开发、光荣特库摩发行的黑暗战国动作RPG《仁王3》今日正式发售,PC Steam版本已于中午13:00正式解锁。截至发稿时,《仁王3》在Steam平台的同时在线峰值人数已突破5万
-
Switch 2独占!《实况足球》续作新游戏官宣 世界杯期间就能玩昨天的任天堂直面会合作伙伴展示会 上,科乐美带来了不少惊喜。除了《炸弹人》之外,科乐美还宣布了一款新游戏——《eFootball: Kick-Off!》。这款游戏会在今年夏天Switch 2上市时,独
-
2月索尼发布会传闻坐实?小岛秀夫疑似为新预告预热传闻索尼计划2026年2月举办State of Play直播,该活动将发布PS5独占及第三方游戏预告与公告;活动临近,小岛秀夫暗示正制作新游戏预告片。据外媒videogamer报道,在2月5日小岛秀
-
刘强东给春节在岗员工发钱!连续9天 日均新增投入1.5亿刚给宿迁老家送完年货的刘强东,又给京东的兄弟姐妹们送福利了!今日,京东黑板报发文称,将通过加班费、过大年红包、子女团聚补贴等形式,给春节在岗的员工发钱。据悉,京东春节9天将投入超13亿元,日均新增投入
-
索尼又出昏招?《地平线:猎人集结》预告遭疯狂点踩PlayStation 官方于昨日正式公开了《地平线》系列的合作衍生新作《地平线:猎人集结》(Horizon Hunters Gathering),然而这款原本被寄予厚望的 IP 新作,却在发布首日遭
-
《咒术回战续》最新话:苦等68年的真人 被虎杖吓摊本文全是剧透:记得之前被称为最卑鄙反派的真人么?正篇里被羂索搓成球了,用作触发死灭回游的方式。《咒术回战》续此前的剧情中,真人曾经短暂出过场:乙骨真剑在昏迷中曾经见过真人,他看到真剑后还失望了的说了句