首席科学家姚顺雨腾讯首篇论文:道破为何AI死活听不懂人话
作者:周末游戏网时间:2026-02-05 16:19:00
快科技2月4日消息,近日,腾讯混元团队和复旦联合团队发布了首篇论文《CL-bench》。
值得一提的是,这也是姚顺雨入职腾讯首席AI科学家后,首次署名的研究论文。
他在文中提到,当前AI与真正智能之间的鸿沟,不在于知识的多少,而在于学习的能力。
一个装满知识却不会学习的AI,就像一个背了整本字典却不会写作的人,看起来博学,实则僵化。

人类并不只依赖多年前学到的死知识,而是在实时地从眼前的上下文中学习。
在这篇论文里,研究团队提到,大模型在上下文利用上,依然存在显著的能力短板。
为了衡量现有模型距离真正的“上下文学习者”还有多远,研究团队构建了CL-bench。
这是一个专门评测语言模型能否从上下文中学习新知识并正确应用的基准。
CL-bench包含由资深领域专家精心制作的500个复杂上下文、1899个任务和31607个验证标准。
CL-bench只包含一个简单但苛刻的要求:“解决每个任务要求模型必须从上下文中学习到模型预训练中不存在的新知识,并正确应用。”
通过实验发现,世界上排名前十的语言模型在CL-bench上的任务解决率平均只有17.2%。
也就是说即使是如今最强的语言模型,在上下文的利用方面仍然做得不好,甚至可以说是还不会利用上下文,从上下文中学习。
不过这也为大语言模型后续的迭代指出了一个可能的方向,强化模型从上下文中进行学习的能力。
相关文章
-
终于来了!《老滚4:重制版》将于今年登陆NS2在今天的任天堂直面会上,B社经典开放世界RPG《上古卷轴4:湮灭重制版》公开了最新预告片,预定今年登录NS2。视频欣赏:除此之外,B社还宣布《夺宝奇兵:古老之圈》和《辐射4:周年纪念版》也将登陆NS2
-
PS玩家等到了!曝Xbox独占《星空》PS5版定档4月7日据波兰知名游戏媒体PPE最新报道,备受期待的B社开放世界RPG大作《星空》(Starfield)PS5版终于有了确切的上线消息。根据一份从游戏分销商处获得的内部文件显示,《星空》计划于2026年4月7
-
《夺宝奇兵古老之圈》NS2版实机来了!5月12日发售在今天任天堂直面会上,贝塞斯达总监陶德·霍华德亮相,官宣《夺宝奇兵:古老之圈》将登陆Switch 2平台,游戏将于5月12日正式发售,最新实机同步释出。此外,官方还宣布《辐射 4:周年纪念版》将于2月
-
《辐射4:周年纪念版》官宣登NS2!2月24日发售在任天堂今晚举行的第三方合作伙伴直面会上,《辐射 4:周年纪念版》公布了新预告,2月24日登陆NS2。视频除此之外,B社还宣布《夺宝奇兵:古老之圈》和《上古卷轴4湮灭重制版》也将登陆NS2。视频画面:
-
《生化危机9》NS2新实机预告公开!2月27日发售!在任天堂今晚举行的第三方合作伙伴直面会上,《生化危机9》公布了新实机预告,2月27日正式发售。另外,《生化危机7 8黄金版》也将同日发售。视频视频画面:
-