网易首页 > 网易号 > 正文 申请入驻

语言≠思维,大模型学不了推理:一篇Nature让AI社区炸锅了

0
分享至

机器之心报道

机器之心编辑部

方向完全搞错了?

大语言模型(LLM)为什么空间智能不足,GPT-4 为什么用语言以外的数据训练,就能变得更聪明?现在这些问题有 「标准答案」了。

近日,一篇麻省理工学院(MIT)等机构发表在顶级学术期刊《自然》杂志的文章观察到,人类大脑生成和解析语言的神经网络并不负责形式化推理,而且提出推理并不需要语言作为媒介。

这篇论文声称「语言主要是用于交流的工具,而不是思考的工具,对于任何经过测试的思维形式都不是必需的」,引发了科技领域社区的大讨论。



难道真的如语言学家乔姆斯基所言,追捧 ChatGPT 是浪费资源,大语言模型通向通用人工智能(AGI)的路线完全错了?

让我们看看这篇论文《Language is primarily a tool for communication rather than thought》是怎么说的。



论文链接:https://www.nature.com/articles/s41586-024-07522-w

语言是人类智能的一个决定性特征,但它所起的作用或多或少一直存在争议。该研究提供了神经科学等相关学科角度的最新证据,以论证现代人类的语言是一种交流工具,这与我们使用语言进行思考的流行观点相反。

作者首先介绍了支持人类语言能力的大脑网络。随后回顾语言和思维双重分离的证据,并讨论语言的几种特性,这些特性表明语言是为交流而优化的。该研究得出结论认为,尽管语言的出现无疑改变了人类文化,但语言似乎并不是复杂思维(包括符号思维)的先决条件。相反,语言是传播文化知识的有力工具,它可能与我们的思维和推理能力共同进化,并且只反映了人类认知的标志性复杂性,而不是产生这种复杂性。



图 1

研究证据挑战了语言对于思维的重要性。如图 1 所示,使用 fMRI 等成像工具,我们可以识别完整、健康的大脑中的语言区域,然后检查在完成需要不同思维形式的任务时,语言区域的相关响应。

人类大脑中的语言网络

从人脑的生物学结构来看,语言生成和语言理解由左半球一组相互连接的大脑区域支持,通常称为语言网络(图 1a;Box 2 描述了它与语言神经生物学经典模型的关系)。



Box 2。许多教科书仍然使用 Wernicke 提出的语言神经基础模型,并由 Lichteim 和 Geschwind 进行了阐述和修订。该模型包括两个皮层区域:Broca 区位于下额叶皮层,Wernicke 区位于后上颞叶皮层。这两个区域分别支持语言产生和理解,并通过一条背侧纤维束(弓状束)连接。

语言网络有两个非常重要的特性:

首先,语言区域表现出输入和输出模态的独立性,这是表征抽象性的关键特征。主要表现为在理解过程中,这些大脑区域对跨模态(口头、书面或手语)的语言输入做出反应。同样,在语言生成过程中,无论我们是通过口语还是书面语来产生信息,这些区域都是活跃的。这些区域支持语言理解和生成(图 1a)这一事实表明,它们很可能存储了我们的语言知识,这对于编码和解码语言信息都是必需的。

其次,语言区还能对词义和句法结构进行表征和处理。特别是,关于脑磁图和颅内记录研究的证据表明,语言网络的所有区域都对词义以及词间句法和语义依赖性敏感(图 1a)。总之,语言网络中语言表征的抽象性以及网络对语言意义和结构的敏感性使其成为评估语言在思维和认知中的作用假设的明确目标((Box 3)。

我们对人类语言和认知能力,以及它们之间关系的理解仍然不完整,还有一些悬而未决的问题:

  • 语言表征的本质是什么?
  • 思维是否依赖于符号表征?
  • 儿童学习语言时,语言网络是如何成长的?

语言对于任何经过检验的思维形式都不是必需的

经典的方法是通过研究大脑损伤或疾病的个体来推断大脑与行为之间的关联和分离。这种方法依赖于观察大脑某部分受损时个体行为的变化,从而推测不同大脑区域的功能和行为之间的联系。

有证据表明 —— 有许多个体在语言能力上有严重的障碍,影响到词汇和句法能力,但他们仍然表现出在许多思考形式上的完整能力:他们可以解决数学问题,进行执行规划和遵循非言语指令,参与多种形式的推理,包括形式逻辑推理、关于世界的因果推理和科学推理(见图 1b)。

研究表明,尽管失去了语言能力,一些患有严重失语症的人仍然能够进行所有测试形式的思考和推理,他们在各种认知任务中的完整表现就是明证。他们根本无法将这些想法映射到语言表达上,无论是在语言生成中(他们无法通过语言向他人传达自己的想法),还是在理解中(他们无法从他人的单词和句子中提取意义)(图 1b)。当然,在某些脑损伤病例中,语言能力和(某些)思维能力都可能受到影响,但考虑到语言系统与其他高级认知系统的接近性,这是可以预料的。

尤其是一些聋哑儿童,他们长大后很少或根本没有接触过语言,因为他们听不见说话,而他们的父母或看护人不懂手语。缺乏语言接触会对认知的许多方面产生有害影响,这是可以预料的,因为语言是了解世界的重要信息来源。尽管如此,语言剥夺的个体无疑表现出复杂的认知功能能力:他们仍然可以学习数学、进行关系推理、建立因果链,并获得丰富而复杂的世界知识。换句话说,缺乏语言表征并不会使人从根本上无法进行复杂的(包括符号的)思考,尽管推理的某些方面确实表现出延迟。因此,在典型的发展中,语言和推理是平行发展的。

完整的语言并不意味着完整的思维

以上证据表明,迄今为止测试的所有类型的思维都可以在没有语言的情况下实现。

接下来,论文讨论了语言和思维双重分离的另一面:与语言介导思维的观点相反,完整的语言系统似乎并不意味着完整的推理能力。





人类语言是由交流压力塑造的。

来自发育性和后天性脑部疾病的证据表明,即使语言能力基本完好,也可能存在智力障碍。

例如,有些遗传疾病导致智力受损程度不同,但患有这些疾病的人的语言能力似乎接近正常水平;还有一些精神层面有缺陷的人,会影响思考和推理能力,但同样不会影响语言。最后,许多获得性脑损伤的个体在推理和解决问题方面表现出困难,但他们的语言能力似乎完好无损。换句话说,拥有完整的语言系统并不意味着自动具备思考能力:即使语言能力完好无损,思考能力也可能受损。

总的来说,这篇论文回顾了过去二十年的相关工作。失语症研究的证据表明:所有经过检验的思维形式在没有语言的情况下都是可能的。fMRI 成像证据表明:参与多种形式的思考和推理并不需要语言网络。因此,语言不太可能成为任何形式思维的关键基础。

MIT 研究得出结论的同时,顶尖 AI 领域学者最近也发表了对大模型发展的担忧。上个星期四 Claude 3.5 的发布号称拥有研究生水平的推理能力,提升了行业的标准。不过也有人表示经过实测可见,它仍然具有 Transformer 架构的局限性。

对此,图灵奖获得者 Yann LeCun 表示,问题不在于 Transformer,而是因为 Claude 3.5 仍然是一个自回归大模型。无论架构细节如何,使用固定数量的计算步骤来计算每个 token 的自回归 LLM 都无法进行推理。



LeCun 也评论了这篇 Nature 论文,对思维不等于语言表示赞同。



对此,你怎么看?

参考内容:

https://news.ycombinator.com/item?id=40756176

https://x.com/ylecun/status/1804834054954459539

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
不可思议!女性获得高潮的方式竟然这么多……| 严肃科普

不可思议!女性获得高潮的方式竟然这么多……| 严肃科普

第十一诊室
2024-06-25 10:32:15
大利好!告诉大家一个好消息,下周A股大行情,将迎来大反弹!

大利好!告诉大家一个好消息,下周A股大行情,将迎来大反弹!

风风顺顺
2024-06-29 07:38:44
天要亮了!臭名昭著的车圈毒瘤被全网封禁,背后主子会反思吗

天要亮了!臭名昭著的车圈毒瘤被全网封禁,背后主子会反思吗

户外小阿隋
2024-06-29 00:05:32
惠及800多万人 广东退休人员基本养老金调整办法来了!

惠及800多万人 广东退休人员基本养老金调整办法来了!

南方都市报
2024-06-28 17:04:17
教育部同意!两所高校,官宣合并

教育部同意!两所高校,官宣合并

创作者_1647241717443
2024-06-28 20:43:26
惊!广西保安砍死2名业主,警方通报砍人原因,评论区瞬间炸锅!

惊!广西保安砍死2名业主,警方通报砍人原因,评论区瞬间炸锅!

小毅讲历史
2024-06-29 05:45:31
成都某楼盘业主崩溃了!22000元每平跌至13000元,房子成负资产?

成都某楼盘业主崩溃了!22000元每平跌至13000元,房子成负资产?

火山诗话
2024-06-28 06:59:08
重庆一富婆将美男子藏地下室2年,06年丈夫才找到,结局意想不到

重庆一富婆将美男子藏地下室2年,06年丈夫才找到,结局意想不到

一场奇遇日记
2024-06-26 21:26:34
俄媒:俄罗斯国防部宣布,俄军对乌克兰发起集群打击

俄媒:俄罗斯国防部宣布,俄军对乌克兰发起集群打击

新时光点滴
2024-06-29 02:56:50
一场3-0打出美洲杯争冠大热门!2场5球+6分出线,有望挑战阿根廷

一场3-0打出美洲杯争冠大热门!2场5球+6分出线,有望挑战阿根廷

体育知多少
2024-06-29 08:14:28
申花换教练是换了一个寂寞吗16轮下来斯卢茨基跟吴金贵排名是一样

申花换教练是换了一个寂寞吗16轮下来斯卢茨基跟吴金贵排名是一样

人生趣事悟语
2024-06-29 03:53:19
辣眼睛!从巴黎时装周的一丝不挂,看到的是一场“国王的新衣”秀

辣眼睛!从巴黎时装周的一丝不挂,看到的是一场“国王的新衣”秀

白宸侃片
2024-06-28 19:18:11
全力支持伊万!足协重大决策牺牲中超,提前18天狙击日本沙特澳洲

全力支持伊万!足协重大决策牺牲中超,提前18天狙击日本沙特澳洲

家乡体育
2024-06-28 21:30:04
武汉女大学生离奇失踪,亲人以为已离世,12年后被民警意外发现

武汉女大学生离奇失踪,亲人以为已离世,12年后被民警意外发现

我是光头哥
2024-06-28 11:35:21
白玉兰奖红毯生图来了!40岁唐嫣太瘦,刘亦菲粉裙显胖牙龈抢镜

白玉兰奖红毯生图来了!40岁唐嫣太瘦,刘亦菲粉裙显胖牙龈抢镜

萌神木木
2024-06-28 19:41:07
美众议院表决通过:禁止美国务院引用加沙死亡人数

美众议院表决通过:禁止美国务院引用加沙死亡人数

环球时报国际
2024-06-28 13:45:02
取消对华免签,还拒绝中国的高铁,甚至放言:“不欢迎中国人”!

取消对华免签,还拒绝中国的高铁,甚至放言:“不欢迎中国人”!

星辰故事屋
2024-06-18 10:54:05
上海这一天,姜研白到发光,唐嫣美出天际,53岁微醺的闫妮赢麻了

上海这一天,姜研白到发光,唐嫣美出天际,53岁微醺的闫妮赢麻了

简读视觉
2024-06-29 00:10:02
母亲去世后拒绝认尸,台湾艺人唐治平精神失常,现已瘦到皮包骨

母亲去世后拒绝认尸,台湾艺人唐治平精神失常,现已瘦到皮包骨

娱乐E君
2024-06-28 17:55:31
五问“中国象棋第一人”王天一被查:收入几何?怎样量刑?

五问“中国象棋第一人”王天一被查:收入几何?怎样量刑?

上游新闻
2024-06-28 21:12:16
2024-06-29 10:48:49
机器之心Pro
机器之心Pro
专业的人工智能媒体
9129文章数 141953关注度
往期回顾 全部

科技要闻

比亚迪引发了一场"战争"

头条要闻

董明珠在格力股东大会上发声:"小米空调销量第一"不实

头条要闻

董明珠在格力股东大会上发声:"小米空调销量第一"不实

体育要闻

湖人的选择

娱乐要闻

白玉兰奖红毯生图来了!刘亦菲穿粉裙

财经要闻

A股上半年人均亏损1.2万 你亏了多少?

汽车要闻

你没看错!广汽丰田今天秀了一把智电技术

态度原创

艺术
亲子
健康
教育
旅游

艺术要闻

穿越时空的艺术:《马可·波罗》AI沉浸影片探索人类文明

亲子要闻

宝妈分享自己的孩子,怎么走路一直要踮脚呢

人类为何至今无法攻克渐冻症?

教育要闻

#那香海苏州外国语学校 以华夏文明传承优秀传统文化,以国际视野践行现代教育理念!

旅游要闻

来中国旅游,成了老外的新流量密码

无障碍浏览 进入关怀版