没有语言的思想
在一个安静的星期六挖掘旧报纸——我的一个爱好——我偶然发现了1880年6月19日的一个故事,我觉得它与我们对AI的现代焦虑相关。
1、Melville Ballard
这是关于Melville Ballard的故事,作为一个没有语言的孩子,他注视着一个树桩,问自己第一个人是否从中诞生。
这个144年前的案例研究——在史密森尼学会上展示——对今天的大型语言模型及其背后的支出提出了一个可能具有破坏性的批评。通过一个简单的人类故事,它大胆地宣布,复杂的思想存在于语言之前的沉默中。
今天,深入21世纪,通过在推理能力之前优先考虑语言,我们不是在构建智能;我们是在构建一个越来越复杂的镜子。
实际上,那份旧报纸中有两个有趣的故事。让我们从中间的一个开始。这是纽约时报这一版的第3页,我看到一个名为没有语言的思想的故事。
当然,大型语言模型、小型语言模型和推理是当前的话题。
这个完整的故事标题是:"没有语言的思想,一个聋哑人的叙述,他的第一个思想和经历"。此外,这个故事最初于1880年6月12日发表在华盛顿星报上。
这个故事关于位于Kendall Green的国家聋哑学院的Samuel Porter教授,他在史密森尼学会展示了一篇论文。论文标题,"没有语言是否有思想?聋哑人的案例。"
起初讨论聋哑人和儿童没有区别于野兽的心理活动形式,嗯,理解已经改变了很多,我准备将其驳回。
案例研究是哥伦比亚聋哑教学学院的一位教师。这位特定的教师Melville Ballard也是聋哑人,是国家聋哑学院的毕业生。
Ballard先生说,在他婴儿时期,他通过自然符号或哑剧与父母和兄弟交流。他的父亲相信观察会有助于发展他的能力,经常带他骑马。
他继续说,是在一次骑马中,在他被引入书面语言基础的两三年前,他开始问自己问题,"世界是如何产生的?"他的好奇心被唤醒,关于人类生命的起源,它的第一次出现,地球、太阳、月亮和星星存在的原因。有一次,看到一个大的树桩,他问自己问题,"曾经来到世界的第一个人是否可能从那个树桩中产生?但那个树桩只是一棵曾经宏伟的树木的残余;那棵树是如何产生的?为什么,它只是开始从地面生长,就像这些现在长出来的小树一样;"他从脑海中排除了人类起源与腐朽的旧树桩之间的荒谬联系。
他不知道是什么向他建议了关于事物起源的问题,但他已经获得了从父母到孩子的后代、动物繁殖和从种子产生植物的想法。
发生在脑海中的问题是最早的时候,第一个人、第一个动物和第一个植物来自哪里,当时没有人、没有动物、没有植物,因为他知道一切都有开始和结束。他大部分思考人类和地球,相信人类会被消灭,坟墓之外没有复活。
那是他5岁时,他开始理解从父母到孩子的后代,他大约8或9岁时开始询问关于宇宙的起源。关于地球的形状,他从两个半球的地图推断出有两个巨大的物质圆盘彼此靠近;太阳和月亮是两个圆形、扁平的发光物质圆盘,他对它们怀有一种崇敬,从它们的升起和降落思考必须有某种东西有能力控制它们的进程。
他相信太阳进入西面的一个洞并从东面的另一个洞出来,通过地球中的一个巨大的管子旅行,下降与太阳在天空中描述的相同曲线。星星似乎是镶嵌在天空中的小灯。他描述了他如何徒劳地努力理解这个主题,直到11岁时来到学校。
在此之前,他的母亲告诉他天空中有一个神秘的存在,但她无法回答他的问题时,他绝望地放弃了,感到悲伤,因为他无法对天空中神秘的存在获得明确的想法。
在他被录取到聋哑学校的一年里,每个星期天他学习几个句子,尽管他学习了这些简单的词,但他从未获得它们的任何想法。他参加了礼拜堂服务,但由于他在机构中使用的手语知识不完美,它们几乎无法理解。第二年,他有一个小的教义问答手册,包含一系列问题和答案。
通过将语言应用于推理能力,理解的发展继续。
他现在能够理解他的教师使用的手语。可以说他的好奇性格应该已经得到满足。事实并非如此;因为当他了解了宇宙由一个伟大的统治精神创造时,他开始问自己,创造者来自哪里?并开始询问他的本性和起源。当他思考这个问题时,他问自己,"在我们进入他的王国后,我们将永远了解上帝的本性并理解他的无限吗?"对我们来说,与古代族长说,"你能通过寻找发现上帝吗?"不是更好吗?
Porter教授然后让锤子落下,就像那样,对1880年史密森尼学会的听众。
Porter教授讨论这个案例,并指出野兽可能理解一些词,将一些物体与其他物体区分开来,等等。他说:"即使允许对野兽声称最大可能的东西,人类仍然清楚地拥有一些能力,我们无法想象这些能力是从任何他与低等动物共有的东西发展出来的,或者是这些东西的程度的简单提升。
无论印象产生的方式或器官结构可能有什么相似性,无论可能依赖于有机行动——也就是说,无论它们在生理上可能如何相关——然而,作为感觉或知觉,眼睛的那些在本质上是不同的,并暗示一种特殊的天赋或力量,这在耳朵、头部或舌头的那些中没有暗示。这与推理行为与低等能力的工作相比并非如此。
两个有一些共同元素并不意味着它们在整个过程中都是同一等级的,也不意味着一个可以从另一个发展出来。如果灵魂的眼睛——我们通过它看透事物宇宙的高级推理——不能看向自己并清楚地辨别自己的本性和过程,我们因此不应该忘记它所做的事情,否认它的基本优越性,并将其同化到我们可以置于其审查下的那些低等和附属能力。我们必须用来理解所有东西的东西本质上必须优越于任何其他被它理解的东西。
presentations的一位参加者显著地注意到,Ballard的眼睛完美地传达了意义,没有误解,尤其是。
这次会议最有趣的特征之一是Ballard先生通过符号解释他的母亲如何通知他要走很远的路去学校,在那里他将从书中阅读、写一封信并将其折叠发送给她,等等,而且,通过哑剧,背诵一个猎人杀死松鼠后意外射杀了自己的故事。Ballard先生的符号和手势,带有眼睛和面部的表情,完美地向观众传达了他的意思,并且,用一位成员的话来说,眼睛的表情是无法被误解的语言。
让我们考虑这两个陈述:
- "用来理解所有东西的东西本质上必须优越于任何其他被它理解的东西。"
- "……用一位成员的话来说,眼睛的表情是无法被误解的语言。"
总之,
- 没有推理能力的语言在理解上失败
- 只有具备推理能力,语言才能解锁理解
- 理解,完全实现,超越语言
通过优先考虑语言,LLM纯粹通过逻辑推理构建一种原始形式的推理,但这种形式的推理由于在许多知识粗糙边缘处的限制已被证明是有缺陷的,并且容易产生幻觉。
推理能力从未存在。因此,语言无法通过推理扩展到理解。
教授建议,在他与聋哑人的工作中,他发现真正的推理能力必须首先存在,在语言之前,这样语言才能解锁理解——那种真正的推理能力和语言的产物。
"眼睛的表情是无法被误解的语言。"
也就是说,眼睛的表情是完美理解的样子,不需要语言。
大型语言模型,通过首先优先考虑语言,在真正的推理能力之前,永远无法达到理解。
如果理解真的超越语言,正如144年前史密森尼的presentation所建议的那样,我们应该今天很容易找到它的证据。
我个人可以将其与医学的学习和实践联系起来。在本科预医学课程和大部分医学院期间,演绎逻辑是学生组织广阔医学领域的方法。通过临床年医学艺术,物理表现,情感,人类专业知识得到发展。然后,在住院医师期间或医生职业生涯早期的某个时候,涉及上述所有内容的量,达到了理解。所有部分连接在一起在一个巨大的、复杂的网络中,允许专家进行完整的患者护理。
两位外科医生进行困难的头颈部癌症或创伤,或与**医生合作的护士,有时可以纯粹用他们的眼睛交流,完全的理解被传输,采取行动,因为所有相关方都达到了理解,超越了逻辑推理和其他原始形式的推理,**如记忆和医疗专业人员早期教育的拼图构建。
然后眼睛基于相互理解提供了对现实的直观把握,这种理解在语言存在时从推理能力产生。
大型语言模型以及小型语言模型永久地生活在中间。它可以模拟推理,但没有真正的推理能力,没有眼睛,没有理解。
2、Ballard的测试
一个实体直到在没有语言的情况下证明推理时才拥有理解能力。
这是一个已知的缺陷,一个糟糕的开始。AI的原始方法是首先产生真正的推理能力,但这从未实现,该领域转向优先考虑语言,因为它更容易。
这个"糟糕的开始"导致了 "参数陷阱",由数十亿耗电芯片驱动的暴力语言处理已经成为一个极其讽刺的瓶颈。
正如我与Klarna的Sebastian Siemiatkowski的对话所强调的,未来在于压缩——利用"系统2"推理优先来处理人类产生的信息冗余和相对有限的查询集,以大幅减少计算需求。
这条新线拒绝通过语言模型在无限镜中相互交谈的奇点,作为由于缺乏经济现实基础而成为不可能的无方向资源浪费。
虽然像谷歌的AlphaGeometry和Meta的Coconut这样的前沿领域终于向这种"推理优先"架构迈进,但它们本质上是在重新发现144年前在史密森尼提出的东西:语言是理解的输出,而不是推理的引擎。
这个数万亿美元的扩展神话可能由于回到前语言推理的沉默,聋哑人的全带宽推理能力而被证明是多余的,他们的无声思想在为它们找到词汇之前已经伸向天堂的星星。
3、愚蠢的山谷
现在,我提到了另一个有趣的故事,它在同一页上。比1880年代任何人可能猜到的更与第一个故事相关,它会在2026年。
这篇文章是"旧金山的财富,一群繁荣的投机者"。
这个故事于6月1日在旧金山撰写,仅于6月19日在纽约时报发表。
法国谚语"事情变化越大,越保持不变"浮现在脑海中。
旧金山的"艰难时期"是一个在东方城市几乎意味着"富足时期"的短语,意味着缺乏自由手的生活和奢侈的放纵,而不是存在捏紧的贫穷和狭窄的手段。
加州是微小资本的人的天堂。为了满足投机的渴望,采用了特殊的开放板系统,通过该系统,有50美元投资的人,通过购买其中的一份,可以以每股一美元的价格获得矿山的小利息,或两股50美分,或任何数量的不同价格。
某些股票在这里存在"繁荣",似乎没有达到仅仅想再"一次就够"的愿望,它似乎在旧金山激发了同样的赌博热,因繁荣公司损失的线条被旧金山人民急切抓住,并且"繁荣"已经伴随着人们的投机损失,"繁荣"消失,股票跌回到它们的正常状态。
故事的结尾对今天的现实打击很大。
*旧金山的人民似乎已经被教育成认为他们必须立即跃向财富的想法,他们在弗吉尼亚城的大繁荣失败后,他们似乎愿意在其他方向努力寻求财富,如制造业、贸易和农业利益的发展。几乎整个人口都充满了投机的热情,如果在像内华达那样的大繁荣在附近被这里发现,股票将再次攀升到荒谬的数字,旧金山将再次通过富足时期然后像她在过去两年那样再次受苦。 *
在泡沫的主要迹象,供应方贪吃中,我概述了这个显著的倾向,起源于旧金山湾区,投机上升到刺激投资的水平,远远超过任何及时维度中最终需求所需的水平。
阅读这样的旧报纸提供了以差异化的方式解释今天事件的视角。无论硅谷将"再次通过富足时期然后再次受苦",如她重复那样,还是不太可能打破模式,我希望你发现这很有帮助。
原文链接: History Rhymes: Large Language Models Off to a Bad Start?
汇智网翻译整理,转载请标明出处