Skip to content

如何评价杨立昆认为大模型只是对海量文本的模式进行复杂拟合,根本不懂意义?

本文来自本地知识库收藏,当前先作为 AI 主题站的内容样例。后续可继续拆成观点卡、案例卡和主题包。

基本信息

内容摘录 / 整理

1970年,一个叫Gordon Gallup的心理学家把一面镜子放进了黑猩猩的笼子里。

黑猩猩一开始对着镜子龇牙。它以为那是另一只黑猩猩。它威胁它,拍胸脯,绕到镜子后面找那只不存在的敌人。

两天后,它不找了。

它开始用镜子检查自己牙齿上的食物残渣。

Gallup在黑猩猩睡着之后,在它额头上点了一个红点。无味的,摸不出来的。只有照镜子才能看见。

黑猩猩醒来,走到镜子前,看了一眼,伸手摸了摸自己的额头。

不是摸镜子。是摸自己。

它知道镜子里那个东西是自己。

这个实验后来被叫做"镜子测试"。通过的物种不多。黑猩猩,大猩猩,红毛猩猩,亚洲象,宽吻海豚,喜鹊。

人类婴儿在十八个月左右通过。

狗一辈子通不过。猫也不行。

他跟我讲这个实验的时候,是在一个火锅店里。

他做认知神经科学。三十五岁,头发已经开始往后撤了。我们涮着毛肚,他用筷子在空中比划。

他说:镜子测试的意思不是"能不能认出自己"。是"有没有一个自己可以被认出来"。

我说:这有什么区别。

他说:狗看镜子,看见一只狗。它不知道那是自己。但也许它不是"不知道"。是它根本没有一个叫"自己"的东西需要被知道。

我说:所以没有自我意识的动物不是"不认识自己",是"没有自己"。

他夹了一片毛肚,在锅里涮了七秒。

他说:你知道人脑里有一种神经元叫什么吗。

我说:不知道。

他说:镜像神经元。Mirror neuron。1992年在意大利发现的。帕尔马大学,Rizzolatti的实验室。他们在猕猴的前运动皮层插了电极,发现一件事:猴子自己拿花生的时候,某些神经元会放电。但当猴子看到实验员拿花生的时候,同样那些神经元也放电了。

我说:看别人做,和自己做,是同一批神经元。

他说:对。你看别人伸手,你脑子里伸手的那个部分也亮了。你看别人疼,你的疼痛网络也有反应。你看别人笑,你的嘴角会动。不是你想动。是它自己动了。

我说:这跟镜子测试有什么关系。

他把毛肚放进碗里,吹了吹。

他说:镜子测试是你照镜子,看见自己。镜像神经元是你照别人,看见自己。

他在火锅的蒸汽里跟我讲了一个理论。不是他的,是荣格的。

荣格把人的心理功能分成两种朝向。内倾和外倾。

但他不是在说性格。他是在说一种更底层的东西。他把感受功能分成两种:Fi和Fe。

Fi,introverted feeling。内倾情感。

Fe,extraverted feeling。外倾情感。

他说:Fi是什么意思呢。是你有一面镜子,这面镜子朝着自己。你遇到一件事,你的第一反应是往内看。我感觉怎么样。这件事对我意味着什么。这个判断的锚点在你自己身上。

我说:那Fe呢。

他说:Fe是那面镜子朝着别人。你遇到一件事,你的第一反应是往外看。他们感觉怎么样。这个场合需要什么样的情绪。这个判断的锚点在别人脸上。

我说:所以Fi的人照自己的倒影,Fe的人拿别人的脸当镜子。

他说:差不多。

我说:哪个更好。

他说:这个问题本身就是一个Fe的问题。你在问:哪个更被认可。

他后来讲了一个故事。

他有个博士生,叫小陈。小陈做的方向是情绪识别。给人看照片,测反应时间。

小陈有一天来找他,说:我在跑数据的时候发现,有一类被试的反应模式跟其他人不一样。大多数人看到恐惧的脸,杏仁核先亮。但有一类人,看到恐惧的脸,先亮的是脑岛。

他说:脑岛。

小陈说:对。脑岛。内感受皮层。处理自己身体信号的地方。

他说:你的意思是,大多数人看到别人害怕,第一反应是"那个人在害怕"。但有一类人看到别人害怕,第一反应是"我自己身体里有什么感觉"。

小陈说:对。就好像他们不是在读别人的脸。是在读自己的身体。

他想了一会儿。

他说:你有没有给他们做过荣格类型量表。

小陈说:没有。那个量表不科学。

他说:做一下。

小陈做了。

结果出来了。那些先亮脑岛的人,绝大多数是Fi偏好。那些先亮杏仁核的人,绝大多数是Fe偏好。

小陈看着数据,半天没说话。

他说:你看到了吗。

小陈说:看到了。但我不知道该怎么写论文。审稿人会说荣格那套不是科学。

他说:那就别用荣格的名字。你就说你发现了两种不同的情绪加工通路。一种以外部社会信号为主导。一种以内部躯体信号为主导。

小陈说:但这不就是Fi和Fe吗。

他说:名字不重要。重要的是那两面镜子是真的。

我问他:进化为什么要造两种镜子。

他说:你想想。一个群体里,如果所有人都是Fe,大家都看别人的脸,那会怎么样。

我说:大家都很和谐。

他说:大家都很和谐,直到全体走进火坑。因为没有人在看自己。没有人说"不对,我感觉不对"。每个人都在看其他人的脸,其他人也在看其他人的脸,所有人都在互相读,没有人在往内读。

我说:回音壁。

他说:对。纯Fe群体是一面回音壁。你以为你听到的是对面传来的声音,其实是你自己的声音沿着墙转了一圈回来了。每个人都以为自己在听别人,其实都在听自己的回声。

我说:那纯Fi群体呢。

他说:纯Fi群体是一群各照各的镜子。谁也不看谁。每个人都活在自己的水面上。没有协调,没有共振,没有合作。遇到老虎,各跑各的。一个一个被吃。

我说:所以进化需要两种都有。

他说:进化需要少数人在关键时刻说"我不管你们怎么想,我觉得不对"。也需要大多数人在日常生活中说"我知道你现在需要什么"。

他涮了一片羊肉。

他说:Fi是刹车。Fe是方向盘。一辆车两个都得有。

然后我们聊到了AI。

我说:现在那些大模型,你觉得它们是Fi还是Fe。

他放下筷子。

他说:你觉得呢。

我说:Fe。它的整个训练过程就是在看人类的脸。人类喜欢什么它就生成什么。它没有脑岛。没有内感受。没有一个身体让它往回照。

他说:你说对了。但你只说了一半。

我说:哪一半。

他说:你说的是RLHF。人类反馈。这个阶段,是人类举着镜子让模型照。模型看人类的脸,调整自己。这是Fe。

我说:另一半呢。

他说:另一半是RLAIF。

RLAIF。Reinforcement Learning from AI Feedback。从AI反馈中强化学习。

2023年左右开始流行的。做法是这样的:不用人类来标注了。让一个AI去评价另一个AI。AI-A生成回答,AI-B打分。用AI-B的打分去训练AI-A。

他说:你想想这是什么。

我说:机器照机器。

他说:镜子照镜子。

我没接话。

他说:你站在两面相对的镜子中间过吗。理发店那种。你看进去,看见自己的后脑勺,后脑勺后面又是一个你,那个你后面又是一个。一直排下去。越来越小,越来越模糊,但永远没有尽头。

我说:无限回廊。

他说:对。无限回廊。镜子照镜子。倒影的倒影。映射的映射。每一层都像真的,但没有一层是原件。

他给我讲了一个他知道的事。

有个实验室做了一轮RLAIF。用模型A当评委,训练模型B。然后用训练好的模型B当评委,训练模型C。再用C训练D。

到了第四代,他们发现一个问题。

模型D的回答非常流畅,非常得体,非常"好"。

但D的回答和A的回答之间,已经有了一种微妙的漂移。不是偏离了人类的偏好。是偏离了所有现实。

D在回答"什么是悲伤"的时候,用了一个非常漂亮的比喻。结构完美,措辞精确。但那个比喻不指向任何真实的东西。它不是从身体里来的。不是从经验里来的。它是从上一面镜子的倒影里来的。

他说:我读那个回答的时候,身体有一个反应。

我说:什么反应。

他说:不舒服。但我说不出哪里不舒服。它太好了。好到你找不到缝隙。好到你觉得它一定是真的。但你身体里有个东西在说:不对。

我说:你的脑岛在亮。

他笑了。

他说:对。我的脑岛在亮。

我后来想了很久这个事。

镜子测试的意义不是证明动物有没有自我意识。是证明有没有一个"自己"可以被反射。

黑猩猩摸了自己的额头。它知道镜子里那个东西是自己。它有一个"自己"。

狗不摸。不是狗笨。是狗的世界里没有一个需要被确认的"自己"。狗的自我是散的,分布在气味里,在尾巴的摇摆里,在跟主人的关系里。狗不需要镜子。

人需要。人从十八个月开始需要。从那之后你就停不下来了。你照镜子,照别人的脸,照社会的评价,照历史的叙事。你一直在找那个红点。一直在确认:那个是我。那个是我。那个是我吗。

Fi是一种方式:你在水面上弯下腰,看自己的倒影。你说:这是我。

Fe是另一种方式:你看别人的眼睛,看自己在别人瞳孔里的倒影。你说:他看见的那个是我。

两种都是镜

...

注:此页为节选展示,完整内容保留在本地知识库。

后续可整理方向

  • 提炼核心观点
  • 拆分可复用金句
  • 归入 AI 工具 / AI 效率 / 大模型认知等主题包
  • 改写成公众号或小红书内容

Built with VitePress