从台风看AI

气象学告诉我们:理解原理和预测细节是两个层面的问题。同样的逻辑也适用于理解LLM——我们懂Transformer和注意力机制,但不苛求每个细节。去神秘化的关键,是从'神灵保佑'转向'工程防控'。

·姚迪·6 分钟
播客深读

用几分钟对谈拆解本文核心推演

00:00
00:00

最近上海一直在被台风侵袭,我一直在关注气象新闻,新闻里有台风的路径,有风力大小的数字,有影响的范围圈。气象学家在地图上画出一条条曲线,告诉我们台风会在什么时候到达哪里,会带来多大的破坏。

不过,我又想到另一个问题,"为什么这滴雨刚好落在这个屋顶?"

不是"为什么这里会下雨",而是"为什么这滴雨,而不是那滴雨,落在这个屋顶,而不是那个屋顶?"

在气象学如此高明的时候,这个问题我们却没有答案,但仔细想想,它揭示了一个我们经常忽略的事实:我们以为自己理解台风,但我们的理解有一个边界。气象学给我们的启示,恰恰也是理解LLM的正确方式。


I. 气象学的启示:懂原理 ≠ 预测细节

我们理解台风。

我们知道Navier-Stokes方程描述流体运动——这个方程本质上是在说:流体中每一个微小的"水团"在运动时,会受到压力的推挤、邻居的拖拽、重力的影响,这些力的平衡决定了水团会加速还是减速。就像一群人在拥挤的街道上走,每个人都被前后左右的人推着,同时又想保持自己的速度,最终形成了人群的整体流动。

我们也知道热力学解释能量转换,知道相变机制解释云雨形成。我们甚至能在一定程度上预测台风路径、降雨强度、影响范围。

这些不是秘密。它们是写在教科书里的原理。

但如果我们问:"为什么这滴雨落在这个屋顶,而不是那个屋顶?"

气象学家会告诉你:这个问题我们没有直接答案。

当然,我们知道这滴雨落在这里而不是那里,肯定不是神灵的保佑,也不是我们无法理解的什么神秘力量。

而是因为:理解系统的宏观原理,和预测每个微观细节,是两个层面的问题。

台风是一个混沌系统。初值敏感,蝴蝶效应。即使我们完美掌握所有物理定律,也无法精确预测每一滴雨的落点。

这不是无能。这是系统的本质。

接受这一点,是气象学成熟的表现。

同样,接受这一点,也是理解LLM成熟的表现。


II. LLM也是一样:我们懂原理,但不苛求细节

人们经常说LLM是"黑盒"。

但这个说法并不准确。

我们懂Transformer架构,懂注意力机制如何计算相关性,懂位置编码如何处理序列顺序,懂梯度下降如何优化参数,懂交叉熵损失如何衡量预测质量。

这些不是神秘知识。它们是公开的、可验证的、可复现的。

但如果我们问:"为什么这个词被生成,而不是那个词?"

这个问题和"为什么这滴雨落在这里"一样,我们无法给出直接答案。

LLM有数十亿参数。每个token的生成是所有参数协同作用的结果。即使我们完全理解每条边的数学含义,也无法精确预测某个具体token的选择。

这不是因为我们不懂原理。

而是因为:高维统计系统的本质,就是涌现行为难以逐点预测。

接受这一点,我们就从"神秘化"走向了"理解"。


III. 雨滴不是神灵保佑

但这里有个危险的误解。

有人说:"既然我们无法预测细节,那LLM就是不可解释的,就是有'灵性'的,就是某种超越人类理解的智慧。"

这不对。

雨滴的落点无法精确预测,但我们知道雨滴不是神灵保佑。它是重力、气压、湿度、温度共同作用的结果。它是物理规律的产物。

同样,LLM的输出无法精确预测,但我们知道它不是魔法。它是概率分布、优化目标、训练数据共同作用的结果。它是数学规律的产物。

气象学家不会说:"台风是天意。"

他们说的是:"这是大气环流、海洋温度、科里奥利力共同作用的结果。"

LLM研究者也不应该说:"这是机器灵魂。"

他们应该说:"这是参数矩阵、注意力权重、损失函数共同作用的结果。"

去神秘化的关键,是从"神灵保佑"转向"统计规律"。


IV. 我们要做的是防控

气象学告诉我们:懂原理不等于能控制每一滴雨。

但气象学同时也告诉我们:虽然无法控制细节,但我们可以防控风险。

我们建堤坝,不是为了让雨不落下来。

我们建排水系统,不是为了消除洪水,而是为了让洪水有处可去。

我们发布预警,不是为了改变天气,而是为了让人有准备。

防控不是消除,而是管理。

LLM也是一样。

我们无法控制每一个输出,但我们可以设计安全边界。

我们无法消除所有幻觉,但我们可以检测和缓解。

我们无法阻止所有误用,但我们可以建立使用规范和监管框架。

我们做的不是"完美",而是"可靠"。

气象学不是要征服自然,而是要与自然共存。

LLM研究不是要创造完美智能,而是要让AI与人类共存。


V. 从迷信到工程

把雨滴的落点归因于神灵保佑,这是迷信。

理解气象规律后建堤坝、设预警,这是工程。

把LLM的输出归因于机器灵魂,这是迷信。

理解Transformer架构后做对齐、设边界,这是工程。

气象学花了几百年,从"天意"走向"预测系统"。

LLM研究才几十年,但我们可以更快地完成这个转变。

理解不等于控制,但理解是管理的前提。

我们懂台风,所以我们不问雨滴落点。

我们懂LLM,所以我们不问每个token的选择。

我们懂气象规律,所以我们做防控。

我们懂LLM原理,所以我们做对齐。

这就是理解复杂系统的成熟方式。

也是去除神秘感的最好方法。

认知地图延伸 · FURTHER READING

同主题深度文章推荐

查看全部文章 →

If you liked this:

My newsletter has more "signal → action" content.

Leave your email, and I'll send you new signals first.