从台风看AI
气象学告诉我们:理解原理和预测细节是两个层面的问题。同样的逻辑也适用于理解LLM——我们懂Transformer和注意力机制,但不苛求每个细节。去神秘化的关键,是从'神灵保佑'转向'工程防控'。
用几分钟对谈拆解本文核心推演
最近上海一直在被台风侵袭,我一直在关注气象新闻,新闻里有台风的路径,有风力大小的数字,有影响的范围圈。气象学家在地图上画出一条条曲线,告诉我们台风会在什么时候到达哪里,会带来多大的破坏。
不过,我又想到另一个问题,"为什么这滴雨刚好落在这个屋顶?"
不是"为什么这里会下雨",而是"为什么这滴雨,而不是那滴雨,落在这个屋顶,而不是那个屋顶?"
在气象学如此高明的时候,这个问题我们却没有答案,但仔细想想,它揭示了一个我们经常忽略的事实:我们以为自己理解台风,但我们的理解有一个边界。气象学给我们的启示,恰恰也是理解LLM的正确方式。
I. 气象学的启示:懂原理 ≠ 预测细节
我们理解台风。
我们知道Navier-Stokes方程描述流体运动——这个方程本质上是在说:流体中每一个微小的"水团"在运动时,会受到压力的推挤、邻居的拖拽、重力的影响,这些力的平衡决定了水团会加速还是减速。就像一群人在拥挤的街道上走,每个人都被前后左右的人推着,同时又想保持自己的速度,最终形成了人群的整体流动。
我们也知道热力学解释能量转换,知道相变机制解释云雨形成。我们甚至能在一定程度上预测台风路径、降雨强度、影响范围。
这些不是秘密。它们是写在教科书里的原理。
但如果我们问:"为什么这滴雨落在这个屋顶,而不是那个屋顶?"
气象学家会告诉你:这个问题我们没有直接答案。
当然,我们知道这滴雨落在这里而不是那里,肯定不是神灵的保佑,也不是我们无法理解的什么神秘力量。
而是因为:理解系统的宏观原理,和预测每个微观细节,是两个层面的问题。
台风是一个混沌系统。初值敏感,蝴蝶效应。即使我们完美掌握所有物理定律,也无法精确预测每一滴雨的落点。
这不是无能。这是系统的本质。
接受这一点,是气象学成熟的表现。
同样,接受这一点,也是理解LLM成熟的表现。
II. LLM也是一样:我们懂原理,但不苛求细节
人们经常说LLM是"黑盒"。
但这个说法并不准确。
我们懂Transformer架构,懂注意力机制如何计算相关性,懂位置编码如何处理序列顺序,懂梯度下降如何优化参数,懂交叉熵损失如何衡量预测质量。
这些不是神秘知识。它们是公开的、可验证的、可复现的。
但如果我们问:"为什么这个词被生成,而不是那个词?"
这个问题和"为什么这滴雨落在这里"一样,我们无法给出直接答案。
LLM有数十亿参数。每个token的生成是所有参数协同作用的结果。即使我们完全理解每条边的数学含义,也无法精确预测某个具体token的选择。
这不是因为我们不懂原理。
而是因为:高维统计系统的本质,就是涌现行为难以逐点预测。
接受这一点,我们就从"神秘化"走向了"理解"。
III. 雨滴不是神灵保佑
但这里有个危险的误解。
有人说:"既然我们无法预测细节,那LLM就是不可解释的,就是有'灵性'的,就是某种超越人类理解的智慧。"
这不对。
雨滴的落点无法精确预测,但我们知道雨滴不是神灵保佑。它是重力、气压、湿度、温度共同作用的结果。它是物理规律的产物。
同样,LLM的输出无法精确预测,但我们知道它不是魔法。它是概率分布、优化目标、训练数据共同作用的结果。它是数学规律的产物。
气象学家不会说:"台风是天意。"
他们说的是:"这是大气环流、海洋温度、科里奥利力共同作用的结果。"
LLM研究者也不应该说:"这是机器灵魂。"
他们应该说:"这是参数矩阵、注意力权重、损失函数共同作用的结果。"
去神秘化的关键,是从"神灵保佑"转向"统计规律"。
IV. 我们要做的是防控
气象学告诉我们:懂原理不等于能控制每一滴雨。
但气象学同时也告诉我们:虽然无法控制细节,但我们可以防控风险。
我们建堤坝,不是为了让雨不落下来。
我们建排水系统,不是为了消除洪水,而是为了让洪水有处可去。
我们发布预警,不是为了改变天气,而是为了让人有准备。
防控不是消除,而是管理。
LLM也是一样。
我们无法控制每一个输出,但我们可以设计安全边界。
我们无法消除所有幻觉,但我们可以检测和缓解。
我们无法阻止所有误用,但我们可以建立使用规范和监管框架。
我们做的不是"完美",而是"可靠"。
气象学不是要征服自然,而是要与自然共存。
LLM研究不是要创造完美智能,而是要让AI与人类共存。
V. 从迷信到工程
把雨滴的落点归因于神灵保佑,这是迷信。
理解气象规律后建堤坝、设预警,这是工程。
把LLM的输出归因于机器灵魂,这是迷信。
理解Transformer架构后做对齐、设边界,这是工程。
气象学花了几百年,从"天意"走向"预测系统"。
LLM研究才几十年,但我们可以更快地完成这个转变。
理解不等于控制,但理解是管理的前提。
我们懂台风,所以我们不问雨滴落点。
我们懂LLM,所以我们不问每个token的选择。
我们懂气象规律,所以我们做防控。
我们懂LLM原理,所以我们做对齐。
这就是理解复杂系统的成熟方式。
也是去除神秘感的最好方法。
认知地图延伸 · FURTHER READING
同主题深度文章推荐
If you liked this:
My newsletter has more "signal → action" content.
Leave your email, and I'll send you new signals first.