Chunlin 的论文科普

LLM 连工作流都做不对,下一代 AI 为什么要靠「世界模型」?

你用 AI 搭了个自动分析销售数据的工作流:输入一句“帮我算下这个季度华东区的复购率”,模型自动查库、拉数、算指标、出报表,跑通了,结果也漂亮。直到月底对账时才发现——它把“复购率”算成了“重复下单的用户数占总用户数的比例”,而你们公司的定义是“复购用户的订单金额占总销售额的比例”。流程没报错,逻辑能自洽,就是结果错了。

这种“能跑但不对”的问题,光靠把模型从 7B 换成 70B、再加几层 RAG 能解决吗?最近的一系列研究给出的答案并不乐观。

一个扎心的事实:你的 AI 工作流可能「跑通了但错了」

很多人对 LLM 工作流的印象还停留在“提示词→调用工具→返回结果”的简单链条,但真实世界里的情况要复杂得多。一项对 6000 多个公开 n8n 工作流的实证分析发现,LLM 工作流很少是线性的,大多数都包含分支、合并甚至循环结构,控制流相当复杂 [2]。

结构复杂本来不是坏事,问题出在可靠性上。研究发现,这些工作流里明确的可靠性机制——比如结构化的降级路径、修复循环、失败告警、人工审批关卡——都相当少见 [2]。更让人捏一把汗的是,LLM 的输出经常直接通过自动化逻辑对接外部动作,中间没有人工把关 [2]。

你可能会说:“能跑通就行,错了大不了改。”但有些错误根本不会报错。另一项针对分析类工作流的研究更扎心:在 236 个跨金融、人力资源、公共安全的分析意图中,有 65% 的工作流虽然成功生成并执行了,但并没有忠实地实现用户的分析意图 [5]。换句话说,你以为它在算 A,它其实算了个 B,而你可能永远发现不了。

研究者把这些“操作化失败”归成了五类:比较基准错了、流程推理错了、定量计算错了、角色搞混了、政策依据错了 [5]。这些错误的共性是:语法没问题,执行也成功,就是语义不对。而且这不是某个特定数据集的问题,在独立的 BIRD 基准测试子集里,这类失败的比例也在 61% 到 68% 之间 [5]。

为什么会这样?核心原因是存在一道“语义鸿沟”:用户脑子里的分析概念,和工作流系统能拿到的信息之间,差了一大截 [5]。数据库里只有表结构和字段值,但要把“复购率”“绩效达标率”“风险等级”这些概念翻译成可执行的计算,你还需要知道指标定义、业务流程、统计口径、组织政策——这些东西 LLM 从文本里学不全,数据库里也没有 [5]。

LLM 到底卡在哪:从「会说话」到「懂世界」的鸿沟

问题的根源,其实藏在 LLM 的“出厂设置”里。

大语言模型,顾名思义,主要处理基于语言的输入——文本,或者能被转换成某种语言表达的其他模态数据,它的训练数据也以海量文本为主 [1]。这就决定了它的强项是“语言层面的连贯”,而不是“对物理世界和真实环境的理解”。

你可能会说,现在多模态模型不是已经能看图、看视频了吗?是的,模型的输入从纯文本扩展到了图像、音频、视频,这是一大步。但多模态本质上还是在“感知和描述世界”,离“理解世界怎么运行、能在世界里做规划”还有距离。

打个比方:LLM 像一个背了一整个图书馆的人,你问它什么,它都能引经据典给你说一段,说得还特别顺。但你要是让它去厨房做个番茄炒蛋,它可能会把步骤背得滚瓜烂熟,真上手时才发现——不知道油烧到什么程度算热,不知道盐放一勺是多少,不知道番茄炒到什么状态该出锅。它知道“关于做饭的文字”,但不知道“做饭这件事本身”。

当然,实际情况比这个比喻更复杂。LLM 也能通过工具调用、代码执行来间接和世界交互,但它的核心能力还是建立在文本预测上的。正如一篇世界模型综述指出的,主要在文本上训练的大语言模型,在理解复杂环境(比如物理世界)方面,泛化能力可能是不够的 [1]。

这也解释了为什么工作流会“能跑但错”:LLM 擅长把“复购率”这三个字和数据库里的字段做匹配、拼出一段能执行的 SQL,但它不一定理解“复购率”这个概念在具体业务场景里到底意味着什么、有哪些隐含假设、不同部门的定义有什么差别。它在语言层面是通的,在环境和语义层面是飘的。

那有没有办法让 AI 真的“懂”世界运行的规律,而不只是“会说”关于世界的话?这就是“世界模型”要解决的问题。

世界模型是什么:给 AI 装一个「脑补世界」的大脑

“世界模型”(World Model)这个词听起来很玄,其实核心想法很朴素:让 AI 在脑子里构建一个关于世界的“模拟器”,不仅能理解世界现在是什么样,还能推演接下来会发生什么,从而做推理和规划 [1]。

还是用刚才做饭的比方:如果说 LLM 是背菜谱的人,那装了世界模型的 AI 就像一个真正会做饭的人——它脑子里有对“炒菜”这件事的内在理解:油温升高会怎样,食材下锅后水分会蒸发,盐放多了会咸,炒太久菜会老。它不用真的把菜炒糊一次才知道“不能炒太久”,而是可以在脑子里先“预演”一遍,调整自己的动作。

按照一篇综述的分类,世界模型主要有两类核心功能 [8]: 第一类是构建内部表征来理解世界的运行机制。简单说就是“搞懂现在是怎么回事”——不是简单地识别物体、描述场景,而是理解事物之间的因果关系、物理规律、社会规则。比如看到一个杯子放在桌子边缘,它知道“杯子可能会掉下来摔碎”,而不只是“桌子上有个杯子”。 第二类是预测未来状态,用来模拟和指导决策。也就是“脑补接下来会怎样”。它可以在内部模拟不同行动的后果,然后选最优的那个。比如机器人要拿起一个易碎的杯子,它可以先在脑子里试几种抓握方式,预判哪种不会把杯子捏碎、不会掉,再真的动手。

你可能已经注意到了,这和人类的认知方式很像。我们人也不是每次遇到新情况都从零开始试错,而是靠脑子里对世界的理解,先“想一下”再行动。世界模型的目标,就是让 AI 也具备这种更像智能生物的抽象、推理、规划能力,而不只是停留在“下一个词预测”的层面 [1]。

当然,实际情况比这个比喻更复杂。世界模型不是一个单一的模型,而是一类模型的统称,它们的架构、训练方式、应用场景差异都很大 [1]。但核心的方向是一致的:从“处理语言”走向“理解环境”。

这条路走了多久:从语言模型到多模态,再到世界模型

世界模型不是突然冒出来的新概念,它其实是 AI 基础模型演进到今天的自然延伸。我们可以简单捋一下这条脉络。

第一步是纯语言的大语言模型(LLM)。从统计语言模型到神经语言模型,再到今天的大模型,语言智能的进步有目共睹 [7]。LLM 解决的核心问题是“理解和生成人类语言”,它让 AI 第一次能用自然语言和人流畅交流、处理各种文本任务。但它的局限也很明显:输入主要是文本,对世界的理解被限制在语言描述的范围内 [1]。

第二步是大多模态模型(LMM)。为了突破纯文本的限制,研究者把图像、音频、视频等模态也加了进来,让模型能“看”能“听” [7]。多模态模型确实强大了很多——能生成逼真的图片和视频,能做复杂的多模态推理。但正如一篇多模态模型的分类研究指出的,尽管输出效果惊人,多模态模型依然有明显的局限 [6]。它解决了“感知多模态信息”的问题,但还没解决“理解世界运行规律、做主动规划”的问题。它更像一个超强的“感知+生成器”,而不是一个能在世界里自主行动的“智能体”。

第三步就是世界模型。它是在多模态的基础上再往前走一步:从“感知和描述世界”走向“理解和模拟世界” [8]。如果说多模态模型回答的是“这是什么”,那世界模型要回答的是“为什么会这样”“接下来会怎样”“我该怎么做”。它的目标不是生成更逼真的内容,而是支撑更通用的推理、规划和决策能力 [1]。

这三步不是互相替代的,而是递进的。没有 LLM 打下的语言理解基础,就没有后来的多模态;没有多模态带来的丰富感知,世界模型也无从“理解世界”。世界模型是建立在前两代模型的肩膀上的新方向 [8]。

世界模型真的是答案吗:我们还卡在哪些问题上

读到这里你可能会兴奋:“那是不是有了世界模型,AI 就能像人一样懂世界了?工作流算错指标的问题也能解决了?”先别急——世界模型目前还处在早期研究阶段,有一大堆开放问题等着解决,远没到“包治百病”的程度。

第一个难题是泛化。怎么训练世界模型,让它能在各种复杂的物理环境里都通用,而不是只能在某个特定游戏、特定场景里好用?这是一篇核心综述明确提出的开放问题 [1]。人类的世界模型是通用的——你学会了“热的东西会烫到手”,不管是开水、热锅还是烙铁,你都知道要小心。但 AI 的世界模型很容易“偏科”,在训练环境里表现很好,换个环境就不灵了。

第二个难题是架构。到底什么样的神经结构最适合支撑世界模型的推理和规划能力?现在还没有定论 [1]。是在现有 Transformer 架构上修修补补,还是需要全新的架构?是用生成式的方式模拟未来,还是用更结构化的方式表征因果关系?这些都还在探索阶段。

第三个难题甚至不是技术本身,而是治理。当 AI 有了更强的规划能力、能更自主地和世界交互,我们怎么评估它的表现?怎么建立有效的治理框架?这是智能体工程领域提出的核心问题 [4]。以前的聊天机器人,说错了话大不了道个歉;但如果一个装了世界模型的自主智能体在真实环境里做规划、执行动作,出了问题可能就是实实在在的损失。怎么给它设边界、怎么问责、怎么保证它的行为符合人类的预期,这些都还没有成熟的答案 [4]。

另外,就算世界模型真的做出来了,它也不是万能的。像前面提到的业务指标定义、组织政策这些高度依赖具体语境的语义问题,世界模型能帮上多大忙,目前也还没有明确的研究结论。它可能会让 AI 的通用推理能力上一个台阶,但具体到每个垂直领域的“语义鸿沟”,可能依然需要结合领域知识来解决。

如果你只记住一件事

LLM 工作流“能跑但不对”的尴尬,本质上不是模型不够大、提示词写得不够好,而是“会说语言”和“懂世界”之间的天然鸿沟。世界模型不是更大的语言模型,而是一条试图让 AI 真正理解环境、做推理规划的新路径——它是下一代 AI 的重要方向,但现在还在爬坡阶段,远没到可以神话的地步。


参考文献

  1. World Models: A Survey(SSRN、2026)
  2. Characterizing Large Language Model Agentic Workflows: A Study on N8n Ecosystem(arXiv、2026)
  3. Small Language Models: opportunities and obstacles(AI+、2026)
  4. Agentic Engineering: From Chatbots to Autonomous Entities The Comprehensive and Foundational Guide for Building, Evaluating, and Governing Independent Artificial Intelligence Agents(Zenodo (CERN European Organization for Nuclear Research)、2026)
  5. Exploring the Semantic Gap in Agentic Data Systems: A Formative Study of Operationalization Failures in Analytical Workflows(arXiv、2026)
  6. Multimodal Foundation Models: a Taxonomy and Reflections(International Journal of Web and Grid Services、2024)
  7. Evolution and Prospects of Foundation Models: From Large Language Models to Large Multimodal Models(Computers, materials & continua/Computers, materials & continua (Print)、2024)
  8. Understanding World or Predicting Future? A Comprehensive Survey of World Models(arXiv (Cornell University)、2024)