LLM 系列 (二十六):从 LLM 到 AGI,大模型未来会走向哪里
过去十年,大模型沿着规模化路线快速演进:参数、数据与算力的扩展提升了语言能力,后训练与强化学习增强了指令遵循和复杂推理,多模态、RAG、Agent、工具调用与记忆系统,则进一步把 LLM 从对话模型扩展为能够获取知识、理解信息并执行任务的智能系统。
随着能力边界不断外扩,一个更根本的问题随之出现:继续扩大模型规模、增加训练数据和推理计算,是否就能自然通向 AGI?AGI 全称 Artificial General Intelligence,即通用人工智能。虽然业界尚未形成统一定义,但它通常指能够跨领域理解和解决问题、将已有知识迁移到新任务,并在复杂环境中持续学习和行动的智能系统。相比之下,LLM 擅长从数据中学习语言与知识规律,却不天然具备可靠的因果理解、长期记忆、环境适应和行动能力。
因此,从 LLM 到 AGI 更可能不是单一模型的线性扩展,而是基础模型、推理系统、世界模型、Agent、记忆机制、具身智能与安全治理的共同演进。作为本系列的最后一篇文章,本文将从 Scaling Law、深度推理、世界理解、行动能力和持续学习出发,讨论大模型正在走向哪里,以及 LLM 是否会成为通往通用智能的核心路径。
AGI 不是一个更大的聊天模型
LLM 的基础训练目标仍然是预测下一个 Token:
1 | P(x_t | x_1, x_2, ..., x_(t-1)) |
这个目标看似简单,却迫使模型从海量文本中学习语言结构、事实关联、代码模式和部分推理规律。随着模型规模扩大,下一词预测逐渐产生了问答、翻译、代码生成、少样本学习和复杂推理等能力。
但“能够完成很多任务”不等于已经实现 AGI。AGI 目前没有统一定义,Google DeepMind 提出的 AGI Levels 尝试从能力深度和任务广度衡量通用性;从工程视角看,一个通用智能系统至少还需要满足几个维度:
| 能力维度 | 核心问题 | 当前 LLM 的主要限制 |
|---|---|---|
| 广度 | 能否覆盖大量不同任务 | 任务迁移能力较强,但仍依赖训练分布 |
| 深度 | 能否达到或超过领域专家 | 部分任务很强,能力分布并不均匀 |
| 泛化 | 能否处理真正陌生的问题 | 分布外任务和反常识场景仍不稳定 |
| 自主性 | 能否长期完成复杂目标 | 容易偏离目标、循环或错误累积 |
| 适应性 | 能否从新经验中持续学习 | 推理过程通常不会自动更新参数 |
| 世界理解 | 能否理解空间、物理和因果关系 | 语言知识与真实环境仍存在距离 |
| 可靠性 | 能否稳定复现正确行为 | 幻觉、随机性和不可预测错误仍然存在 |
| 安全性 | 能力增强后是否仍然可控 | 工具、权限和自主性会同步放大风险 |
因此,AGI 更适合被理解为一组能力逐步达到更高水平,而不是某一天突然出现的单一模型。

Scaling Law:扩展仍会继续,但方式正在变化
预训练 Scaling Law
大模型能力的快速提升,很大程度上建立在 Scaling Law 之上。经验研究发现,随着模型参数量和训练数据增加,语言模型的预训练 Loss 通常会按照幂律下降。一个常见的近似表达是:
1 | L(N, D) = E + A / N^α + B / D^β |
其中:
N表示模型参数量;D表示训练 Token 数;E表示当前数据分布下难以继续降低的误差下界;A、B、α、β是通过实验拟合得到的系数。
训练计算量 C 并不是第三个独立变量,而是由模型规模、数据量和训练过程共同决定。对于 Dense Decoder-only Transformer,可以粗略估算为:
1 | C ≈ 6ND |
这里的 6 是训练 FLOPs 的经验近似,并不适用于所有架构和训练配置。它表达的核心关系是:模型越大、训练 Token 越多,总计算量就越高。
早期 Scaling Law 更强调扩大模型参数带来的收益,而 Chinchilla 进一步指出:在固定计算预算下,参数量和训练数据需要合理配比。模型参数很多但训练 Token 不足,会导致模型没有被充分训练;反过来,数据很多但模型容量不足,也难以充分吸收数据中的规律。
因此,预训练 Scaling 的核心问题不是单纯“把参数做大”,而是求解:
1 | 在固定计算预算 C 下 |
Scaling Law 为模型扩展提供了可预测的工程方向,但也逐渐遇到新的瓶颈:
- 高质量训练数据并不是无限的;
- 训练成本、能源消耗和芯片需求持续增长;
- 参数扩展会同步推高推理与部署成本;
- Loss 下降不一定等比例转化为可靠性和推理能力;
- 文本数据难以覆盖完整的物理交互与环境经验。
因此,Scaling 并不会停止,但扩展对象正在从单纯的参数和预训练计算,逐步延伸到数据质量、后训练、推理计算以及真实环境反馈。
从训练计算到推理计算
推理模型带来了另一条 Scaling 路线:不只在训练阶段投入更多计算,也让模型在回答复杂问题时使用更多推理预算。一个简化的推理过程可以表示为:
1 | 候选路径 = Generate(problem, budget) |
总计算成本大致变成:
1 | C_total = |
其中 K 可以表示候选推理路径数量,或者模型允许使用的搜索和反思轮数。
OpenAI 在 o1 中展示了训练计算与测试时计算带来的推理提升;DeepSeek-R1则展示了通过强化学习激励推理行为,并将能力蒸馏到更小模型的路线。但“思考更久”并不必然得到更正确的答案。模型可能重复推理、错误自我修正,或者在错误路径上消耗更多 Token。真正有效的 Test-Time Scaling 依赖:
- 更好的问题分解;
- 多路径搜索而非单一路径拉长;
- 可靠的结果验证器;
- 根据任务难度动态分配预算;
- 在准确率、延迟和成本之间做权衡。
预训练 Scaling Law 描述了参数、数据和计算量与模型 Loss 之间的经验关系。但未来的大模型能力扩展不会局限于预训练,还会沿着数据工程、后训练、推理计算、工具系统和环境交互等方向推进:
| 扩展方向 | 核心方法 | 主要目标 |
|---|---|---|
| 预训练 Scaling | 参数、数据、计算扩展 | 提高基础能力上限 |
| 数据 Scaling | 合成数据、难例和环境轨迹 | 提高数据价值和覆盖范围 |
| 后训练 Scaling | SFT、RL、偏好与过程监督 | 学会更可靠的任务行为 |
| 推理 Scaling | 搜索、反思、验证和多路径采样 | 提高复杂问题成功率 |
| 系统 Scaling | 工具、RAG、Agent 和多 Agent | 扩展模型可完成的任务范围 |
| 环境 Scaling | 模拟器、机器人和真实交互 | 学习行动与结果之间的关系 |
这些方向并不都属于严格意义上的 Scaling Law,而是大模型从单一模型扩展到完整智能系统的不同路径。大模型规模化演进的下一阶段,不只是把模型做得更大,而是让每一单位数据、计算和环境交互产生更多有效智能。
从语言理解到世界建模与具身行动
语言知识不等于世界理解
语言包含了大量关于世界的压缩知识。模型可以从文本中学习“杯子掉落可能摔碎”“雨天道路容易湿滑”,但这些知识主要来自人类对世界的描述,而不是模型通过观察、行动和反馈获得的直接经验。只依赖语言信号,模型会面临几个上限:
- 文本难以完整表达三维空间、连续运动和物体交互;
- 语言中的统计相关性不等于真实的因果关系;
- 大量日常物理常识不会被明确写进文本;
- 模型缺少“执行动作后,环境如何变化”的经验;
- 静态语料难以覆盖持续变化的开放环境。
多模态模型补充了图像、语音和视频等感知信息,但“能够识别环境”仍不等于“能够理解环境”。从语言模型走向世界智能,还需要完成三个层次的跨越:
1 | 多模态感知:当前环境里有什么 |
世界模型:预测行动的后果
世界模型的目标,是学习环境状态及其变化规律。一个简化的模型可以表示为:
1 | z_t = Encoder(o_t) |
其中:
o_t是当前观察,例如图像、视频或传感器信号;z_t是模型内部对环境状态的压缩表示;a_t是系统准备执行的动作;Dynamics预测执行动作后环境将如何变化;Decoder用于重建未来观察,在隐空间预测模型中并非必需。
有了世界模型,系统就可以在真正行动之前进行内部模拟:
1 | 生成候选动作 |
这也是基于模型的强化学习和模型预测控制的基本思想。

从世界建模到具身行动,目前主要存在以下几类代表性技术方向:
| 路线 | 核心目标 | 代表实践 | 主要价值 |
|---|---|---|---|
| 交互式生成世界 | 根据观察和动作生成可交互环境 | Genie、Genie 3 | 为 Agent 提供可模拟、可探索的训练环境 |
| 隐空间预测 | 不重建全部像素,直接预测抽象状态变化 | V-JEPA 2 | 降低预测复杂度,学习更稳定的环境表示 |
| 空间智能 | 建模三维结构、物体关系和空间变化 | World Labs | 支持三维生成、空间推理和环境交互 |
| 视觉语言动作模型 | 将视觉、语言和动作统一建模 | RT-2、Gemini Robotics | 把通用知识迁移到机器人控制任务 |
这些路线并不互斥:生成模型关注未来环境如何呈现,隐空间模型关注状态如何变化,空间模型强调三维结构,而动作模型负责将理解转化为控制信号。
具身智能:把预测转化为行动
具身智能关注的是智能体如何通过机器人、车辆或其他物理载体感知环境、制定决策并执行动作。它需要形成一个持续运行的闭环:

以 RT-2 为代表的视觉语言动作模型,会把机器人动作表示成模型可以预测的 Token,使模型能够根据图像和语言指令生成控制动作。世界模型则可以进一步帮助系统预测动作结果,在执行前比较多种方案。需要注意,并非所有具身系统都必须包含显式世界模型,两者是相互补充的技术路线。具身智能比文本 Agent 面临更严格的约束:
- 模拟环境与真实世界之间存在分布差异;
- 机器人数据昂贵,难以达到互联网文本的规模;
- 连续控制要求低延迟、高频率和高精度;
- 感知误差会沿着规划和执行链路持续放大;
- 物理世界中的错误可能造成真实损失,不能随意重试。
因此,世界模型和具身智能并不是对 LLM 的简单替代。更可能出现的是一种融合架构:LLM 负责语言交互、抽象知识和高层规划,世界模型负责空间、时间与因果预测,具身控制模型负责将计划转化为动作,并通过真实环境反馈不断修正系统状态。
Agent、记忆与持续学习
世界模型让系统能够预测环境,Agent 则让模型能够围绕目标持续行动。一个更完整的智能系统可以表示为:
1 | 智能系统 = |
从一次推理到长期任务
普通 LLM 应用通常在完成一次请求与回答后结束;Agent 则会在模型推理、工具执行和环境反馈之间持续循环:

Agent 的关键进步不是让模型“多回答几轮”,而是让系统具备显式状态、工具权限、终止条件和环境反馈,能够围绕目标持续执行任务。但任务链路越长,局部错误越容易在后续步骤中累积和放大。
在假设各关键步骤相互独立、成功率均为 p 的简化条件下,连续 n 步全部成功的概率可以近似表示为:
1 | P(success) ≈ p^n |
例如,单步成功率为 99% 时,连续 100 个关键步骤全部成功的概率约为:
1 | 0.99^100 ≈ 36.6% |
真实 Agent 的步骤通常存在依赖关系,因此这个公式只是用于说明长程任务的可靠性挑战。生产级 Agent 需要通过分阶段验证、失败重试、状态持久化、执行预算、人工检查点和回滚机制,将一次长链路拆成多个可验证、可恢复的执行阶段。
记忆让系统保持连续性
模型上下文本身不是长期记忆。一个面向长期任务的记忆系统通常包括:
| 记忆类型 | 保存内容 | 主要作用 |
|---|---|---|
| 工作记忆 | 当前计划、中间结果和工具状态 | 保持当前任务连贯 |
| 情景记忆 | 过去发生的任务和事件 | 回忆具体经历 |
| 语义记忆 | 稳定事实、用户画像和项目知识 | 提供长期背景 |
| 程序记忆 | 可复用流程、策略和失败经验 | 改进未来行动方式 |
个性化记忆让系统理解“这个用户是谁”,Agent 经验记忆则让系统知道“这类任务以前怎样成功或失败”。但外部记忆主要改变当前上下文,并不会自动改变模型参数。要让系统真正获得新能力,还需要持续学习。
持续学习的三层闭环
持续学习可以分成三个层次:
- 上下文学习:把新信息放入当前上下文,响应最快,但不会跨任务永久保留;
- 外部记忆学习:将事实、经验和策略写入数据库,下次按需检索;
- 参数学习:通过持续预训练、微调或强化学习更新模型行为。
参数更新最容易遇到灾难性遗忘:模型适应新数据后,原有知识和能力反而下降。持续训练通常需要混合新数据、历史回放数据和安全数据:
1 | L_total = |
其中:
L_new用于学习新任务;L_replay防止遗忘旧能力;L_safety维持安全边界;L_consistency限制模型行为发生不必要漂移。

真正可用的持续学习系统还需要解决:
- 错误反馈可能把模型带向错误方向;
- Agent 轨迹可能包含 Prompt Injection 和恶意数据;
- 用户偏好不能直接覆盖系统安全规则;
- 新模型必须经过回归评测和版本管理;
- 所有参数、记忆和策略更新都需要能够回滚。
因此,未来的“自我进化”更可能是受控的数据飞轮,而不是模型在生产环境中任意修改自己。
LLM 是 AGI 的唯一路径吗
更准确的答案是:LLM 很可能是通往 AGI 的核心技术之一,但它既不是完整答案,也未必是唯一路径。
LLM 擅长理解语言、组织知识、抽象推理与任务规划,但通用智能还需要环境感知、因果预测、长期记忆、持续学习和可靠行动。这些能力可能无法仅靠扩大语言模型获得,而需要世界模型、记忆系统、Agent、工具与具身控制等模块共同协作。

判断 AGI 进展的关键里程碑
与其预测 AGI 会在哪一年到来,不如观察几个更具可验证性的技术里程碑:
- 分布外泛化:能够解决训练和评测中没有出现过的新问题;
- 长程可靠性:在数百甚至数千步任务中持续保持目标和约束;
- 因果世界建模:能够预测行动结果,而不只是生成合理表象;
- 持续学习:吸收新经验时不会明显破坏原有能力;
- 跨环境迁移:同一能力可以迁移到不同软件、设备和机器人;
- 可验证自主性:自主完成任务的同时提供证据、审计和回滚;
- 可控能力增长:模型能力提升时,安全机制能够同步扩展。
这些指标说明,AGI 不只是“知道更多”,还需要具备泛化、规划、行动、适应和自我修正能力。
工业界正在探索的 AGI 路线
截至 2026 年 7 月,头部机构并没有形成统一的 AGI 技术路线。下面的分类也不是各家公司公布的完整“AGI 配方”,而是根据其公开使命、研究方向和产品实践所做的归纳。
| 机构 | 核心判断 | 主要实施路径 | LLM 的定位 |
|---|---|---|---|
| OpenAI | 通用能力可以通过深度学习、规模扩展、强化学习和推理计算继续提升 | Frontier Model、推理模型、多模态、Agent、工具执行、评测与安全治理 | 作为通用认知与 Agent 核心,逐步承担更多经济任务 |
| Google DeepMind | 通过能力深度与任务广度衡量 AGI 水平,并将自主性和风险作为独立的部署考量 | Gemini、多模态推理、强化学习、科学模型、Genie 世界模型与 Gemini Robotics | 语言模型是统一基础,但需要与世界模型、规划和机器人结合 |
| Anthropic | 强大能力可能随着规模化快速出现,但可解释、可控与安全必须同步解决 | Frontier LLM、Agent、Constitutional AI、机制可解释性、能力评测与 Responsible Scaling Policy | 继续扩展通用模型,同时重点研究如何理解和约束模型行为 |
| Meta | 仅靠生成语言和像素,可能难以形成稳定的世界理解 | JEPA、自监督视频学习、隐空间世界模型、分层规划与具身 Agent | LLM 负责语言交互,世界模型负责环境理解、预测与规划 |
| 李飞飞 / World Labs | 通用智能不能缺少空间智能,系统需要理解和操作三维世界 | Large World Models、三维生成、空间推理、持久化环境与交互系统 | LLM 是语言接口,空间世界模型补充三维结构和环境交互能力 |
- OpenAI 将 AGI 定义为能够在大多数具有经济价值的工作中超越人类的高度自主系统。其公开路线以通用基础模型为核心,通过强化学习增强推理,再通过 Agent、工具和受控执行环境把模型能力转化为任务成果(OpenAI Charter、Learning to reason with LLMs)。
- Google DeepMind 的路线更加综合。Gemini 承担通用多模态与推理能力,Genie 探索可交互世界模型,Gemini Robotics 则将视觉、语言和动作连接起来。其“Levels of AGI”框架以能力深度和任务广度划分 AGI 水平,并将自主性和风险作为独立的部署考量(Levels of AGI、Google DeepMind Models)。
- Anthropic 并未公开提出一种独立于 LLM 的 AGI 架构,其重点是继续发展 Frontier Model 和 Agent 能力,同时把可解释性、可控性和风险治理视为扩展能力的前置条件。Responsible Scaling Policy 会根据模型达到的能力阈值逐级提高安全要求(Anthropic Company、Responsible Scaling Policy)。
- Meta 的 JEPA 路线代表了另一种判断:智能系统不仅要预测语言或像素,还要在抽象表示空间中学习世界状态,预测环境变化并规划动作。V-JEPA 2 已经把这种思路扩展到视频理解和机器人规划(V-JEPA 2)。
- 李飞飞创立的 World Labs 则把“空间智能”放在核心位置,尝试构建能够感知、生成、推理并操作三维世界的基础世界模型。这条路线认为,语言智能解决的是“如何描述世界”,空间智能还要解决“世界如何组织和变化”(World Labs)。
这些路线并不是简单的竞争关系,更可能在未来逐步融合:

AGI 同样是安全与治理问题
随着模型获得更强的推理、工具调用和自主行动能力,安全问题也会从“回答是否合规”扩展为“模型是否具备危险能力、行为是否可解释、系统是否仍然可控”。因此,AGI 安全不能只依赖权限和沙箱,还需要覆盖模型训练、能力评测、部署决策与运行监控的完整生命周期。
| 安全层次 | 核心问题 | 主要技术方案 |
|---|---|---|
| 模型能力 | 是否出现高风险自主性、欺骗、网络攻击或生物安全能力 | 危险能力评测、红队测试、对抗训练与能力阈值 |
| 模型行为 | 模型为何做出当前决策,是否会隐藏真实目标 | 机制可解释性、过程监督、可扩展监督与行为审计 |
| 部署决策 | 当前证据是否足以支持模型上线 | Safety Case、分级访问、灰度发布与部署门禁 |
| 运行系统 | 模型能否越权操作工具和真实环境 | 最小权限、环境隔离、过程监控、人工检查点与紧急中断 |
| 持续演进 | 模型升级后是否产生新的能力与风险 | 回归评测、能力重新评估、版本治理与快速回滚 |
危险能力评测应在上线前主动识别模型的自主性、欺骗、越权操作和高风险知识能力,并设置明确的部署阈值。模型一旦跨越能力边界,就需要提高安全等级、限制开放范围或暂停部署。Anthropic 的 Responsible Scaling Policy 就采用了类似的分级治理思路。
评测只能观察模型“做了什么”,机制可解释性、过程监督和可扩展监督则进一步帮助判断模型“为什么这样做”。上线前还应形成安全论证,说明风险、缓解措施和应急方案。
模型、训练数据、工具权限或运行环境发生变化后,都需要重新评估。AGI 安全不是一层输出过滤器,而是贯穿能力评测、部署门禁、运行监控和版本回滚的完整体系。
总结
回看整个 LLM 系列,大模型的发展经历了一条逐步扩展的路线:

LLM 已经证明,语言可以承载比过去预想更多的知识、推理和行动能力。但语言毕竟是人类经验的压缩表达。如果系统只能学习文字,而不能观察世界、采取行动、接受反馈并积累经验,它的通用性可能始终存在边界。
因此,LLM 可能不是 AGI 的终点,却很可能成为未来智能系统的重要中枢:它连接语言、知识、推理、工具、记忆、世界模型和物理行动,让不同能力能够在统一目标下协作。
未来真正值得关注的,不只是模型参数还会增长多少,而是机器能否形成一个完整闭环:

从 LLM 到 AGI,需要跨越的不是单纯的模型规模,而是从“学习人类留下的数据”,走向“理解世界、作用于世界,并从真实反馈中持续学习”。
这既是 LLM 技术演进的下一阶段,也是人工智能最初那个问题的延续:机器究竟如何获得真正的智能?
参考资料:
