--- title: "VLA (Vision-Language-Action)" created: 2026-06-08 updated: 2026-06-08 type: concept tags: [embodied-AI, robotics, VLA, LeCun] sources: [raw/articles/lecun-llm-boundary-future-2026.md] --- # VLA (Vision-Language-Action) **视觉-语言-动作模型**,将大语言模型的成功经验迁移到机器人控制的架构范式:Vision + Language → Action。 ## LeCun 的判断 > "VLA现在基本上被视为失败。不够可靠,需要太多训练数据。" 2023 年 Google DeepMind RT-2 发布时,曾将具身智能商业化预期提前三年。但学术研究和工业实践反复验证了 VLA 的根本性局限。 ## 失败的四个层面 ### 1. 可靠性 - **VLATest (FSE 2025)**:对 7 个代表性 VLA 模型的模糊测试,结论"缺乏实际部署所需的鲁棒性" - **LIBERO-Plus (2025)**:适度扰动相机视角/机器人初始状态可使成功率从 95% 骤降至 **30% 以下** - **致命发现**:VLA 模型"在相当程度上忽略了语言指令",更多依赖视觉线索做决策——本质在做视觉模式匹配,而非指令-动作因果关联 ### 2. 数据成本 - LLM 预训练数据有普遍迁移性;VLA 模仿学习数据 **没有迁移性** - 每个新任务、新环境、新操作对象需重新收集演示数据 - 扩展成本线性甚至超线性增长 ### 3. 泛化 - ICLR 2026 论文 *From Seeing to Doing*:"仍然无法实现鲁棒的零样本性能" - 最佳模型零样本泛化仅 **72%**,远未达到工业部署要求 - VLA 学到的本质是"**条件反射式**"行为映射,不是真正的泛化智能 ### 4. 规划 - 沿袭 LLM 的自回归逐 token 预测,无法进行显式多步规划 - 只能问"下一个动作应该是什么",不能问"如果我这样做会怎样" ## 为什么产业界还在押注? 1. **工程成熟度最高**:直接继承 Transformer/大规模预训练/多模态对齐/指令微调/强VLM技术栈 2. **许多任务不需要完整世界模型**:仓库分拣、工厂装配等——环境固定、目标明确、动作空间有限 3. **正在吸收世界模型思想**:引入显式状态预测、层级规划、强化学习等融合方案 ## VLA 的适用边界 ✅ 可工作:受控条件、有限任务集、充足演示数据(固定工位分拣、特定生产线) ❌ 走不通:通向通用机器智能的路径——泛化上限决定了只能分布内运行 LeCun 的批评语境是"AGI 核心路径走不通",而非"任何场景都无用"。 ## 相关 - [[jepa|JEPA]] — 替代架构 - [[world-model-lecun|LeCun 世界模型理论]] - [[objective-driven-ai|目标驱动AI]] - [[lecun-llm-boundary-future|原始文章]]