📌 关于论文:小米公开的精确名为 “One-VL” 的论文未检索到,本篇精读小米具身智能团队官方对外的工作 OneVLOne-Step Latent Reasoning and Planning with Vision-Language Explanation,arXiv:2604.18486)——这是小米 Embodied Intelligence Team 在自动驾驶 VLA 推理范式上的旗舰工作,也是前作 LaST-VLA 的工程化延续。

📄 论文信息

  • 标题OneVL: One-Step Latent Reasoning and Planning with Vision-Language Explanation
  • 团队小米具身智能团队(Xiaomi Embodied Intelligence Team) — Jinghui Lu、Jiayi Guan、Zhijian Huang、Lingdong Kong、Shaoqing Xu、Yuechen Luo、Fang Li、Long Chen、Hangjun Ye 等 50 余人
  • 发表:arXiv:2604.18486(2026 年 4 月首发,49 页技术报告)
  • 代码 / 项目github.com/xiaomi-research/onevlxiaomi-embodied-intelligence.github.io/OneVL
  • 骨干:Qwen3-VL 4B
  • 一句话总结首个超越显式 CoT 的隐式 CoT 方法——用一个语言解码器 + 一个视觉世界模型解码器双管齐下监督隐空间,推理时所有隐 token 一步 prefill 并行填完,做到"显式 CoT 的精度 + 直接出答案的延迟",4B 模型在四大基准全 SOTA。

🤔 要解决什么问题?

思维链(CoT)推理已经成为 VLA 自动驾驶涨分的关键引擎,但它有个致命软肋——自回归生成文字太慢,几十上百 token 的推理链让实时部署几乎不可能。

社区的应对是 隐式 CoT:把推理压进连续隐状态,绕开冗长的文字生成。但所有现有隐式方法(COCONUT、CODI、SIM-CoT)一致地打不过显式 CoT,甚至经常连"不推理直接出答案"的 AR 基线都不如。OneVL 团队给出了一个犀利诊断:

三种 CoT 范式对比:显式文字 CoT、朴素隐式 CoT、OneVL 的双模态隐式 CoT

问题不在"压缩",而在"压缩目标"。

纯粹的语言隐变量压缩的只是世界的符号抽象,而不是真正支配驾驶的因果动力学。一个只压缩语言的隐向量,本质上只是在压缩"世界的描述",而非"世界的物理结构"——这正是隐式 CoT 长期掉分的根因。

核心问题:如何让隐式推理的压缩目标真正捕捉因果关系?OneVL 的答案是——用两个辅助解码器联合监督隐空间:一个还原文字 CoT,一个预测未来视觉帧,逼隐变量同时承载语义意图物理场景动力学


🧠 核心架构:双模态隐式推理

OneVL 在预训练 VLM 上挂了一个紧凑的隐 token 接口双辅助解码器,训练时三件套联合优化,推理时辅助解码器全丢弃、所有隐 token 一步并行 prefill,延迟与"直接出答案"持平。

OneVL 总体架构:双模态隐式推理,35 视觉 + 20 语言隐 token 构成信息瓶颈,双辅助解码器联合监督

双隐 token:紧致信息瓶颈

隐 token数量作用
视觉隐 token35 个承载场景的因果动力学结构
语言隐 token20 个承载语义意图(场景理解、物体分析、驾驶决策)

合计 55 个隐 token 构成一个紧致的信息瓶颈——容量只够模型蒸馏场景的因果骨架,逼它放弃死记硬背、学出可泛化的表征。这种"刻意卡脖子"的设计是泛化性的关键。

语言辅助解码器:还原人读 CoT

从语言隐状态重建人类可读的 CoT 文本,把瓶颈接地到语义意图。典型的 CoT 形如:

“自车所在车道右侧靠近不可行驶区域,需稍向左偏;当前场景无需特别关注的物体;基于场景理解与导航,应保持车速并左转。”

这条监督确保隐空间没有丢掉"思考过程"的可解释语义。

视觉世界模型解码器:预测未来帧

这是 OneVL 最关键的创新。从视觉隐状态预测未来 +0.5s 和 +1.0s 的视觉 token,相当于挂了一个世界模型辅助头,把瓶颈接地到物理场景动力学——这是语言单独无法提供的因果压缩目标

两个解码器一软(语义)一硬(物理),双管齐下把隐空间钉死在真实因果关系上。论文核心论断:

有了世界模型监督,隐式 CoT 能产生比逐 token 文字推理更可泛化的表征。

推理:一步 prefill 的关键突破

这是 OneVL 相对前作 LaST-VLA 最具工程价值的跃迁。传统的隐式 CoT 仍然需要自回归逐个生成隐 token,延迟优势有限;OneVL 的做法是——所有隐 token 在一次并行的 prefill 中一次性填完,等价于"直接出答案"的延迟成本。

具体而言,推理时辅助解码器被完全丢弃,55 个隐 token 作为可学习的"软提示"(soft prompt)插入序列,与图像/文本 token 一起在单次前向里并行计算,随后直接接动作 token 输出。这就把隐式 CoT 从"生成过程"变成了"单步映射",彻底释放了隐式推理的延迟红利。这也是为什么 OneVL 能在 NAVSIM 上做到 4.46s 推理,与"不推理直接出答案"的 4.49s 几乎持平,却比显式 AR CoT 的 6.58s 快整整 32%。


🪜 三阶段渐进训练

OneVL 面临一个独特的优化难题:主 VLM、语言辅助解码器、视觉辅助解码器三者的学习目标根本不同,硬联合训练必然崩。作者用三阶段管线逐步对齐:

阶段名称解冻模块核心目标
Stage 0主模型热身主 VLM 端到端带着隐 token 训轨迹预测,让模型学会生成有意义的隐表征、建立信息路由
Stage 1辅助解码器热身冻结主模型只训两个辅助解码器,让它们对齐到稳定的隐表征上(语言解码 CoT、视觉预测未来)
Stage 2联合端到端微调三者全解冻两个解码器的梯度回传进主模型,形成正向循环,从两侧收紧信息瓶颈

这套"先各自热身、再联合精修“的渐进策略是稳定性的命门。消融数据触目惊心:

配置NAVSIM PDMS相对完整模型
OneVL(完整)88.84
w/o 语言解码器88.53−0.31
w/o 视觉解码器87.97−0.87(损失最大)
w/o 三阶段训练(直接端到端)67.13−21.71(灾难性崩塌)

两个结论极其硬核:① 视觉世界模型解码器贡献最大(−0.87),印证了"因果动力学才是关键压缩目标"的核心论断;② 跳过三阶段直接联合训练会暴跌 21 分——多目标优化的冲突如果不靠渐进策略化解,模型根本学不出来。


📊 实验结果:4B 全场 SOTA + 答案级延迟

OneVL 是首个在四大基准上全面超越显式 CoT 的隐式方法。所有现有隐式方法(COCONUT、CODI、SIM-CoT)一致地打不过 AR 基线,只有 OneVL 反超。

方法模型规模PDMS ↑延迟(s) ↓可解释性
AdaThinkDrive8B86.20语言
LaST-VLA(前作)8B87.30
AR Answer(不推理)4B87.474.49
AR CoT+Answer(显式)4B88.296.58语言
COCONUT(隐式)4B84.845.93
CODI(隐式)4B83.928.62
SIM-CoT(隐式)4B84.2110.86语言
OneVL4B88.844.46视觉+语言

OneVL 同时拿到了最高分和最低延迟——比显式 AR CoT 快 32%(4.46s vs 6.58s),精度还反超 0.55 PDMS。注意它只有 4B 却干掉了 8B 的 LaST-VLA 和 AdaThinkDrive,这是"压缩目标选对"带来的红利。

其他三大基准:一致领先

基准指标前 SOTAAR CoTOneVL
ROADWorkADE / FDE (px)YNet 22.68/80.7813.18/29.9812.49/28.80
ImpromptuADE / FDE (m)Impromptu VLA 1.60/4.281.42/3.961.34/3.70
Alpamayo-R1ADE / FDE (m)Cosmos-Reason 2.86/7.422.99/8.542.62/7.53

跨四个差异极大的基准(闭环仿真、轨迹预测、长尾推理)一致 SOTA,说明这种"双解码器监督隐空间"的范式是可迁移的方法论,而非针对某榜调参。

走向真车部署:0.24s MLP 变体

为了真车实时性,作者在 Qwen3-VL 骨干上挂一个轻量 MLP 头,让模型单次前向就出轨迹,但训练时仍用多模态隐监督

  • 延迟 0.24s(4.16 Hz),满足真车实时控制
  • PDMS 86.83,仅比完整版掉 2 分
  • 仅为 AR 延迟的 5.4%

这个”训练时重监督、推理时轻量化“的思路极具工程价值——把昂贵的隐式推理留在训练阶段"教"模型,部署时用一个蒸馏出来的快头承接,是落地自动驾驶的标准范式。

双模态可解释性:语言 + 视觉

值得一提的是,OneVL 提供了双通路的人类可解释输出。语言辅助解码器能从压缩的隐变量中还原高质量的 CoT 文本(场景解读、物体分析、驾驶决策三段式),而视觉辅助解码器能生成空间连贯的未来帧预览(+0.5s、+1.0s)。这意味着即使推理时把辅助解码器旁路了,需要做事故复盘、合规审计、反事实分析时,仍可临时挂回来生成"我当时怎么想的、我预判下一秒会看到什么”——这种事后可解释性对自动驾驶的安全审计与监管合规至关重要,是单纯黑盒端到端模型无法提供的。


⚔️ 与前作 LaST-VLA 的进化

OneVL 是 LaST-VLA 的工程化升级,两者构成小米 VLA 推理的"组合拳":

维度LaST-VLA(前作)OneVL(本作)
核心命题隐式 CoT 必须物理接地接地后能超越显式 CoT
监督信号Cosmos + VGGT 特征蒸馏语言解码器 + 视觉世界模型解码器
隐空间结构动力学流 + 几何流(48 token)35 视觉 + 20 语言(55 token)
推理方式自回归生成隐 token一步 prefill 并行(关键突破)
骨干InternVL3 2B/8BQwen3-VL 4B
延迟优势相对显式 CoT 有限比显式 CoT 快 32%
最大贡献证道"隐式要接地"首个超越显式的隐式方法

从 LaST-VLA 到 OneVL,最关键的跃迁是从"自回归生成隐 token"到"一步 prefill 填充隐 token"——这把隐式 CoT 的延迟优势彻底释放出来,做到"显式 CoT 的精度 + 答案级延迟"。可以说 LaST-VLA 解决了"隐式推理能不能 work",OneVL 解决了"能不能又快又 work"。


📝 个人思考

OneVL 最让我眼前一亮的是它对"隐式 CoT 为什么一直输给显式“这个老问题的犀利诊断。社区此前默认"压缩必然丢信息”,所以隐式天然该输。但 OneVL 把锅甩给了压缩目标——纯语言隐变量压缩的只是符号抽象,不是因果动力学。一旦把世界模型拉进来当监督,隐空间就被钉在了真实物理上,反而比逐 token 文字推理更可泛化。这个洞察的分量很重:它意味着"推理"不一定非要用语言承载,视觉未来预测本身就是一种更纯粹的因果推理——这对所有做 latent reasoning 的人都是启发。

第二个启发是三阶段训练的不可或缺。消融里"去掉三阶段直接端到端"暴跌 21 分,这个数字几乎是在咆哮:多目标优化不能硬联合。先让主模型建立稳定的隐表征、再让辅助解码器去对齐、最后才联合精修——这种"热身-对齐-协同"的节奏,本质上是给梯度流一个有序的引导路径,避免三个目标互相打架。这套范式对所有"大模型 + 多辅助头"的架构都有借鉴价值,特别是机器人 VLA、世界模型联合训练等场景。

第三点是关于信息瓶颈的工程美学。35 + 20 = 55 个隐 token,这个数字看似随意,实则是容量与泛化的精妙平衡——太大模型会死记训练分布,太小又信息过载。配合"双解码器从两侧收紧瓶颈",OneVL 把隐空间逼成了一个只存因果骨架的极致压缩。这让我联想到信息论里的最小充分统计量——最优表征永远是"刚好够用"的那个,而不是最大的那个。

最后一点是关于真车部署的务实姿态。0.24s 的 MLP 变体让我看到小米是真的想上车,而不是刷榜。训练时用重监督喂饱表征、推理时用轻量头承接——这种"训重推轻"的蒸馏式部署范式,正是端到端自动驾驶从论文走向产品的最后一公里。结合小米 SU7 / YU7 的量产车数据闭环,OneVL 这种低延迟、可解释(语言+视觉双通路)的 VLA,离真车落地的距离已经非常近了。

总体而言,OneVL + LaST-VLA 这对组合拳,代表了小米在自动驾驶 VLA 推理范式上的体系化押注隐式、接地、一步推理。当行业还在争论"要不要 CoT"时,小米已经用"世界模型监督的隐式 CoT“交出了一份兼顾精度、延迟、可解释性的答卷。这条路线能否成为端到端自动驾驶的事实标准,值得持续关注。


🔗 延伸阅读

工作团队与 OneVL 的关系
LaST-VLA小米 / 同济前作,首次提出物理接地的隐式 CoT;OneVL 工程化为一步 prefill
COCONUTMeta经典隐式 CoT,OneVL 的对照基线(被超越)
CODI / SIM-CoT其他隐式 CoT 方法,均打不过 AR 基线
AdaThinkDrive8B 自适应文本 CoT,OneVL 用 4B 反超
DriveVLA-W0中科院 × 蔚来同样用世界模型监督,但走显式图像生成路线
Qwen3-VL阿里OneVL 的 VLM 骨干
NAVSIM / ROADWork / Impromptu / Alpamayo-R1OneVL 刷新的四大基准

📖 这是论文精读系列的第 19 篇。当隐式 CoT 终于在精度上反超显式,自动驾驶的"实时推理"或许找到了真正的解法。你认为一步 prefill 的隐式推理会成为车端 VLA 的标配吗?欢迎留言讨论。