thinkism.ai

今日 5 篇 arXiv 速读:Oneira 闭环视频世界模型、SearchWorld UAV 空间价值想象、SufficientPlan 世界模型规划预算、Trust-Calibrated VLA MERL、Push the Limit 7 m/s 人形冲刺 五线并进

2026-10-14 · AI / 每日 arXiv / 视频世界模型 · UAV · VLA · Safe RL · 自动驾驶 · 阅读时间 ≈ 14 分钟

2026 年 10 月 1 日到 10 月 12 日这一批 arXiv 论文,把我过去半年持续追踪的「world model online task recognition / control-based generation / safe VLA / safe RL / agentic control」五个方向再推一次,五条线的共同潜台词是把埋藏在『开环生成 / 反应式搜索 / likelihood-only VLA / flat-history humanoid / task-agnostic future 世界模型』里的隐式策略上提到一组可观察、可干预、可验证的显式锚点。5 篇分别是:Xindi Yang、Baolu Li、Liam Lee、Zhenfei Yin 等人(Monash / S-Lab / NUS / 腾讯混元联合)的 Oneira(开环→闭环视频世界模型、coding agent 维护 persistent state, arXiv:2610.01614, 2026-10-01)、Yatai Ji、Zhengqiu Zhu、Yong Zhao 等人(NUDT)的 SearchWorld(UAV 任务搜索的 spatial value-grounded 想象, arXiv:2610.09335, 2026-10-07)、Changbai Li、Sirui Li、Yichen Yang 等人(新浪科技 / 复旦的合作)的 SufficientPlan(世界模型规划预算 + 静态上下文重用, arXiv:2610.08350, 2026-10-06)、Wenzhan Li、Yiran Qin、Heng Zhou、Huirui Wang、Yulan Guo、Ruimao Zhang 等人(西电 / 中大 / 哈工大深圳联合)的 MERL / Trust-Calibrated VLA Policy Post-Training with Evolving Imagination(在线演化训练下的 trust calibration, arXiv:2610.16517, 2026-10-12)、Huaxing Huang、Ruidong Li、Jinchao Han、Ziyang Dong、Wenhao Cui 等人(Unitree Robotics / 浙大联合)的 Push the Limit: Learning High-Speed Sprinting and Aggressive Cornering on a Full-Scale Humanoid(7 m/s 人形冲刺 + 25° 倾身转弯, arXiv:2610.14840, 2026-10-10, CoRL 2026 accepted)。

把这 5 篇的方法骨架画在同一张二维图上,会发现这一周 world model + safe RL + agentic control 的统一动作是把过去一周在『开环视频生成 → 反应式策略 → 末端 likelihood 优化 → flat-history RL → task-agnostic future 表征』上的隐式策略,分别上提到『闭环 persistent state → 可规划 spatial value → 反照 trust 校准 → 结构化 temporal attention → 可塑形 planning-shaped future』的显式锚点。Oneira 把『生成 vs 交互』拉到显式 world state table;SearchWorld 把『反应 vs 规划』拉到显式 BEV 空间价值层;SufficientPlan 把『大型预算 vs 够用预算』拉到显式 PSBC 证书;MERL 把『想象是否有用』拉到显式 trust 信号;Push the Limit 把『振荡 proprio 反馈 vs 高速稳定反馈』拉到显式 causal MHA + 单一技能判别器。下面这张二维定位图把它们摆到「显式锚类型 × 工程投入」两个轴上。

显式锚类型 (可验证 ↑) persistent · spatial · budget · trust · 结构化 → 工程可干预度 工程投入 (实战级 ↑) 生成 / 仿真 真机 + 大规模数据 Oneira persistent state table coding agent 管理 open-world interaction SearchWorld BEV 空间价值层 想象 rollout 规划 UAV-ON 23.8% SufficientPlan PSBC 预算证书 SCR 静态上下文重用 不改动 pretrained WM MERL chunk-level trust 在线演化 simulator LIBERO-PRO 79.7% Push the Limit causal MHA + heading reward skill-conditioned MAMP 7 m/s sprint + 25° lean 可验证 + 实战 = 这一周共同方向
图 1 · 5 篇论文在「显式锚类型 × 工程投入」上的二维定位。绿色=Oneira(persistent state table)、蓝色=SearchWorld(BEV 空间价值层)、橙色=SufficientPlan(PSBC 预算证书 + SCR 重用)、紫色=MERL(trust 校准)、红色=Push the Limit(causal MHA + skill-conditioned MAMP)。虚线斜对角再次指向「把隐式策略上提为显式锚」这一周内共同动作。

一、Oneira(Xindi Yang 等,arXiv:2610.01614):把「开环视频世界模型」拉到「可显式 persistent state 的 Coding Agent 闭环」

问题:当下生成式视频世界模型(Genie 系列、Wan2.x、COS-Dynamics 等)能「合成无限多样」的环境,但合成跟交互是两件事——当 agent 探索到一个新生成的物体时,这个物体是否进入可作用空间?agent 触发某个动作后,这个动作的后果是否会持久影响后续生成?「看上去就合实际作用得到」是两件事。

关键 idea:Oneira:把这两个差距显式定义为两个新要求——Open-World Interactivity(新生成的物体必须进入可作用空间)和 Persistent State(交互后果必须持久化进世界状态)。具体做法是用一个 coding agent 显式维护一张 extensible world state table:agent 读状态表 → 实体定位 → 规划交互 → 把结果写回表 → 当遇到新物体时自动并入这张表。状态表被渲染成一段粗略的conditioning video,送进视频生成器,后者填充颜色、动作、纹理等细节。

方法骨架:c(state, o_t, action) → read world state table → plan → write outcome → render conditioning video → video generator fills in details。整条链的关键是这张状态表是文本/符号层面的——可被 LLM agent 直接读写,不是 latent vector。这意味着这套系统天然能跟 VLM/Agentic pipeline 拼起来。

数据 / 数字:实验里 Oneira 展示了直接一致地与新生成物体交互+ 在长视野下保留先前交互后果这两个能力在多个不同任务上稳定通过。注意:目前没有量化数字(具体数据这是定性结果),原因在于这是一个偏 agentic 评估——「跑多少行强调每次状态变更后能否被后续观察记住」比「PSNR/FVD」更能体现设计意图。

工程判断:

二、SearchWorld(Yatai Ji 等,arXiv:2610.09335):把「反应式搜索」拉到「显式 BEV 空间价值层的想象式规划」

问题:UAV 在城市环境里找目标(无人机视角搜索)是 perception 面对偏决策的任务——视觉大、画面稠、动态范围广、3D 几何稠——现有方法大多靠显式 BEV 地图 + memory 记忆,但都是反应式的:在「过去的观测」上做推理,不在「未来的推演」上做决策。生图式世界模型能补这个缺口但推理延迟高,看不见工程上不划算。latent world model 又无法做空间显式。

关键 idea:SearchWorld:一个 recurrent state-space world model,显式维护 BEV 探索记忆 + 障碍物记忆,再 decode 一个 task-aware spatial value layer 直接作为价值引导。一个 cognition-action network 用这个 spatial value prior 跑想象 rollout 来改进策略,不另训标量 critic。训练从 world-model learning → expert imitation → imagination-based exploration refinement 三阶段走。

方法骨架:observation + history → recurrent state-space encoder → BEV exploration memory + obstacle memory → spatial value decoder → imagined rollouts → policy update via spatial-value imitation。整套路径里最关键的是spatial value layer:它是一个 BEV 上的稠密图,值近似代表「这一格未来 agent 在这里的话离 target 有多远 / 有多可行」,是空间显式的,不像标量 critic 那样是 scalar。spatial value prior 在 imagined rollouts 里被采进,作为「规划价值参考」直接驱动 policy。

数据 / 数字:UAV-ON 基准上 SearchWorld 把success rate 从最强基线 19.5% 推到 23.8%,oracle success 升到 35.5%,在 unseen scene 上 success 仍然有 19.9%(与最强 published agent 在 unseen 上一致)。这是少数几篇明说「想象式 world model 在 unseen scene 仍然有泛化」的 paper 之一。

工程判断:

三、SufficientPlan(Changbai Li 等,arXiv:2610.08350):把「世界模型规划预算过大」拉到「显式 PSBC 证书 + SCR 静态重用」

问题:visual world model 用 decision-time action search 时,工程团队普遍习惯把预算(budget)调得偏大,以保证 Full-budget action 的安全。但实际发现够用预算在不同 model-task pair 上差异巨大,且 iterative planner 反复 encode solve-invariant context——这两件事都意味着现有 planning pipeline 40% 以上算力被浪费在重复工作上。

关键 idea:SufficientPlan:一个 deployment-only framework,不修改 pretrained world model,也不改 planner update。它包含两个组件:(1) Paired Sequential Budget Certification(PSBC):用 paired closed-loop evidence 搜索并认证一个 reduced budget,在 predefined Full-performance tolerance 内;(2) Static-Context Reuse(SCR):跨 search iterations 缓存 observation + goal 表示,保留 candidate-dependent 部分。

方法骨架:Full-budget action search 与 reduced-budget action search 在 paired closed-loop 上做对比 → 用 statistical test 验收 candidate 预算;Static-Context Reuse:每次 search iteration 之前,缓存 obs / goal 的 encoded representation,候选 action 仍然是 candidate-dependent。整个框架是 plug-in,任何 pretrained visual world model 都能接进来。

数据 / 数字:跨多个 world-model backbone + visual-control task 上,SufficientPlan显著降低 search budget 和 planning latency,同时保持 competitive control performance。具体数字论文未直接列在 abstract 里(从论文正文来看是「sacrificing < 5% control quality 换取 2-5x budget cut」的 trade-off)。

工程判断:

四、MERL / Trust-Calibrated VLA(Wenzhan Li 等,arXiv:2610.16517):把「想象式 VLA 后训练」拉到「显式 chunk-level trust 校准

问题:VLA 通常靠 imitation learning 预训练,post-deployment 一旦越出 demonstration coverage,RL post-training 就被推上台面。两条现有路线都有点糟糕:model-free refinement 避免 simulator bias 但 interaction-intensive;model-based refinement 可以利用想象但 simulator adapt 时 还会出于 unreliable imagination。两边都走极端——「想能跑」、「能跑」。

关键 idea:MERL / Model-Evolving Reinforcement Learning:把 policy optimization 与一个 online-updated simulator(world model + reward proxy head)绑定。两条信任轴:(1)across stages:simulator reliability 控 imagined-data ratio 和 rollout horizon;(2)within rollouts:chunk-level trust 控 replay selection 和 optimization weight。recursive imagination 无需精确 ground continuation 时,residual predictor 在没有 future ground-truth 查询中估计 trust。

方法骨架:pretrained VLA → imagination rollout via online-updated WM + reward proxy → chunk-level trust estimation → replay selection + optimization weight calibration → policy gradient on VLA.是闭环结构:simulator 越界、trust 越界、policy 越界,三者同步进入 design stage。

数据 / 数字:On perturbed LIBERO-PRO tasks:average success 79.7%,high-threshold learning speed 比 matched model-free control 高 10.9%,在三个 training seed 上 outperform external baselines 同 protocol。Fixed-data adaptation from 50 demonstrations / task → 80.0% average success on 2 physical-robot tasks。这是少数几个明说「现实 50 demos 就能再次走 80% success」的 VLA 安全 RL post-training 之一。

工程判断:

五、Push the Limit(Huaxing Huang 等,arXiv:2610.14840,CoRL 2026):把「flat-history humanoid」拉到「causal MHA + heading-direction reward + skill-conditioned MAMP」

问题:现有 bipedal humanoid 用 imitation + RL 跟随参考 motion 在低速场景里跑得不错,可一旦上 7 m/s 高速 + 25° trunk lean 的偏转,就被两个机制卡死:(1)周期性的足端碰撞在 proprio 反馈里产生强高频 yaw-rate 振荡,flat-MLP 完全没法建模这种高频结构;(2>传统的 yaw-rate tracking reward 反而与 natural gait oscillation 反向打架。单一 style prior 也分不清是哪种技能,导致低速技能 fidelity 被牺牲。

关键 idea:Push the Limit:三个独立 mechanism 联合解套:(1)causal multi-head attention (MHA):抛弃 flat-history MLP,直接用 causal MHA 显式建模高 proprio 反馈;(2)heading-direction reward:不盯 yaw-rate,只盯 low-frequency velocity direction,让高速偏转不再与 gait 振荡打架;(3)skill-conditioned MAMP discriminator:不是单一 style prior,而是按 commanded skill 分别判别 style reward,避免不同技能之间互相污染。三项 ablation 都做了实验验证。

方法骨架:reference motion + 高 proprio 反馈历史 → causal MHA → heading-direction reward 取代 yaw-rate tracking → skill-conditioned MAMP 多个 style prior。在 Unitree G1 + 仿真平台上实机部署跑通。

数据 / 数字:全尺寸 bipedal humanoid 实战 >7 m/s sprint,高速偏转 25° trunk lean。三项 ablation 都给出对照实验:换回 flat-history MLP → top speed 被卡住;换回 yaw-rate tracking → 高速偏转失败;单个 discriminator → in-place turning 退化成 quasi-static stance。这是少数几个「三项机制缺一项就崩」同时取证的样本。

工程判断:

六、五线共振:把「隐式策略」上提到「显式锚」是这一周 world model + safe RL 的统一动作

把这 5 篇摆在一起,会发现一个让人意外的统一潜台词:

五个完全不同的问题——闭环视频世界模型、UAV 任务搜索、世界模型规划预算、VLA 安全 RL 后训练、人形机器人高速偏转——答案惊人地一致:把过去藏在 flat-history MLP / latent 想象 / Full-budget search / likelihood-only loss / single style prior 里的隐式策略,上提到一个可观察、可干预、可验证的显式锚点。这是 2026 下半年 world model + safe RL 研究的统一模式——具体哪种锚(persistent state table / spatial value layer / PSBC 证书 / chunk-level trust / causal MHA)不重要,上提 这个动作本身是关键。

对一个正在搭具身 / 视频生成 / agentic 系统的工程师来说,这一观察的实操含义是:每次遇到「低层 X 不够好」,先问一句「有没有一个更可观察的显式锚可以让 X 变好」——大概率有,而且大多数情况下不需要重新训练整个 backbone。

七、判断:今日 5 篇哪一篇最值得先抄?

如果只有时间抄一篇,我推荐 MERL。理由:

  1. 落地阻力最低。它是 plug-in RL framework,不一定要重训 VLA 权重,只需要加 trust estimator 和 reward proxy head——对任何已经在跑 VLA 的团队来说,接入成本就是「在 decode loop 里加一个 trust 校准器」。
  2. 效果最直接。LIBERO-PRO 79.7% success,+high-threshold learning speed 10.9%;50 demos → 80.0% success on 2 physical-robot tasks——这是罕见的「指标全面改善」组合。
  3. 可推广性最强。「across stages + within rollouts」的 trust 二分法可以套到任何 frozen generative model 上——LLM agent、code LLM、navigation policy——只要它输出 chunk + trust,就能套 trust calibration。

如果你在搭机器人 / 视频生成系统:Oneira 是 video world model + agentic 任务的范式,适合 simulation-as-a-service、tutorial 生成、可控 demo 视频;SearchWorld 是 UAV × 显式想象的 world model,适合室外机器人 / 大范围搜索;SufficientPlan 是视觉世界模型部署的 plug-in,适合任何 pretrained WM / 决策时搜索部署;Push the Limit 是 humanoid 高速偏转三项补套,适合 4 m/s 以上偏转场景。


参考资料

  1. Xindi Yang, Baolu Li, Liam Lee, Zhenfei Yin, Songxin Zhang, Zhuoyang Song, Xu Jia, Jianfei Cai, Tien-Tsin Wong, Bingyi Jing, Mengyue Yang. Oneira: From Open-Ended Generation to Open-World Interaction in Video World Models. arXiv:2610.01614, 2026-10-01. https://arxiv.org/abs/2610.01614 · 项目页:https://madaoer.github.io/projects/oneira
  2. Yatai Ji, Zhengqiu Zhu, Yong Zhao, Yue Hu, Fanglong Yao, Chen Gao, Pengfei Zhu, Quanjun Yin. SearchWorld: Spatial Value-Grounded Imagination for UAV Object Search via World Models. arXiv:2610.09335, 2026-10-07. https://arxiv.org/abs/2610.09335
  3. Changbai Li, Sirui Li, Yichen Yang, Tongfei Chen, Zichao Feng, Shuwei Shao, Huobin Tan. How Much Planning Is Enough? Reducing Search and Computation in World-Model Planning. arXiv:2610.08350, 2026-10-06. https://arxiv.org/abs/2610.08350
  4. Wenzhan Li, Yiran Qin, Heng Zhou, Huirui Wang, Yulan Guo, Ruimao Zhang. Trust-Calibrated VLA Policy Post-Training with Evolving Imagination. arXiv:2610.16517, 2026-10-12. https://arxiv.org/abs/2610.16517
  5. Huaxing Huang, Ruidong Li, Jinchao Han, Ziyang Dong, Wenhao Cui. Push the Limit: Learning High-Speed Sprinting and Aggressive Cornering on a Full-Scale Humanoid. arXiv:2610.14840, 2026-10-10. https://arxiv.org/abs/2610.14840 · 视频:https://youtu.be/YWf62XkiApc · CoRL 2026 accepted
  6. 本周内同类参考:上一日 RoboJEPA / WorldGuide / GenCine / VICS-G / FAITH 5 线、DeepJEPA / JEPA-TTT / Self-Compensation VLA / CAG / Structuring MoE 5 线、机器人学会「预演未来」:拆解 Pelican-Sim 1.0 的 28 维动作世界模型、AI 时代如何做具身智能。

下一篇预告:本周 Oneira / SearchWorld / SufficientPlan / MERL / Push the Limit 这一批「把隐式策略上提为显式锚」的动作会继续出现,推下一周具身 + agentic 系统中卡住的内容是显式锚类型与骨干网络能力之间的耦合权重——以及在「不同 anchor 之间能否共享 backbone」这件事上,业界仍未出现可共识的结论。