thinkism.ai

今日 5 篇 arXiv 速读:WAM、Agent、VLA、Tactile、Physics 五线同时推进

2026-10-05 · AI / 每日 arXiv / WAM · Agent · VLA · Tactile · Physics · 阅读时间 ≈ 18 分钟

2026 年 10 月 5 日,arXiv 上同一天出现 5 篇代表性新论文,刚好覆盖 WAM、Agentic Control、VLA、Tactile、Physics Learning 五个我持续追踪的方向。这是少见的一次"五线同发"。这篇综述把它们拆成工程视角的判断——保留原作者署名,中文逻辑重构,只补"它们各自值不值得抄"的工程判断。5 篇分别是:Tingting Du 等人的 XGenAct(WAM,arXiv:2610.03516)、Kailin Wang 等人的 RegenHarness(Agentic Control,arXiv:2609.27612)、Yukiya Horiba 等人的 Detect & Suppress(VLA,arXiv:2610.03498)、Enyi Wang 等人的 TacDyn-WAM(Tactile,arXiv:2610.00638)、Kaiqi Wang 等人的 EVEWorld(Physics,arXiv:2610.03374)。

如果把它们的方法骨架画在同一个图上,会发现一个非常统一的潜台词:"把之前在像素空间 / 模型权重层 / 隐式空间做监督,上提到一个更结构化、可监督、可验证的目标空间"。XGenAct 把多模态投到统一视频空间;RegenHarness 把安全从权重层上提到系统 commit gate;Detect & Suppress 用 SAE 把防御上提到特征空间;TacDyn-WAM 把触觉预测上提到 TacRep 动态目标空间;EVEWorld 把物理一致性上提到过程级实例监督。

这种"目标空间升级"在 2025-2026 这一年已经变成了一种研究模式——尤其在具身智能领域。下面逐篇拆。

一、XGenAct(Tingting Du 等,arXiv:2610.03516):把多模态 WAM 投到统一视频空间

问题:WAM(World Action Model)已经成为机器人操控主流——预测未来 RGB 与动作。但 RGB + 动作预测不足以捕捉机器人操控所需的空间理解(深度、法线、分割)。现有做法用专属 head 补少数空间任务,监督范围与架构碎片化。

关键 idea:把所有模态(RGB、动作、metric depth、surface normals、functional role segmentation)通过确定性编解码器统一表示为 RGB 视频,单个视频扩散 Transformer + 单一目标联合训练。

方法骨架:训练时每步采样一种感知 / 动作任务;模态专属头全部消失;推理时直接采样未来 RGB 帧并 codec 解码为各模态。

数据:RLBench 训练集 + 5 任务外部对比评测。

数字:RLBench 5-task external 52% vs 最强基线 26%;深度 / 分割预测 > RGB-first + frozen perception expert 路线。

工程判断:

二、RegenHarness(Kailin Wang 等,arXiv:2609.27612):把安全从权重层上提到系统 commit gate

问题:长期机器人执行需要清晰区分:模型提议 vs 控制器终止 vs 已验证任务完成。已有系统多依赖最终距离或粗粒度规则判定完成,忽略执行历史与证据溯源。

关键 idea:Evidence-gated Recursive Self-Improvement(RSI)协议——4 个角色隔离 context(规划 / 监督 / 验证 / 恢复)+ 身份+版本绑定 commit gate + 版本化内存;只改 harness 配置,不修改模型权重。

方法骨架:双 loop(model loop 提议 + agent loop 调度 / 观测 / 验证 / 提交 / 恢复);resource leases + recovery budgets + duplicate-dispatch 控制;commit 决策 = commit(state, evidence) → accept | adapt | retry | escalate。

数据:真实四足机器人部署——语音触发仓库巡视 + 全景巡视 + 视觉分析 + 消息送达 + 返回 + 语音汇报。

数字:任务链路完整跑通;独立回路演示"完成度依赖执行历史而非终点距离"。论文无单一量化数字,偏定性。

工程判断:

三、Detect & Suppress(Yukiya Horiba 等,arXiv:2610.03498):把防御上提到 SAE 特征空间

问题:VLA(Vision-Language-Action)模型可通过视觉观测被对抗 patch 操纵,导致机器人控制失败。但内部失效机制是黑箱,难以做针对性干预。重训练 / 微调成本高;ad-hoc 输入过滤不一定保住原始策略性能。

关键 idea:稀疏自编码器(SAE)+ 线性探针 + 条件干预——定位 patch 相关特征 → 探针检测攻击 → 仅在攻击时抑制该特征;不修改 VLA 权重。

方法骨架:在 VLA 内部激活上训练 SAE → 训练线性探针(攻击检测) → 推理阶段条件抑制。VLA 权重全程 frozen。

数据:LIBERO-10 操控任务 + 持续 / 间歇对抗 patch 攻击场景。

数字:条件干预下间歇攻击成功率显著提升;持续抑制则策略性能严重退化(论文明确指出这一对比)。

工程判断:

四、TacDyn-WAM(Enyi Wang 等,arXiv:2610.00638):把触觉预测上提到 TacRep 动态目标空间

问题:WAM 让机器人在预测的未来上做动作决策。触觉版 WAM 通常沿用视频生成思路重建未来触觉观测,但部署中接触像素对位姿 / 力变化极度敏感——同一接触可有不同像素,重建不稳定。

关键 idea:TacRep(dynamics-aware 隐式目标空间)+ 异构专家——不再重建触觉像素,而是预测 dynamics-aware TacRep;视觉与触觉专家在不同目标空间预测,joint attention 共享未来。

方法骨架:TacRep 通过 masked spatio-temporal prediction 训练 + relational structure distillation 正则化;Visual Expert 预测未来视觉表征;Implicit Tactile Dynamics Expert 单次 forward 预测多 horizon 触觉表征及变化量;Read-only Tactile Memory 供应当前触觉状态。

数据:UniVTAC 演示集 + 5 个真实机器人接触密集任务。

数字:UniVTAC 81.5%;5 真实任务 71.0%;预训练后 85.0%。消融证实触觉路径 / TacRep 静态替代均掉点。

工程判断:

五、EVEWorld(Kaiqi Wang 等,arXiv:2610.03374):把物理一致性上提到过程级实例监督

问题:具身世界模型是可扩展机器人仿真器,但当前模型偏视觉保真、缺乏过程级物理监督,表现为Model Laziness——外观像样,物理一致性差。

关键 idea:EVEWorld = IGR(实例一致性恢复)+ TIA(跨帧实例对齐)+ MLR 指标。把物理监督拆成实例级过程监督并量化。

方法骨架:在扩散世界模型上挂 IGR + TIA 两个分支;MLR 量化生成轨迹中实例一致性持续违反率。

数据:DreamGenBench + EWMBench + PBench + WorldArena 2.0 Track 1 排行榜。

数字:MLR 相对 GigaWorld-0 降低 87.5%;WorldArena 2.0 Track 1:JEPA Similarity 第 6、总榜第 17。

工程判断:

六、五线共振:目标空间升级是这个时代的统一研究模式

把这 5 篇摆在一起,会发现一个让人意外的事实:

五个完全不同的问题,答案惊人地一致:"把监督 / 防御 / 推理从底层上提到一个更结构化的目标空间"。这是具身智能在 2025-2026 这一年的统一研究模式——具体哪条空间(WAM 视频空间 / 系统 commit / SAE 特征 / TacRep / 过程级实例)不重要,上提 这个动作本身是关键。

对一个正在搭具身系统的工程师来说,这一观察的实操含义是:每遇到一个"低层 X 表现不够好"的问题,先问一句"有没有一个更结构化的目标空间能让 X 变好"——大概率有。

七、我的判断:今日 5 篇哪一篇最值得先抄?

如果只有时间抄一篇,我推荐 TacDyn-WAM。理由:

  1. 范式最干净。"重建像素 → 预测 dynamics-aware target"是一个单一改动,且消融数据硬验证。
  2. 数据门槛合理。UniVTAC + 5 真实任务的设置意味着工程团队可以在几周内复现并改进。
  3. 下游收益最直接。触觉表征稳定 → 接触密集任务成功率提升 → 工业价值清晰。

如果你在做 VLA 或 Agent 系统,Detect & Suppress 是性价比最高的"机制干预"路线;如果你在做 WAM backbone,XGenAct 的 codec 思路可以直接接上;RegenHarness 和 EVEWorld 偏体系级改造,适合季度级投入。

参考

下一篇预告:把这 5 篇按"目标空间升级"的统一视角写成对照表,并把所有可迁移的工程模板汇总成一份索引——做"具身智能工程配方手册 v2026.Q4"。