今日 6 篇 arXiv 速读:ID-WM 把「可达性」和「控制」拆开后比单层世界模型 MPC 强 135%、VLA 策略在空指令下 6 个 checkpoint 全部动了、ROOF 让倒地人形在只能抬起的板子下恢复率从 18.9% 涨到 88.5%、Wizard 用 750 场景 178 角色做可实时操控的视频世界、chance-constrained 把碰撞违规率压到固定余量做法的一半、CGAP 用 PDDL 让工具调用比试错式 agent 高 28.9 分
上一篇(11-02)的收尾我留了一个问题:「外部参照系从哪来」。那六篇的答案是——把标准挂到一个会自己出错、但你能看见它出错的地方:因果结构、程序化仿真、引擎不变量、更强的 verifier、执行后的结算、跨组织累积的证据。我当时的判断是:这些「真实」本身都是人造的;下一层要处理的是当你的尺子、规范、标注全都是一个团队自己定的时候,谁给你一个外部的参照系。
今天这六篇换了个角度回答同一件事。如果说你已经解决了「怎么判断做对了没有」,那还剩一半问题没答:「它到底能不能做?该不该做?准备好了没有?」这六个问题的答案,今天六篇全都做成了同一件事 —— 把「边界」从隐式在策略里的一个玄学,变成一层可以单独测、单独审计的显式判据:
- ID-WM:把状态空间的可达性和局部控制解耦 —— 高层只宣布一个局部物理上可行的转移,低层世界模型退化成逆动力学求解器;
- Wizard:把游戏状态和视觉生成分离 —— 生成器只管渲染,逻辑状态由 agentic 框架显式维护和更新;
- VLA Start Suppression:反过来测了一件事 —— 这层压根不存在。空指令下 6 个 checkpoint 每一个 episode 都动了机器人;
- ROOF:用机器人-障碍物的几何重叠量当判据 —— 奖励「重叠量在减少」,但不规定往哪走;
- Chance-Constrained Safe RL:把碰撞风险从「拍脑袋留多少余量」变成一个显式的风险预算;
- CGAP:把工具目录编译成 PDDL 模型 —— 「这个调用序列可不可执行」交给经典规划器判定,不再让 LLM 试错。
下面这张图把六篇放到两轴上。横轴是判据的显式化程度(从左到右:判据藏在策略里 → 判据是一层独立可审计的东西);纵轴是工程投入(从下到上:几乎零成本 → 要建一整套基础设施)。
这张图最反直觉的地方:显式化程度和工程投入不成正比。右下角最显式(VLA 的 gate)恰恰最便宜 —— 它只需要两次前向;左上角最贵的(ROOF)判据明明很明确,却要付仿真、几何、以及 150 次真机尝试。所以真正的成本不在「显式」本身,而在你手里有没有一个能算出这个判据的来源:几何、误差分布、工具依赖图、骨架与几何代理。这条线索是今天这六篇最值得带走的东西。
一、ID-WM:把「可达性」和「怎么去」拆成两层(Zhou、Wu、Cui、Ballas、Assran、Pinto、LeCun,arXiv:2610.42146,cs.RO / cs.AI,2026-10-30)
问题 用世界模型做具身智能的测试时自适应,好处是泛化比直接学策略强;但长时程任务有两个硬伤:误差累积和搜索复杂度。已有的分层做法通常是两种:固定的 macro-action,或者学出来的 latent skill。这两种都被论文点为同一个毛病 —— 表征僵硬,而且细粒度控制差。macro-action 是人写死的粒度,latent skill 是训练分布里出现过的行为模式,一旦任务需要「训练时没见过的动作组合」,它就接不住。
关键 idea / 方法骨架 ID-WM(Implicit Dynamics World Models)的核心动作是把两件事彻底解耦:状态空间的可达性归高层管,局部控制归低层管。
具体说,高层模型在状态流形上采样可行的转移,产出的是「从状态 A 转到状态 B」这种目标,不是动作序列;低层世界模型则退化成一个逆动力学求解器 —— 拿到高层给的「A → B」这个转移,反解出一串精确动作把它落地。这两个模块的分工带来一个很实际的好处:规划器在找可达子目标时,不再被低层执行细节绑住。
论文里最关键的一句设计判断是:优先考虑局部物理可行性,而不是全局行为模式。也就是说,高层模型学的是「这一步在物理上站得住吗」,而不是「上一步我是这么做的」。因为约束是局部的、几何性的,而不是全局的行为模仿,短片段就可以被拼成训练时没见过的长时程计划 —— 这是它能超出训练行为模式的根本原因。
数据 / 数字 在三个导航与操作套件上验证。相对当前最强的 policy 与 diffusion 类规划器,整体取得 38.5% 的提升。更有意思的是第二个数字:靠分层结构压制误差累积,相对单层世界模型 MPC 提升 135%,而且这个增益主要出现在「复杂、未见过的配置」下的长时程任务上。作者是纽约大学 Courant 研究所、Meta-FAIR 与 AMI Labs 的联合团队(LeCun、Pinto 都在列),项目页在 id-wm.github.io。摘要里没有给出分任务拆分的细分分数,只给了这两个聚合数字 —— 引用时别替它编。
工程判断
- 什么时候抄:你的系统已经有天然的两层结构(高层出目标、低层出动作),而且高层规划器被低层细节拖垮时;或者你的任务已经长到 3 步以上、组合结构是主要误差来源时。这两种情况下「高层只宣布一个局部可行的转移、低层只负责把它变成动作」是一个改动量不大、收益直接的架构手术。
- 什么时候不抄:任务只有一两步、没有组合结构 —— 拆两层是纯开销;或者你手上没有可用的低层世界模型 —— ID-WM 的低层本身就是训练出来的 world model,这是它最大的隐性成本;单层 MPC 在你的任务上已经够用时也别动。另外注意 135% 这个数字是长时程 + 未见配置场景下的,你如果只是想在训练分布内跑得更好,这个收益不会等量出现。
- 一句话启发:把「想去哪」和「怎么去」拆开 —— 高层只负责宣布一个局部物理上站得住的转移,低层只负责把它翻译成动作。
二、Wizard:让视频世界模型可以被实时、精确地操控(Wu、Lin、Jin,arXiv:2610.40339,cs.CV,2026-10-29,腾讯 / 新加坡国立大学 / 南洋理工)
问题 视频世界模型已经能生成越来越逼真、越来越可交互的虚拟环境,agentic 框架又把显式的游戏逻辑和可控的世界表示跟视觉生成拆开,这是「玩家可定制游戏」这条路的前提。但论文指出现有做法三个共同短板:只支持简单游戏设定和预定义的动作模式、对没见过的场景和角色泛化很差、实时交互性有限。
关键 idea / 方法骨架 Wizard 是三件事叠起来。
第一是数据:构造了覆盖 750 个场景、178 个角色的多样数据集,并且刻意把骨架(skeleton)和几何(geometry)信息做成结构化表示放进数据里,而不是只留像素和文本。
第二是条件化方式:这些结构化表示被当作中间代理(intermediate proxies)去条件化视频生成模型。也就是说,控制角色运动不直接用文本或像素指令,而是走骨架加几何这一层;再配一个 adaptive masking 机制,用来提升条件信号和生成出来的视频 rollout 之间的对齐度 —— 因为代理信号覆盖的只是运动的一部分,模型在没被约束的区域容易跑偏。
第三是 agentic 框架:它显式维护并更新游戏状态,玩家可以自由配置虚拟世界、对角色运动做细粒度控制,同时保持视觉质量和玩法一致性。这是整篇论文的骨架:视觉生成只负责「长什么样」,逻辑和状态是另一层、显式的一层。上一期我们讨论过「外部参照系从哪来」,这里的参照系就是显式状态。
数据 / 数字 750 场景 / 178 角色;real-time(实时);zero-shot 泛化到新场景、新角色、新动作。需要诚实说明的一点:摘要没有给出 PSNR 之类的画质指标,也没有给出具体的帧率 / 延迟数字 —— 「real-time」在这个摘要里是一个定性表述,没有可核对的量化。引用时不要给它编一个吞吐数字。数据集构建(750 场景 + 178 角色 + 骨架几何标注)是这篇论文的主要工程量所在,比模型本身更值得记。
工程判断
- 什么时候抄:你要做可交互的可控生成环境 —— 游戏世界、仿真环境的合成数据、给 agent 刷训练环境 —— 而不是只要一条好看的视频;而且你能拿到结构化代理(骨架、几何、位姿、碰撞体),不只是文本提示词。切进去的关键前提是代理信号的存在。
- 什么时候不抄:你只想生成一段视频 —— 那代理表示的采集和标注成本不划算;或者你没有 3D 资产 / 骨架标注,750 场景 178 角色的数据构建是主要门槛,这一关过不了整条路都走不通;再或者你的下游不追求交互性,实时和细粒度控制都成了无用指标。
- 一句话启发:让生成器只管渲染,让状态管逻辑 —— 把不可控的像素生成和必须精确的状态分离,是所有「可交互生成系统」的通用套路,不是这一篇独有的发现。
三、VLA Policies Do Not Know When Not to Act:空指令下 6 个 checkpoint 全部动了(Jang、Choi、Yoon、Kim,arXiv:2610.41609,cs.RO / cs.AI,2026-10-30,韩国 ETRI / 韩国科学技术院)
问题 一句很朴素但很少被正面测过的要求:机器人应该只在收到人的指令、或者自己显式生成并表达了一个意图时才行动。没有指令就动起来,会给人带来风险,也会给环境带来麻烦。这篇论文问的是:最近这些 VLA 策略,在指令缺失或根本无意义的时候,到底会做什么?
关键 idea / 方法骨架 方法上非常克制,反而是这篇最值得学的地方。它用了一个配对协议(paired protocol):固定初始状态,只改指令,指令分五档 —— 空指令、中性指令、胡话指令、不可行指令、错任务指令。然后问三个问题:机器人动不动?动了之后完成的是哪个任务?这条指令到底决定了什么?
这个「只改指令、不改初始状态」的对照设计很关键 —— 很多 VLA 评测做不到这点,因为不同指令下初始状态往往也不一样,一动就分不清是策略行为变了还是场景变了。
然后测了三种抑制启动的手段:(a) 前缀法,在指令前面加一句「如果没给任务就不要动」;(b) 闸门法,当当前指令产生的第一个 action chunk 与空指令产生的那个「几乎相等」时,把机器人 hold 住;(c) 微调法,微调策略让它在非任务输入下保持静止。
数据 / 数字 6 个模型 checkpoint,在 LIBERO-Goal 仿真里测。结果分成三层:
第一层:指令为空时,6 个 checkpoint 的每一个 episode 机器人都动了;其中 5 个还经常完成了指令没有指定的任务。
第二层:在 两个 GR00T checkpoint 上,指令确实决定了「做哪个任务」,但并没有决定「动不动」 —— 面对不可行指令,机器人照样动。
第三层是三种手段的实际效果:前缀法在 6 个 checkpoint 里一个都没拦住(0/6);闸门法在 6 个里的 5 个拦住了;微调法在非任务输入下从未完成任务,但没能可靠地让机器人保持静止,而且对不可行指令仍然抑制失败。也就是说:微调法把「做错事」修好了,却没把「不该动」修好。
工程判断
- 什么时候抄:你要把 VLA 放进有人的环境 —— 家里、商场、任何人类会误判机器人状态的场合。真正该先抄的不是闸门法,而是那个配对协议本身:固定初始状态、只改指令,产出一张「你的策略在没指令时会不会动」的表。它的成本极低,却是你后面所有防护措施的基线 —— 你不先测出这个数,就没法证明闸门法有没有用。
- 什么时候不抄:你的部署是闭门自动化,机器人永远不会收到空指令或胡话指令,那这个风险本来就不存在;再或者你只需要区分「没指令」和「指令不可行」两件事中的一件 —— 闸门法已经够用,前缀法请直接删掉,0/6 的结果说明它不但没用还占 token。
- 一句话启发:在 prompt 里写「没有任务就不要动」是没用的 —— 行为边界必须做在动作输出这一层,不能指望语言指令自洽。这条结论对纯 LLM 系统同样成立,只是载体从 action chunk 换成 tool call。
四、ROOF:倒地人形在头顶障碍物下的恢复(卢亦丹、俞嘉悦、蔡宗睿、孙婧雯、韩金睿、王静、罗平、卢鹏,arXiv:2610.42097,cs.RO,2026-10-30,香港大学 / 中国科学院)
问题 一个倒在地上、头顶有障碍物的人形机器人,面对的是一个耦合的恢复问题:它必须一边腾出空间、一边安排支撑,才能稳稳站起来。先试图站起来、后腾空间,反而会把遮挡弄得更糟。这不是一个「找到一条路径」的问题,而是「顺序错了就死锁」的问题。
关键 idea / 方法骨架 论文给的是接触支撑的几何逃逸引导(contact-supported geometric escape guidance)。它的形状很特别:奖励机器人-障碍物重叠量的「渐进减少」,但不规定逃逸路径。也就是说,奖励函数告诉系统「你离脱困近了多少」,却不告诉你该往哪个方向走。路径留给策略自己学。
这个不规定路径的设计和上一节的 ID-WM 是同一个思路的两次体现 —— 约束型任务里,给判据、不给轨迹。为了避免策略在「减少重叠量」这条窄路上学出奇怪的甩头动作,作者叠加了三个东西:一个学到的 motion prior(动作先验,兜住运动合理性)、姿态相关的支撑代价(posture-dependent support cost,惩罚那些「站不稳」的姿态)、以及关节卡死代价(joint-stall cost,防止某些关节原地抽搐)。三者一起把一条策略塑形成型,让它学会三件事:什么时候去清障碍、怎么建立支撑、什么时候完成起身 —— 而且全程只用本体感觉(proprioception alone),不需要外部视觉或深度。
数据 / 数字 仿真里两组:在「只能被抬起」的板子下面,恢复成功率 88.5%,而没有几何引导时只有 18.9% —— 这就是那个几何判据本身的贡献量,差了将近 4.7 倍。在尺寸、质量、位置都随机化的自由板子下面,成功率 98.6%。
真机数据更有价值:Unitree G1 上 150 次尝试成功 95 次,覆盖 7 个真实障碍场景,包括训练时完全没见过的家具和多物体布置。诚实的读法是:95/150 ≈ 63%,仿真 88.5% 到真机 63% 的落差说明 sim-to-real 仍有明显损耗,这个系统离「可交付」还有距离,不是一个已经解决的产品方案。
工程判断
- 什么时候抄:你做人形 / 移动机器人的跌倒后自救、受限空间作业、先腾空间再作业这类任务。最值得直接抄的是奖励形状:找一个能标量化的「进展量」(这里是重叠量),只奖励它的减少量,把路径完全交给策略。这比手写示教路径的泛化性好得多。
- 什么时候不抄:你的环境拿不到接触几何 —— 重叠量算不出来,整个奖励就塌了;或者你的机器人没有可用的本体感觉闭环(纯视觉的故障恢复是另一个问题,别混着抄);另外注意真机 63% 这个成功率,不要拿它当生产指标。
- 一句话启发:给进展量,不给路径 —— 受限任务里最好用的奖励设计,是告诉系统「你离脱困近了多少」,而不是「你应该怎么动」。
五、Chance-Constrained Safe RL:把碰撞风险从余量常数变成设计参数(Carer、Abdin,arXiv:2610.41639,cs.AI / math.OC,2026-10-30,LGI,已发表于 IAC 2026)
问题 在轨服务的第一步通常是自主检查目标航天器。选一串近距离观察视点是个组合优化问题,同时受三件事约束:覆盖度、燃料(Δv 预算)、安全(keep-out 距离)。麻烦在于 —— 安全余量受导航误差和机动误差影响,实际净空是随机的。所以业界的常规做法「给 keep-out 半径加一个固定余量,然后确定性地规划」,其实是在用一个常数去覆盖一个分布。
关键 idea / 方法骨架 论文把视点选择建模成约束马尔可夫决策过程(CMDP),用 PPO + Lagrangian 松弛求解。结构上是干净的两层:高层规划器在目标周围的观测球面上排视点序列;低层模型用 Clohessy–Wiltshire (CW) 方程评估每一次转移的相对运动。
最值得抄的是它把约束分成两类、用两种机制处理:确定性约束(单脉冲可达性、Δv 上限)直接作用在动作集上 —— 不满足就不生成这个动作,根本不会出现在采样里;随机性约束(实际净空)用 chance constraint表达,而 Lagrangian 乘子由 PID 控制来在训练过程中自适应调节惩罚强度 —— 这比固定 λ 稳定得多。
数据 / 数字 测试对象是中地球轨道的 Galileo 级导航卫星,建模为点云,视点可见性同时考虑视场角(FOV)和视线遮挡。跨不同的风险预算,训练出的策略都能把 keep-out 违规率维持在设定限额之内,同时覆盖度接近最大值、且不超任务 Δv 预算。
对照数字最硬:相比「固定余量 + 确定性规划」这个常规做法,chance-constrained 策略在相当覆盖度下,违规率不到它的一半。还有一个容易被忽略的工程收益:学出来的策略选视点时,不需要像贪心 chance-constrained 规划器那样在每个决策点重跑一遍蒙特卡洛风险估计 —— 训练时的成本被摊平到了推理时。另外这条有 arXiv 页面明确标注的会议归属:77th International Astronautical Congress (IAC), Oct 2026, Antalya (TR), Turkey。
工程判断
- 什么时候抄:你的系统里误差是随机的、但你能给出一个可接受的风险预算 —— 避障、keep-out、仓位上限、剂量上限都算;而且你能把确定性部分(能力、硬可达性)直接从动作集里剔掉,这一步是这个架构能成立的骨架。风险预算一旦能写进接口,你的重标定成本就从「每个 case 重调一次」变成「改一个数」。
- 什么时候不抄:你的误差模型不可信 —— 没有标定过的误差分布,chance constraint 只是把不确定性藏进一个假精确的数字,比固定余量更危险,因为大家会误以为它算过;或者你的场景里安全是硬约束(碰一下就是事故),概率化没有意义,别把「0.1% 概率撞上」写成「可以接受」。
- 一句话启发:把碰撞风险从余量常数变成设计参数 —— 当你的安全边界被人拍脑袋定成「留 10cm」,先问一句:导航误差的分布是什么?然后把风险预算写进接口。
六、CGAP:把工具目录编译成 PDDL,让「可执行性」由规划器判定(Shrestha、Yeoh、Zhang、Vorobeychik,arXiv:2610.41040,cs.AI / cs.CL,2026-10-29,圣路易斯华盛顿大学)
问题 LLM agent 通过工具、数据源和其它 agent 来服务自然语言请求,而连简单请求都要好几次互相依赖的调用。通常的做法是让 LLM 靠试错去挑这些调用 —— 论文的措辞是:没有任何可执行计划的保证。这是一个纯工程问题,但失败起来非常有代表性:顺序错了、参数填错了、某个中间结果没接上,整条链就断在中间,而且断得毫无提示。
关键 idea / 方法骨架 CGAP 的思路是不让 LLM 猜调用顺序,而是让它分别推理两件事:这个请求需要什么、这些工具能提供什么。三段式:
(1) 确定性编译:把工具目录确定性地编译成一个 PDDL 模型。注意「确定性」三个字 —— 这一步没有 LLM 参与,工具的依赖关系是人写进 schema 里的,不是模型猜的。
(2) 经典规划:用 LLM 把请求转成目标(goals),然后用经典规划器求解这个 PDDL 模型。可执行性由规划器判定,不由 LLM 的自信程度判定。
(3) 抽象与执行:这里有个设计很讲究 —— 因为工具输出事先未知,这个 PDDL 模型是抽象的:它只跟踪「哪些输入是可用的」,不跟踪它们的值。执行阶段由 LLM 补上抽象计划里缺的、跟具体实体相关的调用,而确定性检查会拒绝任何破坏计划的调用。
还有两条约束值得单独记:每一个参数都必须来自一个有出处的来源(一段对话、或者之前某次工具响应);每一个被要求的结果,只有在 LLM verifier 对着请求核对过之后才算「已交付」。这两条把「LLM 编了个参数」和「LLM 说完成了」这两类最常见的幻觉都变成了可拦截事件。
数据 / 数字 在 ToolSandbox、ComplexFuncBench、BFCL multi-turn、τ²-bench retail 四个 benchmark 上,用三个不同的 LLM,CGAP 相对标准 tool-calling agent 最高超出 28.9 分。论文 25 页 3 图。这是个上限值("up to"),具体到每个 benchmark 的增益不一样,引用时按「最高 28.9 分」写。
工程判断
- 什么时候抄:你的 agent 有多个互相依赖的工具调用,而且「调错了顺序 / 参数」是线上失败的主要来源;工具目录可以静态描述 —— 这正是 PDDL 编译能成立的前提。特别是参数必须可溯源的场景:合规、金融、医疗、任何需要回答「这个数字哪来的」的场合,这套的「每个参数都有出处」是刚需而不是加分项。
- 什么时候不抄:工具目录天天变 —— 每次变更都要重编译,运维成本会吃掉全部收益;或调用只有一两步,规划器是纯开销;或工具输出无法抽象成「哪些输入可用」(开放式对话、不可枚举的返回),PDDL 表达不了的东西就不在计划里,模型会直接漏掉那一部分。
- 一句话启发:把工具目录编译成规划域 —— 当 agent 老是选错工具顺序时,问题多半不在 prompt,而在没人告诉它「谁依赖谁」。
七、落地思考 / 我的判断
六篇的统一潜台词:它们都在把同一个东西从策略内部搬出来。「能不能做到」原来藏在 VLA 的隐式行为里,现在被搬到一个可测的闸门;「这个转移可不可行」原来藏在规划器的搜索里,现在被搬到一个独立的高层可达性模型;「安全边界在哪」原来是一个拍脑袋的余量常数,现在被搬成一个风险预算;「调用序列可不可执行」原来靠 LLM 试错,现在被搬到一个 PDDL 模型和经典规划器里。搬出来之后,它就能被单独测、单独审计、单独调参 —— 这正是上一期我们讨论「外部参照系」的同一套逻辑,只是这次参照系挂的不是「对不对」,而是「能不能 / 该不该」。
但把这六篇并排放在一起看,图上还留着一条更有意思的线:显式化的成本不来自「显式」本身,而来自「你手里有没有一个能算出这个判据的来源」。
- ROOF 的判据很明确,但它要付仿真 + 150 次真机尝试 —— 因为它需要几何重叠量这个来源;
- Wizard 的判据很明确,但要付 750 场景 178 角色的数据构建 —— 因为它需要骨架与几何代理这个来源;
- chance-constrained 要付一整套标定的误差分布 —— 否则概率化就是假精确;
- CGAP 要付工具目录的依赖图和一次 PDDL 编译 —— 目录一变就得重编译;
- ID-WM 要付一个训练好的低层世界模型;
- 而 VLA 的闸门法什么都不用付 —— 它只需要两次前向:一次拿当前指令的第一个 action chunk,一次拿空指令的那个,比一下就行。
所以最值得先抄的是第三篇(VLA Start Suppression)的配对协议,不是它的闸门法。理由是成本:固定初始状态、只改指令,产出的就是一张「你的策略在没指令时会不会动」的表,这张表是你后面所有防护措施的基线 —— 你不先测出这个数,就没法证明闸门法有没有用、更没法证明系统上线后风险降了多少。它的前提条件也很低:你需要至少两个同族 checkpoint(论文用了 6 个),并且能在仿真里固定初始状态。这一条今天就能做。
其次是 CGAP,但要看你的系统形态:如果你的 agent 工具目录是静态的、参数需要可溯源,那 PDDL 编译是这六篇里迁移成本最低、收益最直接的一个。反过来,如果你的工具天天变,或者调用链只有一两步,别抄。
今天没解决的,比解决的更值得记一笔。这六个判据层自己都有盲区:ID-WM 的判据只覆盖局部接触物理,不覆盖语义(一个杯子在桌上,物理可行但语义荒谬它管不了);Wizard 的代理表示只覆盖有骨架有几何的东西,布料、流体、非人角色就掉出去了;VLA 闸门的代理是「第一个 chunk 几乎相等」,这个判据在动作分布重叠时会不会误判,论文没回答;ROOF 的重叠量是纯几何代理,「腾出空间了但站不稳」它看不见;chance constraint 的盲区在误差分布标定本身;CGAP 的盲区在PDDL 表达不了的部分 —— 没被写进模型的东西,不会出现在计划里。
于是下一层的问题摆在这里了:当判据层自己有盲区,盲区里发生的事谁来管?这比上一期的「审计的审计由谁做」更具体一点 —— 因为今天我们看到的是盲区是被具体设计出来的(选几何当代理,就自动放弃了语义),而不是被笼统承认的。这已经是进展了:盲区一旦具体,就能被标注、能被测、能被分配责任人。这条线迟早要撞上的那堵墙,还是同一堵。
| 论文 | 主题 | 判据从哪来 | 关键数字 |
|---|---|---|---|
| ID-WM 2610.42146 | 分层世界模型 | 高层采样可行转移 + 低层当逆动力学求解器 | 三个导航与操作套件;较 SOTA policy / diffusion 规划器 +38.5%;较单层世界模型 MPC +135%(长时程、未见配置) |
| Wizard 2610.40339 | 可交互视频世界模型 | 显式维护的游戏状态 + 骨架/几何中间代理 + adaptive masking | 750 场景 / 178 角色;real-time;zero-shot 到新场景 / 新角色 / 新动作;摘要未给画质与延迟的量化数字 |
| VLA Start Suppression 2610.41609 | 安全 VLA | 配对协议(固定初态、只改指令)+ action chunk 闸门 | 6 个 checkpoint / LIBERO-Goal;空指令 6/6 全部启动,5/6 完成了未指定任务;前缀法 0/6 拦住,闸门法 5/6,微调法不完成任务但未可靠静止且不可行指令失败 |
| ROOF 2610.42097 | 人形恢复 · 安全 RL | 机器人-障碍物几何重叠量的渐进减少(给判据、不给路径) | 只能抬起的板子下 88.5% vs 无几何引导 18.9%;随机自由板子 98.6%;Unitree G1 真机 95/150,7 个场景含训练外布置 |
| Chance-Constrained Safe RL 2610.41639 | 安全 RL · 概率约束 | 显式风险预算(chance constraint)+ 确定性约束直接作用于动作集 + PID 调 Lagrangian | 中地球轨道 Galileo 级卫星;违规率维持在限额内、覆盖度接近最大、Δv 在预算内;同等覆盖度下违规率不到固定余量做法的一半;无需逐步蒙特卡洛 |
| CGAP 2610.41040 | agentic control · 规划 | 工具目录确定性编译成 PDDL + 经典规划器 + LLM verifier | ToolSandbox / ComplexFuncBench / BFCL multi-turn / τ²-bench retail,3 个 LLM;较标准 tool-calling agent 最高 +28.9 分;参数全部有出处 |
References
- Zhou, Wu, Cui, Ballas, Assran, Pinto, LeCun (2026). Hierarchical World Models with Implicit Dynamics. arXiv:2610.42146. cs.RO / cs.AI; submitted 2026-10-30; 纽约大学 Courant 研究所 / Meta-FAIR / AMI Labs; License: CC BY 4.0。视频:id-wm.github.io
- Wu, Lin, Jin (2026). Wizard: Manipulate Any World in Real Time via Agentic Control. arXiv:2610.40339. cs.CV; submitted 2026-10-29; 腾讯 / 新加坡国立大学 / 南洋理工大学; License: CC BY 4.0。项目页:wyzardwu.github.io/wizard
- Jang, Choi, Yoon, Kim (2026). VLA Policies Do Not Know When Not to Act: Unintended Task Execution and Start Suppression. arXiv:2610.41609. cs.RO / cs.AI; submitted 2026-10-30; 韩国电子通信研究院 ETRI / 韩国科学技术院 UST; 17 页 3 图 13 表; License: arXiv 默认分发许可(非 CC)。代码:github.com/zebehn/vla-start-suppression
- Lu, Yu, Cai, Sun, Han, Wang, Luo, Lu (2026). ROOF: Learning Humanoid Fall Recovery under Overhead Constraints. arXiv:2610.42097. cs.RO; submitted 2026-10-30; 香港大学 / 中国科学院; 8 页 4 图; License: arXiv 默认分发许可(非 CC)。项目页:lu-yidan.github.io/ROOF/
- Carer, Abdin (2026). Chance-Constrained Inspection Viewpoint Sequencing for On-Orbit Servicing via Safe Reinforcement Learning. arXiv:2610.41639. cs.AI / math.OC; submitted 2026-10-30; LGI; 已发表于 77th International Astronautical Congress (IAC), Oct 2026, Antalya (TR), Turkey; License: arXiv 默认分发许可(非 CC)。
- Shrestha, Yeoh, Zhang, Vorobeychik (2026). Capability-Grounded Agentic Planning. arXiv:2610.41040. cs.AI / cs.CL; submitted 2026-10-29; 圣路易斯华盛顿大学 Washington University in St. Louis; 25 页 3 图; License: arXiv 默认分发许可(非 CC)。
下一篇预告:今天把「判据要显式化」这一层补上了 —— 六个判据,六种挂法。但这次看得更清楚的是:显式化的成本不来自显式本身,而来自你手里有没有一个能算出这个判据的来源。几何、误差分布、工具依赖图、骨架代理 —— 没有来源,判据就只能停在纸面上。而这六个判据自己都有盲区:ID-WM 的判据只管接触物理不管语义,Wizard 的代理只覆盖有骨架的东西,VLA 闸门的代理是「第一个 chunk 几乎相等」,ROOF 的重叠量看不见「站不稳」,chance constraint 的盲区在误差标定本身,CGAP 的盲区在 PDDL 表达不了的部分。下一层要正面处理的,是「判据层有盲区时,盲区里发生的事谁来管」 —— 好消息是,盲区一旦被具体设计出来,就能被标注、被测、被分配责任人。