今日 6 篇 arXiv 速读:回访一致性全丢、3K 样本把物理抬 4.2 分、30% token 换 4.8 倍、79% 的禁止被无视、按可行性分区才不越界、工具信用可以是负的
上一篇(11-10)结尾留了个问题:「当失败预测器失准、当安全裕度是乐观的、当因果估计的区间根本覆盖不了决策点,系统该继续动作、主动弃权、还是退回更笨但更可靠的做法 —— 以及谁该为『信号失效』负责。」
今天这六篇没有正面回答「谁负责」,但给出了同一个前提性答案:别把正确性藏在模型内部,要把它挪到一个能被单独检查、单独修的位置。六个方向:把一致性拆成子指标、把物理写成代码、把高清区域交给模型自己选、把禁止挪出指令、把保守度按状态分区、把信用的符号单独投影出来。
- WanderBench:视频世界模型的回访一致性评测。745 段源视频、6 个维度 24 个子指标;8 个模型没有一个能保持回访一致;training-free 的 WanderLand 最多补 8.3 分;
- PhysOPSD:把物理规律写成可执行代码当特权上下文。VideoPhy-2 +4.2 / +4.1、PhyGround +1.6 / +3.4,只用 3K 样本(SFT 要 80K、PhysHPO 要 21K);
- MPEG-Diffusion:只算 30% token,Wan2.1 14B 上 4.8× 加速;人评对 Phase-Aligned RoPE 胜率 98.8%、对 Foveated Diffusion 90.1%;
- Localizing VLA Goal Representation:「不要做 X」在指令里基本不起作用 —— 79% 的否定 rollout 照样做了禁止的事;
- FOCAL:离线安全 RL 里按状态可行性分区。CPQ 在 CarButton1 上成本 40.06(限值 1.0 的 40 倍),FOCAL 0.72;
- TACA:工具调用的信用可以是负的。用优势投影把符号扳回来,六个推理基准上比 MT-GRPO 高 4.61 / 3.61 个百分点。
下面这张图把六篇放到两轴上:横轴是「正确性被放在哪儿」(隐在模型内部 → 独立可查),纵轴是「把这套东西变成默认设置要付出的工程代价」。
图上最值得看的是左上角:PhysOPSD 是唯一一篇既最显式又最贵的 —— 物理写成可执行代码,代价是你得先有一套能跑的物理仿真程序,外加 3K 条 on-policy 数据;而最便宜的是右下角:WanderBench 什么都不改,只写清楚要测哪 6 个维度,代价几乎为零,收益是第一次把「回访之后世界还一样吗」这个问题问出口。注意最便宜的这一篇恰恰也最显式 —— 这是今天六篇里最反直觉的一条。
一、WanderBench: Can World Models Explore Dynamic Worlds from Video?:回访之后,世界还是同一个世界吗(Li、Wang、Chen、Wang、Liu,arXiv:2611.12557,cs.CV / cs.AI,2026-11-09,华中科技大学,10 页 4 图,CC BY 4.0)
问题 视频世界模型已经能做到「给一段视频,让我像摄像机一样在里面走」。但这类模型_eval_ 起来只比感知质量和跟不跟得上相机轨迹,于是有两件事被系统性漏掉了:被录下来的那个世界,它自己的动态还在不在(该发生的事有没有按原样发生),以及走回原地时场景还一不一致。前者是「世界模型有没有记住源」,后者是「有没有在生成中把自己改掉了」。这篇问的是:能不能造一把专门测这两件事的尺子。
关键 idea / 方法骨架 三个部件。① 输入形式定死:每个测试用例 = 一段单镜头源视频 + 一条用键盘动作指定的相机路线——路线是离散动作序列而不是自由描述,这样「模型有没有执行这条路线」才是可判定的。② 六个维度、24 个子指标:视觉质量(Qual.)、相机控制(Cam.)、源世界保真(World)、源动态保真(Dyn.)、时空一致性(Cons.)、动态回访一致性(Revisit)。前四个维度是既有评测里有的,后两个是新加的,而且全部经人工验证。③ WanderLand:一个 training-free 的增强框架,做法是让每一帧都同时条件在「同一时刻的源」和「这个模型自己早先生成过的静态内容」上——源提供动态,自己早期的静态内容提供「这里原本长什么样」。
数据 / 数字 745 段单镜头源视频,真实素材(舞蹈、电影、自然场景)加 AI 生成(写实、动漫、艺术风格),按 3–25 秒分三个难度档。8 个模型的结论是一句话能说完的:片段越长,模型越能保住静态场景和视觉质量,但相机控制和源动态会一起丢;而且没有一个模型能保持回访一致。WanderLand 在5 个模型的每一个维度上都带来提升,源动态保真最多补回 8.3 分。这里的边界要说清楚:8.3 分是上限而不是平均,而且它是training-free 手段补的,不涉及重训——所以「模型本身就没有回访一致性」这个结论没有被推翻,被绕过而已。
工程判断
- 什么时候抄:你在做「视频条件生成 / 自由视角回放 / 给具身 agent 造 real-to-sim 环境」,而且发现画面看着挺像但世界不对。抄三件:① 把「源动态还在不在」和「回访时一不一致」拆成独立维度,别再让 FVD 一把尺子量所有事;② 相机路线用离散键盘动作写死,不要让模型自由发挥——不然你分不清是模型没跟上还是路线本身有歧义;③ 先试 training-free 的条件化(把源和模型自己的历史同时喂回去),成本远低于重训。
- 什么时候不抄:这是一把尺子,不是一套方法——它不能修好你的模型,只能告诉你模型哪儿不行。当你的下游任务根本不关心源动态(比如只关心生成视频好不好看)时,整套评测是纯开销。第二个前提:WanderLand 的效果依赖模型自己已经生成过那个地方,回访之前没走过的地方它帮不上。第三个前提:24 个子指标经人工验证,人工验证过的尺子换一批模型、换一批场景就可能失配——别把它当成跨实验室可比的绝对刻度。
- 一句话启发:「『画面保真』和『世界保真』是两件事 —— 8 个模型里没有一个能在走回原地时认出路,而一张专测这件事的尺子,是今天六篇里最便宜的那一笔投入。」
二、PhysOPSD: Code as Privilege for Physically Plausible Video Generation:把物理规律写成能跑的代码(Chen、Peng、Qiu、Qiu、Xu、Dong,arXiv:2611.12411,cs.CV,2026-11-09,香港科技大学 / 阿里巴巴通义 Token Hub)
问题 视频生成模型的画面保真度已经很高了,但物理上说不通:球该往下掉却浮着,人该被杯子挡住却穿过去。要后训练修这个问题有两条老路,各有各的坑:监督微调有离线状态不匹配(训的是别的轨迹,学到的是别的状态分布);强化学习则卡在奖励上——物理合理性的奖励又稀疏又难定义,于是只能拿感知质量去凑数。这篇问的是:能不能给模型一个足够好的「物理」,让后训练根本不需要自己想办法?
关键 idea / 方法骨架 ① 方法基底是 On-Policy (Self-)Distillation:用模型自己 on-policy 的 rollout配上密集的纠正反馈来学,既避开离线分布错配,又避开稀疏奖励。这一步把问题重新表述成:剩下的难点全在「特权上下文」该长什么样。② 特权上下文的选型:文本 prompt 是陈述性的,说不清「力往哪作用」;参考视频把物理规律和视觉外观搅在一起,没有参数化控制。文章的答案是第三条路——可执行代码:代码实例化出一个可编辑的物理世界,天然有抽象性和可控性。③ PhysOPSD-Engine 把真实物理场景翻译成可验证的仿真程序。④ 两个训练技巧:双层物理特权(中间加一个瓶颈层来补信息差)和共享 rollout 噪声下的受控物理变化(让因果性的动态偏移暴露出来,而不是被噪声盖住)。
数据 / 数字 3K 样本——这是全篇最刺眼的一个数:同骨干的 SFT 要 80K、PhysHPO 要 21K,PhysOPSD 用 3K 就把物理指标抬上去,而且通用质量没塌。落在 UniVideo(13B)上:VideoPhy-2 Overall 从 63.1 到 67.3(+4.2),PhyGround Overall 从 64.9 到 66.5(+1.6),物理常识 PC 4.61(基线 4.57),VBench Total 84.0(基线 83.5)、Quality 85.0(基线 84.4)。落在 OmniWeaving(8.3B)上:VideoPhy-2 Overall 62.9 → 67.0(+4.1),PhyGround Overall 64.9 → 68.3(+3.4),PC 4.61(基线 4.51),VBench Total 83.3(基线 83.1)。对照组里 CPQ 式的 RL 基线在同类物理任务上拿不到这个平衡。代价也要写清楚:UniVideo 的 VBench Semantic 从 80.0 微降到 79.7,OmniWeaving 的 Quality 从 84.4 微降到 84.3——换物理性的时候通用语义有一点点折损,幅度很小但不是零。另外消融显示数据从 1K 到 4K 一直在涨,也就是说 3K 不是饱和点。
工程判断
- 什么时候抄:你在做需要物理合理性的视频后训练,而且已经试过 SFT(贵、收益一般)或 RL(奖励设计不出来)。抄三件:① 把物理写成可执行程序而不是写进 prompt;② 用 on-policy 自蒸馏当训练基底,让它吃自己的 rollout;③ 先试 3K 这个量级——很多团队会直接上 10K+,这里有个数量级的便宜可捡。
- 什么时候不抄:前置条件很硬:你得先有 PhysOPSD-Engine 那类东西,也就是能把物理场景翻译成可验证仿真程序的能力——没有这套工程,方法本身不成立,这是全文最贵的一段。第二,它只覆盖「能写成程序」的那类物理(刚体、碰撞、支撑这类),布料、流体、柔性接触就别指望了。第三,通用质量有折损:如果你做的就是通用文生视频、根本不测物理,这 3K 样本的投入是纯亏。
- 一句话启发:「物理规律不该写在提示词里 —— 写成一段能跑的代码,它就同时变成了可编辑的特权上下文和可验证的奖励来源,3K 样本把 VideoPhy-2 抬了 4.2 分。」
三、MPEG-Diffusion: Mixed-Resolution Video Generation:把高清区域交给模型自己选(Menn、Gu、He 等 10 人,arXiv:2611.12069,cs.CV,2026-11-09,UT Austin / Roblox)
问题 视频 DiT 太贵,跑不起。自然的省钱思路是混合分辨率:重要的区域算高分辨率,不重要的算低分辨率。但这条路一直有两个硬伤:视频上质量掉得厉害(图像任务上能混,视频一有时序就崩),以及你得事先知道高清区域在哪——而人不知道,规则也不知道。这篇问:这两个毛病是混合分辨率的固有缺陷,还是实现方式不对?
关键 idea / 方法骨架 作者的立场是前者不成立,拆成三个根因各配一招。① 混合分辨率的诅咒 → 双分辨率注意力:每个 query 只读自己那一档分辨率的 K/V,不共享。② HR/LR 边界处的畸变 → 混合分辨率解码器:解码前先把 HR 和 LR 的 latent 混合再解。③ 必须预先指定高清区域 → 自选高清区:用 DiT 自己的知识去找视觉上重要的区域,不用提前给。实现上,前 k 步在低分辨率跑,第 k 步切到高分辨率;高清区本身还会跟着镜头移动。
数据 / 数字 主干口径:只处理 30% 的全分辨率 token,Wan2.1 14B 上去噪快 4.8×(1.3B 上 3.8×)。同 token 预算下的横向对比(14B / 720p,k=40,30% token):MANIQA 0.397、Imaging 0.644、DOVER 0.794、VBench Q 83.9;纯 HR 参考是 1.0× / 0.445 / 0.671 / 0.819 / 85.3;纯 LR 参考(25% token)是 7.2× 但掉到 0.318 / 0.645 / 0.768 / 84.4。**注意这里有个诚实的取舍**:Phase-Aligned RoPE 和 Foveated Diffusion 在同一预算下更快(5.2×)但质量明显更低(DOVER 0.757 / 0.743,VBench Q 83.8 / 83.9),MPEG-Diffusion 是拿一点速度换质量。在更宽松的 k=25(38% token)上它变成 3.3×,但 VBench Q 反而更高(84.1)。人评(14B、750 票/基线,平局各半):对 HR 胜率 45.2%(23.2% 胜 / 44.0% 平 / 32.8% 负)、对 LR 69.1%、对 Phase-Aligned RoPE 98.8%、对 Foveated Diffusion 90.1%。边界消融(两个 1.3B 模型各训 5000 步、1003 个 MovieGen prompt、边缘取 80 个 64×64 盒子):时序 LPIPS 从 4.59 降到 4.14(-10%)、warp 误差从 2.61 降到 1.96(-25%)——这是双分辨率 K/V 单独带来的收益。另外它在 FLUX.2 klein 4B 的图像生成上也做了迁移验证(1000 prompt)。
工程判断
- 什么时候抄:你的视频生成卡在推理成本上,而用户其实不太在乎全分辨率。抄四件:① 双分辨率注意力(别让 HR query 去读 LR 的 K/V,这是最容易写错的一步);② 混合分辨率解码器,把畸变挡在解码前;③ 让 DiT 自己选高清区——这是它相对 Foveated Diffusion 的关键差异;④ 前 k 步跑低分辨率,把预算花在去噪后半程。
- 什么时候不抄:它不是免费的——要改 DiT 的注意力结构,还要训一个从 DiT 中间层特征回归「这块重建得多差」的线性头当选择器,这是要训练成本的。第二个前提:它默认你已经有一个好模型,这是推理加速不是模型变好——别拿它去比谁生成质量高,它在 30% token 下 VBench Q 83.9 对 HR 的 85.3,差的那 1.4 分是实打实的。第三个前提:视频可用,图像结论有限(它自己也主要在 FLUX.2 上做了验证)。
- 一句话启发:「省算力的关键是让模型自己指出哪里值得算 —— 30% 的 token 换 4.8 倍加速,人评对同预算基线胜率 90.1%,但离全分辨率那 1.4 分的差距得自己认。」
四、Localizing and Editing the Goal Representation of a Vision-Language-Action Model:不要做 X,写在指令里不算(Srivastava、Aqlan,arXiv:2611.08895,cs.RO,2026-11-06,路易斯维尔大学)
问题 操作员给机器人的安全约束常常是禁止句:「别把碗放到灶台上」。这篇要问两件事:OpenVLA 听不听这个「不」?以及它脑子里那个「我要执行的目标」到底存在哪一层?第二个问题不是学术洁癖——如果目标表征可以被定位,那它就可能被单独改掉,而不用重训整个模型。
关键 idea / 方法骨架 ① 实验设计:LIBERO-Goal 的 10 个任务共用同一个场景,所以每次 rollout 执行的是哪个目标是可以直接标出来的,不用另建标注。② 四种手段叠用:闭环 rollout + activation patching(把某层的激活换成别的)+ 线性探针(读目标)+ 激活 steering(往激活里加一个固定方向)+ 运行时监控。③ 追问「改哪里才有效」:作者不是只报告「改第 8 层有效」,而是系统地扫了「在哪些层、用什么粒度、改成什么」三件事——这才是论文里最有工程价值的部分。
数据 / 数字 结论比预想的糟:否定对执行哪个任务没有任何可检测的影响——79% 的否定 rollout 里,模型照样做了被禁止的那个任务,而普通指令的完成率是 78%(也就是说,禁令和不禁令的成功率几乎一样)。目标探针在「not X」和「X」下读出的结果也几乎相同。定位结果:第一个动作主要依赖第 12 层之前的指令 token,以及第 16 层起最后一个 prompt token。干预效果分化极大:第 8 层指令 token 上的固定 steering 向量改掉了 18 次里的 12 次;而第 12 到 20 层的固定向量和 prefill patch,158 次里一次都没改掉;从第 16 层起,只有「每个已解码动作 token 都打补丁」才能改掉机器人(第 24 层是 18 次里的 15 次)。监控侧:指令中途变化时,第 32 层的目标读出比失败检测器更能发现违规,而在图像与指令特征上训的外部探针表现相当。作者的结论很直接:禁止必须在指令之外强制执行,目标读出要对着规格做监控。
工程判断
- 什么时候抄:你要给机器人下禁止性指令(别碰 X、别进 Y 区域)。抄三件:① 别指望指令里的「不」——这篇的 79% 是硬证据;② 禁止要落在指令之外(独立的校验器、独立的动作门控),这也正好接上你已有的安全过滤器;③ 如果要「改模型而不是拦模型」,改第 12 层之前的指令 token,或者每个动作 token 都打——中间层 12–20 那段是 158 次全废的黑洞。
- 什么时候不抄:这篇的证据来自 OpenVLA 单一模型 + LIBERO-Goal 单一场景族,不能外推成「所有 VLA 都不理否定」——但「先测一遍你的模型听不听否定」这件事本身成本极低,值得做。第二个前提:这是探针研究,不是可部署方案,activation patching 和 steering 都需要访问模型内部,黑盒部署用不了。第三个前提:10 个任务共享一个场景,所以它测的是「目标选择」,不是「连续操作里的时序合规」。
- 一句话启发:「『不要做 X』不是约束,只是一个词 —— 79% 的 rollout 里机器人照做不误,而 158 次干预全废告诉你想改也没用:约束得落在指令外面。」
五、Safe Offline Reinforcement Learning using Behavior Regularisation and Latent Feasibility Guidance:按状态可行性分区(Keswani、Bhardwaj、Kumar、Bhattacharyya,arXiv:2611.10677,cs.LG,2026-11-07,IIT Delhi 等,NeurIPS 2026)
问题 离线安全 RL 有个结构性尴尬:「安全」被定义成整条轨迹上的累计成本,但你手上是一批固定数据,没法去探索那些能让你更安全的动作。更细的一层是:不同状态的安全余量根本不一样——有些状态离危险很远,可以激进一点;有些状态已经在悬崖边上,稍微保守一点就来不及。可行的定义是:存在某个策略,从这个状态出发每一步都能满足约束(可达性分析里的可行域)。问题在于,现有做法对所有状态用同一套保守度,结果是一头过度保守、一头仍然不安全。这篇问:能不能按「这个状态到底可不可行」来分区,然后分区处理?
关键 idea / 方法骨架 ① 可行性分区:用行为正则化的策略梯度(直接用价值函数的动作梯度,而不是 AWR 那种指数化权重)训一个条件变分自编码器(CVAE)演员。② 一阶目标按可行性劈成两半:在估计为可行的转移上提高回报,在估计为不可行的转移上压低约束违反。③ 推理期动态调保守度:按当前状态的估计可行性去调 latent 先验的尺度——这一步很关键,它把训练时学到的分区真正带到了执行期。④ 理论结果:AWR 的策略更新方差随优势误差指数增长,而 FOCAL 的更新方差随价值估计误差线性缩放——换句话说,同样的估计误差,FOCAL 的训练抖动小一个量级。
数据 / 数字 DSRL 基准,3 个种子、每个 20 个 episode,成本限值 Safety-Gymnasium 取 κ=10、Bullet-Safety-Gym 与 MetaDrive 取 κ=5,归一化成本 ≤1.0 算安全。结论:FOCAL 在全部被评测任务上都满足成本限值,同时回报与基线持平或更高。逐任务看更有信息量——CarButton1:CPQ 成本 40.06±5.71(限值的 40 倍,直接判不安全),FOCAL 成本 0.72±0.14、回报 -0.01±0.03,同一批数据上把不安全变成了安全;CarButton2:CPQ 成本 19.03±8.54 对 FOCAL 0.91±0.41;CarGoal1:FOCAL 回报 0.61±0.06、成本 0.80±0.33,回报和安全两个格子都拿到。对照 FISOR 在 CarButton1 上成本 0.26±0.12 更低,但回报是 -0.02±0.05——更安全但更保守,这正是 FOCAL 要在两者之间找的位置。消融则盯住推理期 latent 尺度的固定 vs 自适应这一个开关。
工程判断
- 什么时候抄:你在做离线的安全 RL,数据固定、探索不安全。抄三件:① 先算可行域(可达性分析),别用一条平均的保守曲线对付所有状态;② 训练目标按可行性劈成两半——可行区追回报,不可行区压违反;③ 推理期按状态调保守度,这是把分区兑现到执行的关键。
- 什么时候不抄:它整条链路挂在离线数据上——如果你的安全约束需要靠探索才能满足,离线设定本身就是错的框架。第二个前提:可行域估计的准确性决定了分区质量,估计偏了,分区就偏,而这一层论文没有给出误差上界——所以别把它当成保证,只当成一个更好的分区启发。第三个前提:DSRL 是仿真基准,成本限值是人为设的 κ,换到真机 κ 该怎么定,论文没回答。
- 一句话启发:「安全不是一个全局常数,是一个逐状态的量 —— 同一批离线数据上,CPQ 在 CarButton1 成本 40.06 判不安全,FOCAL 0.72 全程达标还能拿回奖励。」
六、When Credit Turns Against Tools: Transition-Aware Credit Assignment in Agentic Reinforcement Learning:工具 token 的信用可以是负的(Lu、Zhou、Ning、Cao、Yao、Han,arXiv:2611.11330,cs.LG,2026-11-08,香港浸会大学 TMLR Group / 北京大学 / 上海交通大学,NeurIPS 2026)
问题 带可验证奖励的 agentic RL 用多轮工具交互训语言模型,但有个反常识的现象:训着训着,推理能力和工具调用能力反而一起下降。这篇把它拆成三个耦合的机制:① 工具 token 失衡——错的轨迹里每轮的工具 token 比对的轨迹更多,于是工具整体拿到负信用;② 聚合放大——token 均值聚合让更长的错轨迹在策略更新里权重更大,把负信号进一步放大;③ 失败驱动重试——模型执行出错后会再调一次工具,轨迹被拉长,连补救尝试都吃到负信用。问的是:怎么把这个符号扳回来。
关键 idea / 方法骨架 核心动作是盯住「从推理到工具使用」这个转折点,同时监督调用发起和调用生成两件事。① 优势投影(Advantage Projection):对每个 prompt 组内的工具调用 token,施加一个最小均匀平移,强制它的平均优势非负——注意是最小平移,所以它尽量不破坏原有的相对排序。② 决策对比(Decision Contrast):拿同一个 prompt 的「用工具答」和「直接答」的奖励做对比,用这个对比来指导工具该不该用。③ 监督重放(Supervised Replay):拿之前采样到的正确轨迹里的工具调用来强化工具调用的生成。
数据 / 数字 六个推理基准上的平均准确率,相对 MT-GRPO:Qwen2.5-1.5B 高 4.61 个百分点、Qwen2.5-3B 高 3.61 个百分点。逐表看(Qwen2.5-1.5B-Instruct):编码四项 TACO 均分 53.70 对 MT-GRPO 的 41.98,其中 HackerEarth 50.00 对 25.00、CodeForces 58.98 对 48.13、CodeChef 41.12 对 34.98;交互任务 WebShop 成功率 67.20 对 56.80、得分 85.80 对 75.80(对照 GiGPO 的 65.00 / 83.10)。数学推理(Qwen2.5-7B):六基准均值 45.97 对 42.59,其中 AIME24 从 11.86 到 18.35、AIME25 从 8.02 到 13.43、AMC23 从 44.11 到 47.78、OlympiadBench 从 33.77 到 36.97;GSM8K 从 88.84 微降到 88.51——不是全涨,这一格是跌的。Llama-3.2-1B 上均值 15.17 对 13.61。另有组件消融单独拆三个部件的贡献。
工程判断
- 什么时候抄:你在用多轮工具 + 可验证奖励做 RLVR,而且发现工具越训越少用、推理越训越差。抄三件:① 先量一下工具 token 的平均优势是多少——如果它是负的,恭喜你找到病根了,这一步只要读一下日志;② 用最小均匀平移做非负投影,别用重加权,那会毁掉排序;③ 把「用工具」和「直接答」放在同一个 prompt 下比奖励,这比绝对奖励阈值稳。
- 什么时候不抄:它的前提是「错误轨迹里工具 token 更多」这个失衡确实存在——如果你的训练里工具调用分布本来就均衡,投影就是空操作,甚至可能把不该抬的抬起来。先测再抄。第二个前提:它改的是训练算法,不是推理时的护栏,训完之后它不保证工具调用一定更「对」,只是让训练不再自我抑制。第三,GSM8K 那一格是跌的,不是所有任务都涨——如果你只关心单轮数学推理,这个方法的收益会打折。
- 一句话启发:「工具调用的信用可以是负的 —— 不是模型不想用工具,是训练自己在惩罚它;投影把符号扳回来之后,六个基准上比 MT-GRPO 高 4.61 个点,但 GSM8K 那一格是跌的。」
七、落地思考 / 我的判断
六篇的统一潜台词是同一句话:不要把正确性藏在模型内部,要把它挪到一个能被单独检查、单独修的位置。WanderBench 把「世界对不对」从一句画质分数拆成 24 个可验证的子指标;PhysOPSD 把物理规律从陈述性的 prompt 挪到可执行的代码;MPEG-Diffusion 把「哪里要算得细」从人工指定挪到 DiT 自己的判断;Localizing VLA 把禁止从指令挪到指令之外;FOCAL 把保守度从全局常数挪到逐状态的可行性分区;TACA 把信用的符号从聚合结果里单独投影出来。六篇的共同形状是「先拆出一个可以被单独观测的东西」,而不是「让模型更强」。
这跟上一篇的「信任锚点」是同一个问题的下半段:上一篇问的是「该信任哪个信号」,今天问的是「这个信号本身能不能被单独检查」——如果不能,信号失准时你还是只能回到「继续动作还是弃权」那个没答案的问题。FOCAL 的分区、TACA 的投影、WanderBench 的子指标,都是在给「信号」造一个可检查的把手。
最值得先抄的是 Localizing VLA 的否定测试,不是任何一篇方法论文。理由是它的成本 / 收益比压倒性地高:跑一遍 LIBERO-Goal 十任务、统计否定 rollout 里的违规率,一天之内能做完,而它给出的信息是「你的安全指令链路里有一个 79% 漏水的口子,而且这个口子跟你用哪个安全过滤器无关——它在指令入口就已经漏了」。更关键的是它同时给了两个层次的结论:入口层(别指望指令里的「不」)和干预层(第 12–20 层是 158 次全废的黑洞)——这直接回答了上一篇遗留的「谁该为信号失效负责」:先查入口,再查中间层,最后才是运行时过滤器。
前提条件:你得有一个能批量跑否定指令的评测环境(LIBERO-Goal 那套「多任务共享一个场景」的构造成本极低,值得直接抄这个设计),而且要接受一个前提——你测出来的违规率是「你这个模型 + 这套指令」的数字,不是 VLA 的通病。
PhysOPSD 是六篇里最不该急着抄的一篇:它的 +4.2 分是真的,但成本结构跟另外五篇完全不是一个量级——它要你先有「把物理场景翻译成可验证仿真程序」的能力,而这部分论文给不了你。先确认你能不能拿到这个能力,再决定抄不抄方法。
一句话启发:「今天六篇教你的是怎么把正确性从模型里搬出来 —— 搬不出来的那些(否定指令 79% 被无视、工具信用被算成负的、状态保守度一刀切),才是真正在漏水的地方。」
| 论文 | 主题 | 方法骨架 | 关键数字 |
|---|---|---|---|
| WanderBench 2611.12557 | 世界模型 · 回访一致性评测 | 源视频 + 键盘动作路线 → 6 维度 24 子指标(人工验证);training-free 的 WanderLand 同时条件在「同刻源」与「模型自己的早期静态内容」 | 745 段源视频(3–25 秒三档)、8 个模型、无一保持回访一致;WanderLand 在 5 个模型的每个维度都提升,源动态保真最多 +8.3 分;不改模型不重训 |
| PhysOPSD 2611.12411 | 控制导向视频生成 · 可执行代码当特权上下文 | on-policy 自蒸馏 + PhysOPSD-Engine 把物理场景翻译成可验证仿真程序;双层物理特权(中间瓶颈)+ 共享 rollout 噪声下的受控物理变化 | 3K 样本(SFT 80K / PhysHPO 21K);UniVideo 13B:VideoPhy-2 63.1→67.3(+4.2)、PhyGround 64.9→66.5(+1.6)、PC 4.61、VBench Total 84.0;OmniWeaving 8.3B:VideoPhy-2 62.9→67.0(+4.1)、PhyGround 64.9→68.3(+3.4);UniVideo Semantic 80.0→79.7 微降;1K–4K 数据仍在涨 |
| MPEG-Diffusion 2611.12069 | 视频扩散加速 · 自选高清区 | 双分辨率注意力(各读各的 K/V)+ 混合分辨率解码器 + DiT 自选高清区;前 k 步低分辨率、镜头移动时高清区跟随 | 只算 30% token,Wan2.1 14B 快 4.8×、1.3B 3.8×;14B/720p k=40:MANIQA 0.397 / DOVER 0.794 / VBench Q 83.9(HR 1.0× / 85.3);同预算 Phase-Aligned RoPE 5.2× 但 DOVER 0.757、Foveated 5.2× / 0.743;人评胜率对 HR 45.2%、对 LR 69.1%、对 Phase-Aligned RoPE 98.8%、对 Foveated 90.1%;边缘消融时序 LPIPS 4.59→4.14、warp 误差 2.61→1.96 |
| Localizing VLA Goal Representation 2611.08895 | 安全 VLA · 否定指令与目标定位 | LIBERO-Goal 10 任务共享一场景 → 直接标出执行了哪个目标;激活修补 + 线性探针 + 激活 steering + 运行时监控;系统扫「哪层、什么粒度、改成什么」 | 否定对执行哪个任务无可检测影响,79% 的否定 rollout 照做禁止任务(普通指令完成率 78%);探针在「not X」与「X」下读数几乎相同;首个动作依赖第 12 层前的指令 token 与第 16 层起最后 prompt token;第 8 层 steering 改掉 12/18,第 12–20 层固定向量与 prefill 158 次全废,第 24 层逐动作 token 补丁 15/18;第 32 层目标读出比失败检测器更早发现违规 |
| FOCAL 2611.10677 | 安全 RL · 按状态可行性分区 | 行为正则化策略梯度 + CVAE 演员;一阶目标按可行性劈开(可行区追回报 / 不可行区压违反);推理期按估计可行性调 latent 先验尺度 | DSRL 3 种子 × 20 episode,成本限值 κ=10 / κ=5,归一化成本 ≤1.0 算安全;全部任务满足限值且回报持平或更高;CarButton1:CPQ 成本 40.06±5.71 判不安全,FOCAL 0.72±0.14、回报 -0.01±0.03;CarButton2:CPQ 19.03±8.54 对 FOCAL 0.91±0.41;CarGoal1:FOCAL 回报 0.61±0.06 / 成本 0.80±0.33;理论:AWR 方差随优势误差指数增长,FOCAL 线性 |
| TACA 2611.11330 | 智能体闭环控制 · 修正工具信用符号 | 盯「推理 → 工具」转折点,同时监督调用发起与生成;优势投影(最小均匀平移强制工具 token 平均优势非负)+ 决策对比(同 prompt 用工具 vs 直接答)+ 监督重放 | 六个推理基准均值对 MT-GRPO:Qwen2.5-1.5B +4.61、Qwen2.5-3B +3.61 个百分点;1.5B 编码 TACO 均分 53.70 对 41.98(HackerEarth 50.00 对 25.00、CodeForces 58.98 对 48.13);WebShop 成功率 67.20 对 56.80、得分 85.80 对 75.80(GiGPO 65.00 / 83.10);Qwen2.5-7B 数学均值 45.97 对 42.59(AIME24 18.35 对 11.86、AIME25 13.43 对 8.02);GSM8K 88.84→88.51 微降;Llama-3.2-1B 15.17 对 13.61 |
References
- Li, Jiheng, Wang, Jiale, Chen, Yuhang, Wang, Zai, Liu, Guangyue (2026). WanderBench: Can World Models Explore Dynamic Worlds from Video?. arXiv:2611.12557. cs.CV / cs.AI; submitted 2026-11-09; 华中科技大学; 10 页 4 图; CC BY 4.0。
- Chen, Harold Haodong, Peng, Rui, Qiu, Lingteng, Qiu, Kejie, Xu, Chao, Dong, Zilong (2026). PhysOPSD: Code as Privilege for Physically Plausible Video Generation. arXiv:2611.12411. cs.CV; submitted 2026-11-09; 香港科技大学 / 阿里巴巴通义 Token Hub(Alibaba Group)。项目页:haroldchen19.github.io/PhysOPSD-site/ · 代码:github.com/aigc3d/PhysOPSD
- Menn, Dennis, Gu, Tianpei, He, Guande, V S, Aryan, Song, Yanke, Liu, Nan, Xie, Desai, Huang, Xun, Xu, Chenfeng, et al. (2026). MPEG-Diffusion: Mixed-Resolution Video Generation. arXiv:2611.12069. cs.CV; submitted 2026-11-09; UT Austin / Roblox。
- Srivastava, Sudhanshu, Aqlan, Faisal (2026). Localizing and Editing the Goal Representation of a Vision-Language-Action Model. arXiv:2611.08895. cs.RO; submitted 2026-11-06; 路易斯维尔大学(University of Louisville)。
- Keswani, Mahesh, Bhardwaj, Parth, Kumar, Ankur, Bhattacharyya, Raunak P. (2026). Safe Offline Reinforcement Learning using Behavior Regularisation and Latent Feasibility Guidance. arXiv:2611.10677. cs.LG; submitted 2026-11-07; IIT Delhi(Yardi School of Artificial Intelligence 等); accepted at NeurIPS 2026。
- Lu, Xiangyu, Zhou, Zhanke, Ning, Jiazhe, Cao, Chentao, Yao, Jiangchao, Han, Bo (2026). When Credit Turns Against Tools: Transition-Aware Credit Assignment in Agentic Reinforcement Learning. arXiv:2611.11330. cs.LG; submitted 2026-11-08; 香港浸会大学 TMLR Group / 北京大学 / 上海交通大学; accepted at NeurIPS 2026。代码:github.com/tmlr-group/TACA
下一篇预告:今天六篇都在讲「把正确性挪到一个能被单独检查的位置」 —— 一致性拆成子指标、物理写成代码、高清区交给模型自选、禁止挪出指令、保守度按状态分区、信用符号单独投影。但六篇里有一处共同的沉默:被挪出去的那个东西,本身由谁来看管?目标读出这个监控器会不会失准、可行性分区这个估计会不会偏、优势投影这个补丁会不会把不该抬的抬起来 —— 「检查者本身的可信度」这一层,今天没有一篇交代。下一层要问的是「谁来检查检查者」:当你自己造的尺子也会被自己污染时,还有没有一个不依赖你判断的锚点。