📅 本期覆盖 2026-09-25（Fri, 25 Sep 2026） 公告批次。arXiv 网页端 listing 各分类当日条数为 cs.CV 143 / cs.RO 101 / cs.AI 260 / cs.LG 230 / cs.GR 7 / cs.MM 8，去重后 582 篇——与上期（Thu, 24 Sep 批次 506 篇）条数明显不同，确认新批次正常上线，故出正刊。

经全站 698 个历史 arXiv ID 与 712 条历史标题双重去重，入选的 8 篇与已收录论文 0 重复；两期候选池交集为 0，说明确实是全新批次。8 篇入选论文的 v1 均为 2026-09-23/24 且为单版本，与公告批次一致；另剔除四篇旧文——Do World Models Make Better Robots?（2609.29669，v1 为 8 月 30 日）、Visual Representation and History Modeling for Navigation World Models（2609.29555，v1 为 8 月 26 日）、RoboLDA（2609.29490，v1 为 8 月 24 日）与 CataOPD（2609.29518，v1 为 8 月 25 日），四者 ID 属 9 月但 Submission history 显示是一个月前投稿重新进入 listing。

本期最锋利的一条主线是：世界模型的评判标准正在从「预测得像不像」转向「能不能用来做决策」。AD-WM 直接指出一个长期被忽略的错位——潜世界模型的训练目标是预测真实发生的转移（factual transition），而模型预测控制（MPC）真正需要的是在同一状态下比较不同候选动作的后果；这两件事并不等价，一个模型完全可以在事实预测误差上表现优异，却对候选动作几乎不加区分。它用残差潜动力学加预测器级的动作恢复正则（逆动力学 + 条件互信息启发的归一化恢复目标）把动作信息强行保留在规划转移里，而辅助头在测试时直接丢弃、MPC 本身一行不改：OGBench-Cube 硬起点成功率从 3.7% 跳到 52.0%，冻结 V-JEPA 2 编码器后在自家 Franka 上的零样本抓取放置从 42.2% 提到 71.1%。更值得记的是它的诊断结论：事实预测误差与整体动作排序都不跟随闭环成功率的排序，只有与 CEM 对齐的 elite regret 才跟得住——这等于给「用重建指标挑世界模型」的通行做法判了死刑。

第二条主线是：世界模型与策略的耦合正在从「串行生成器」变成「共享上下文」。Streaming-WAM 抓住的是异步执行里一个极易被忽略的正确性问题：为了让机器人不等推理，动作块会提前下发并在推理期间继续执行，可后续动作生成所依赖的未来视觉预测如果不知道这些「已承诺动作」（committed actions），预测出的场景就与机器人真正将要面对的场景错开了。它的解法非常干净——每次流式更新时，把最新观测与已承诺动作前缀一起作为条件送进未来视觉预测，再用得到的动作条件视觉特征指导同一 joint update 内剩余动作的生成。结果是 LIBERO 平均成功率 98.35%、平均回合耗时相对 Fast-WAM 缩短到 1/2.93，真机 Stamp Paper 任务从同步 Joint-WAM 的 90 秒压到 38 秒。消融还给出一个反直觉结论：蒸馏放在两个阶段之前能拿到 98.35%，放在之后反而掉到 94.50%——顺序比蒸馏本身更关键。

第三条主线是：「输入该表示成什么」重新成为高杠杆问题。DSD 回到离散 token VLA 最底层的动作表征，指出常规位姿增量表示对执行速度与数据集归一化方式高度敏感，把跨演示共享的几何结构掩盖掉了；它把平移增量拆成方向 + 尺度、把相对旋转拆成轴 + 角再分别 tokenize，固定方向界提供了跨数据集的统一数值约定。收益是结构性的：SimplerEnv 混训设定下比 BIN 高 10.3 个百分点，五数据集混合时 DSD-BIN 从 40.7% 升到 43.3%（BIN 反而从 40.0% 跌到 33.0%），说明它把「更多异质数据」从负担变成了资产。TactileStep 与 AdaHVLA 则从另外两端说明同一件事：前者把足底压力这一此前几乎不进 locomotion 闭环的模态变成一等目标，在 Unitree G1 上把落地峰值力降低 48.8%、冲击噪声降低 30.1 dB、站立接触面积提升 23.8%；后者不碰 VLA 权重，而是让「harness」（代码化协调策略）通过机器人经验自我修订，NaVILA-LH 平均测试成功率从 22.5% 提到 57.5%，三个 VLA 骨干上操作任务最高提升 30.8 个百分点。

📄 论文精选

Streaming-WAM: Action-Conditioned World–Action Model for Asynchronous Robot Manipulation

链接： https://arxiv.org/abs/2609.28927

代码： https://github.com/SJTU-DENG-Lab/Streaming-WAM

作者 / 机构： Xuyao Huang, Yixuan Wang, Zengyao Ye, Boyuan Zhao, Chenyang Yu, Haoran Wen, Zhijie Deng（上海交通大学；山东大学；华东理工大学；理想汽车 Li Auto）

一句话总结： 上海交大 DENG Lab 联合山东大学、华东理工与理想汽车提出 Streaming-WAM，把「动作条件化世界建模」与异步机器人控制真正耦合起来——每次流式更新时把最新观测与已下发但仍在执行的动作前缀一起作为未来视觉预测的条件，让剩余动作的续写建立在机器人真正将要面对的场景之上，在 LIBERO 上取得 98.35% 平均成功率并把平均回合耗时压缩到 Fast-WAM 的 1/2.93，真机 Stamp Paper 任务耗时从 90 秒降至 38 秒。

研究问题： 世界动作模型（WAM）在推理时生成未来视觉预测，代价高昂。异步执行通过让推理与机器人运动重叠来减少等待，但这里藏着一个正确性问题：用于生成后续动作的未来视觉预测，必须已经把推理期间被安排执行的那些动作的后果算进去。如果预测仍以「动作尚未发生」的旧场景为起点，那么据此续写出的动作就与机器人届时的真实处境错配。核心问题是：如何让异步执行下的未来视觉预测感知到已承诺动作，同时不牺牲任务成功率？

核心方法： ①已承诺动作作为共享上下文：在每个流式更新时刻，模型以「最新观测 + 已承诺动作（构成下一个动作块的固定前缀）」为条件做未来视觉预测。②动作条件的视觉特征指导续写：得到的动作条件视觉特征进一步指导同一次 joint update 内剩余动作的生成，使续写部分知晓固定前缀执行期间预期发生的场景变化。③联合更新而非两段式：预测与动作生成在同一次更新内完成，避免把异步控制拆成互不知情的两阶段。④蒸馏时机的系统比较：论文显式对比了蒸馏置于两个训练阶段之前与之后的效果差异。

技术亮点：

  • 把异步控制的「时序错配」说清楚了：这不是一个工程加速技巧，而是一个建模正确性问题——已承诺动作造成的场景变化必须进入未来预测的条件集，否则预测与执行就是对不上的两套世界。
  • 「固定前缀」的提法很精确：已承诺动作之所以能作为条件，是因为它们已不可撤销，构成下一个动作块的确定前缀；这让条件化在信息论上是干净的，不需要估计尚未确定的部分。
  • 消融把贡献拆到了机制层面：去掉 action-to-video 条件化（保留动作前缀与未来视频预测）会让 LIBERO 平均成功率从 98.35% 降到 95.50%；去掉专用 Slot Encoder（保留对已承诺前缀 token 的残差注意力）则为 96.35%——两个设计各自都有实打实的贡献。
  • 蒸馏顺序反直觉：蒸馏放在两个阶段之前得到 98.35%，放在两个阶段之后只有 94.50%。这个 3.85 个百分点的差距说明蒸馏不是无损的收尾步骤，它会重塑后续阶段能学到的东西。
  • 视觉质量也同步受益：在单步视频采样下，Streaming-WAM 相对基线把 MSE 降低 38.6%、PSNR 亦有提升，说明动作条件化没有以生成质量为代价。

实验结果： LIBERO 上 Streaming-WAM 取得 98.35% 平均成功率，对比 Fast-WAM-RTC 的 89.15%；完整系统在相关对比中达到 91.74%，超过 Fast-WAM-Joint 的 87.00% 与 Fast-WAM-Joint-CD 的 86.00%。平均回合耗时相对 Fast-WAM 缩短 2.93 倍。真机 Stamp Paper 任务上，同步 Joint-WAM 的平均回合耗时为 90 秒，Streaming-WAM 降至 38 秒。消融方面：移除 action-to-video 条件化 → 95.50%；移除 Slot Encoder → 96.35%；蒸馏置于两阶段之后 → 94.50%。单步视频采样下 MSE 降低 38.6%。

应用场景： 对节拍敏感的真机操作产线（等待推理即意味着产能损失）、需要长动作块平滑衔接的双臂与移动操作、以及任何部署在算力受限边缘设备上、必须靠异步执行掩盖推理延迟的 VLA/WAM 系统。

研究价值： ⭐⭐⭐⭐⭐（5/5）— 异步执行此前多被当作系统层优化，这篇把它提升为建模问题并给出了一个几乎无需额外代价的解法。2.93 倍的回合加速配 98.35% 的成功率，意味着「世界模型推理太慢所以不能上真机」这个常见论断，可能从一开始就是个伪命题。

Training Object Permanence in World Models

链接： https://arxiv.org/abs/2609.28654

项目主页： https://object-permanence.world

作者 / 机构： Haotian Zhang, Fengyuan Yu, Dezhi Luo, Haoran Sun, Zehong Zhao, Qingying Gao, Yihan Li, Siyuan An, Huayi Qin, Yilan Zhang, Zhengze Jiang, Pinyuan Feng, Renrui Zhang, Ziyu Guo, Letian Wang, Mengyue Yang, Kangfu Mei, Maijunxian Wang, Ran Ji, Vikash Kumar, Freda Shi, Chandra Sripada, Vincent C. Müller, Philip Torr, Alan Yuille, Nikolaus Kriegeskorte, Felix Juefei-Xu, Lvmin Zhang, Jieneng Chen, Yilun Du, Hokin Deng（University of Southern California；Carnegie Mellon University；University of Michigan；Johns Hopkins University；University of California, San Diego）

一句话总结： USC、CMU、密歇根、JHU 与 UCSD 的跨认知科学—机器学习联合团队提出 WROP（World Reasoning with Object Permanence），用 150 个认知科学启发的 Blender 任务生成器、150 万样本训练语料与 300 题标准考试系统检验并训练视频生成模型的客体永久性（object permanence）与客体坚固性（solidity）；其 16B 世界模型 PWM-WROP 在 20 名评分者的盲评 Elo 研究中位列续写类模型第一、总体第三。

研究问题： 客体永久性与坚固性是人类核心认知先验的标志。视频生成模型作为当今世界模型的典型范式，已开始表现出初步的推理能力，是构建类人物理智能的候选载体。但两个基本问题没被回答：现有视频模型是否已经涌现出客体永久性？如果没有，能否用受核心认知启发的合成数据把它训出来？ 现有评测缺乏对这两条的针对性探针，也缺乏可控、可规模化、且能剥离干扰变量的数据基础设施。

核心方法： ①WROP 数据基础设施：150 个手工设计的认知科学启发任务，分属六个认知类别；每个任务配一个 Blender 生成器，在保持任务认知结构不变的前提下随机化速度、光照、相机角度等干扰参数，每任务产出 10,000+ 样本。②1.5M 样本训练语料 + 300 题考试：考试配备人类 Elo 评分，覆盖 14 个视频模型（3 个参考图生视频、7 个编辑类、4 个续写类）。③PWM-WROP：作者自研的 16B 世界模型，在上述语料上微调。④盲评配对 Elo 研究：20 名评分者参与，Bradley–Terry MLE 拟合 Elo 强度并给出按评分者聚类的 95% bootstrap 置信区间。⑤全栈开源：语料、考试、模型作答、分数、权重，以及 PWM——一套运行在 AWS Trainium2 上的原生 PyTorch 训练栈。

技术亮点：

  • 把发展心理学的「核心知识」框架搬进了视频模型评测：不是再做一个泛化的物理合理性分数，而是锁定客体永久性与坚固性这两条有明确人类实验证据的认知先验，任务设计有理论根基。
  • 「保持认知结构、随机化表面参数」是这套数据最有价值的设计：它让模型无法通过记忆纹理、光照、速度等捷径通过考试，只能依赖真正的客体表征——这正是此前多数物理推理基准被诟病的地方。
  • 评测覆盖面罕见：14 个模型横跨 R2V / 编辑 / 续写三种范式，且明确区分「参考条件下的编辑」与「纯续写」，避免用不同信息量的设定混比分。
  • 结果表述克制：PWM-WROP 在续写类中第一、总体第三，落后于两个参考图生视频模型且与之统计上并列——没有夸大称「超越所有商用前沿系统」，而是在更低原生分辨率下达到有竞争力的水平。
  • 连训练栈一起开源：AWS Trainium2 上的原生 PyTorch 栈降低了复现门槛，这在 16B 量级的世界模型工作中并不常见。

实验结果： WROP 提供 150 个任务生成器、每任务 10,000+ 样本、1.5M 训练语料与 300 题考试。在 14 个视频模型（3 R2V / 7 编辑 / 4 续写）的评测中，PWM-WROP 在盲评配对 Elo 研究里位列续写类模型第一、总体第三，仅落后于两个参考图生视频模型之间的统计平局。论文指出，在认知原则驱动的合成数据上微调，是让视频生成模型获得物理推理能力的一条可行路径。语料、考试、模型作答、分数、权重与 PWM 训练栈全部开源。

应用场景： 视频生成与世界模型的物理一致性评测；具身智能体对「被遮挡物体仍然存在」的推理能力审计；认知科学与机器智能的交叉研究；以及作为世界模型预训练/微调的认知先验语料。

研究价值： ⭐⭐⭐⭐⭐（5/5）— 在「世界模型到底有没有物理常识」这个问题上，给出了一套有理论锚点、有规模化数据、有盲评验证的测量工具，而不是又一个主观打分榜单。它同时证明这条路可训练：认知原则驱动的合成数据真能把客体永久性训进 16B 模型。

HelloWorld: Towards Practical Applications of Generative Driving World Models

链接： https://arxiv.org/abs/2609.28931

项目主页： https://helloworld-4d.github.io

作者 / 机构： Fan Lu, Hanshi Wang, Zijing Wang, Quan Feng, Zhi Wang, Shijie Chen, Xianming Zeng, Yujian Zhang, Jiazhe Wang, Xin Zha, Kai Wang, Zhijie Zhao, Lin Zhu, Tianyi Yang, Yucheng Xu, Tao Ji, Haodong Zhang, Zhipeng Zhang, Peixi Peng, Guang Chen, Xingliang Liu, Lei Yang, Jianyun Xu（HelloWorld Team；论文未在 arXiv 页面标注机构）

一句话总结： HelloWorld Team 提出 HelloWorld，一个 2B 参数的驾驶世界模型系统，把异构视频数据中的通用视觉与运动先验逐步特化为以自车位姿、HD 地图与 3D 框为条件的可控驾驶生成，支持七相机同步 RGB 生成与条件 LiDAR 合成，并向少步推理蒸馏以适配部署；相对 FAR-Drive，FID 降低 35.0%、FVD 降低约 50%。

研究问题： 驾驶世界模型为超越录制日志的反事实数据生成与交互式仿真提供了一条可扩展路径。但要把这个潜力兑现，系统必须同时满足四件事：跨多样场景泛化、忠实响应给定控制、生成一致的多传感器观测、以及在重复推理下保持高效。现有工作往往只优化其中一两项——比如只做单目前视视频，或只在单帧质量上卷指标，难以支撑真正的闭环仿真与数据工厂。

核心方法： ①渐进式特化：从异构视频数据中先学宽泛的视觉与运动先验，再以自车位姿、HD 地图与 3D 框为条件，逐步特化为可控的驾驶生成。②块因果（block-causal）生成接口：配合对自生成上下文的自适应，把模型对齐到序列式仿真的使用方式，使长时间滚动生成保持稳定。③多模态同步输出：支持同步的七相机 RGB 生成，并以 RGB 为条件合成 LiDAR，避免「相机看到的车 LiDAR 看不到」这类跨模态幻觉。④少步蒸馏：把生成流程向少步推理蒸馏，配合超分模块，满足部署侧的效率要求。

技术亮点：

  • 把「实用」放在论文标题里是有含金量的：实验维度覆盖视觉质量、控制保真度、跨视角一致性、重复生成下的鲁棒性、推理效率与 LiDAR 合成——正对应开篇列出的四个要求，而不是只挑对自己有利的指标。
  • RGB 条件化 LiDAR 合成是一个被低估的工程判断：多传感器一致性如果靠两个独立生成器碰运气对齐，下游感知评测会直接崩；以 RGB 为条件合成点云从结构上消除了这条失败路径。
  • 块因果接口 + 自生成上下文自适应，直指长程滚动的退化问题：自回归世界模型在长 rollout 上漂移是通病，这里把它当作设计约束而非事后补丁。
  • 2B 规模是一个刻意的取舍：驾驶世界模型的价值在于被频繁调用，参数量必须落在可反复推理的区间；配合少步蒸馏，整条链路是朝着「数据工厂」而非「演示视频」设计的。
  • 项目页给出了闭环用例：把受控策略放进 HelloWorld 做闭环 rollout（如拥堵跟车、绕过阻挡卡车），说明它确实被当作仿真器而非渲染器使用。

实验结果： 相对 FAR-Drive，HelloWorld 将 FID 降低 35.0%、FVD 降低约 50%。在控制保真度实验中，后训练模型相对首帧条件的中训练模型，把旋转误差与对齐平移误差分别降低 38.9% 与 11.3%；论文还报告了多组相对基线在旋转/平移误差上 44.8% / 49.2% / 63.4% 量级的改进。系统支持七相机 RGB 同步生成与条件 LiDAR 合成，并通过少步蒸馏提升推理效率。

应用场景： 自动驾驶闭环仿真与压力测试、长尾场景的合成数据工厂、感知栈在极端轨迹下的失效模式分析、以及驾驶策略的规模化评测。

研究价值： ⭐⭐⭐⭐（4/5）— 把驾驶世界模型从「能生成好看视频」推到「能当数据工厂和仿真器用」，多传感器同步输出与少步蒸馏是关键两步。扣一星是因为论文以团队署名、未标注机构，且部分对比基线与实验细节披露有限。

AD-WM: Action-Discriminative World Models for Counterfactual Model Predictive Control

链接： https://arxiv.org/abs/2609.30264

项目主页： https://ad-wm.github.io/

作者 / 机构： Jiabin Qiu, Zixuan Chen, Hongye Cao, Jieqi Shi, Jing Huo, Yang Gao（南京大学 Nanjing University）

一句话总结： 南京大学团队提出 AD-WM，指出潜世界模型的训练目标（预测事实转移）与 MPC 的实际需求（在同一状态下比较候选动作）之间存在根本错位，用残差潜动力学加预测器级动作恢复正则（逆动力学 + 条件互信息启发的归一化恢复目标）迫使规划转移保留动作信息；辅助头测试时丢弃、MPC 本身不改，OGBench-Cube 硬起点成功率从 3.7% 提升至 52.0%，冻结 V-JEPA 2 编码器后 Franka 零样本抓取放置从 42.2% 提到 71.1%。

研究问题： 潜世界模型通常被训练来预测事实发生的转移，而 MPC 必须从同一状态出发比较不同候选动作的后果。这两件事并不等价：一个模型完全可以在事实预测误差上做到很低，却对候选动作几乎不加区分——而后者才是规划真正需要的。核心问题是：如何让世界模型在训练目标层面就保留「动作可区分性」，而不是寄希望于更低的重建误差碰巧带来更好的规划？

核心方法： ①残差潜动力学：以残差形式建模潜在转移，便于优化与稳定。②预测器级动作恢复正则：在预测器层面加两个辅助目标——逆动力学（从相邻潜状态反推动作）与受条件互信息启发的归一化恢复目标，两者共同促使规划转移保留动作信息。③测试时零侵入：两个辅助头在测试阶段直接丢弃，MPC 的流程与超参完全不变——这是该方法能被即插即用地接入现有规划栈的关键。④诊断工具：提出以与 CEM 对齐的 elite regret 作为规划质量的诊断量，并系统对比了事实预测误差、整体动作排序与闭环成功率三者的排序一致性。

技术亮点：

  • 问题定位极准：「低事实预测误差 ≠ 能区分候选动作」这句话点破了世界模型用于规划时的核心失效模式，而且这个失效是静默的——训练曲线看起来一切正常。
  • 条件互信息的引入有理论依据：归一化恢复目标不是拍脑袋加的正则，而是从「潜转移应与动作有高条件互信息」这一要求导出的，因而有明确的优化含义。
  • 诊断结论比方法本身更有普适价值：论文实证表明事实预测误差与整体动作排序都不跟随闭环成功率的排序，只有 CEM 对齐的 elite regret 才跟得住。这意味着社区习以为常的「用重建/预测误差挑世界模型」可能是系统性误导。
  • 真机迁移是硬证据：冻结 V-JEPA 2 编码器、在匹配的 DROID 数据上后训练，无需实验室专属适配即在 Franka 上把基础 pick-and-place 从 42.2% 提到 71.1%——说明动作可区分性带来的增益能跨 embodied 迁移。
  • 消融讲清楚了各组件权重：Cube 上识别出残差预测与互信息项是最大贡献者，逆动力学项对平均成功率影响较小且依赖权重。

实验结果： OGBench-Cube 上硬起点成功率从 3.7% 提升至 52.0%（对比匹配的 LeWM 基线）。在五个仿真环境中的四个上平均成功率超过复现基线：Cube 73.3% → 90.7%、Reacher 76.7% → 83.3%、TwoRoom 90% → 98%、Scene 亦有提升。真机方面，冻结 V-JEPA 2 编码器并做匹配 DROID 后训练，Franka 基础 pick-and-place 零样本成功率从 42.2% 提升到 71.1%，且无需实验室专属适配。诊断显示 elite regret 与闭环成功率的排序一致性显著优于事实预测误差与整体动作排序。

应用场景： 任意基于潜世界模型做 MPC / 规划的控制任务（操作、导航、移动操作）；需要零样本迁移到新本体的机器人策略；以及世界模型选型与早停准则的重新制定。

研究价值： ⭐⭐⭐⭐⭐（5/5）— 一篇兼具理论清晰度与工程实用性的工作：方法本身即插即用（MPC 一行不改），而那句「事实预测误差不跟随闭环成功率排序」应该被每个用世界模型做规划的人记住。

AdaHVLA: Adaptive Harnesses for Long-Horizon Vision-Language-Action Execution

链接： https://arxiv.org/abs/2609.29204

代码： https://github.com/Haaareally/AdaHVLA-Adaptive_Harness_VLA

作者 / 机构： Junyi Tang, Jie Peng, Zezhen Ding, Yuan Shen, Tianlong Chen（UNC Chapel Hill；中国科学技术大学；香港科技大学；香港中文大学）

一句话总结： UNC、中科大、港科大与港中文团队提出 AdaHVLA，用机器人经验反推代码化协调策略（task harness）的自我修订：把证据分析、harness 修订与行为评估解耦到不同工作上下文中，用可测试的协调假设指导修订并用后续 rollout 检验预期效果；在 NaVILA-LH 上把平均测试成功率从 22.5% 提升至 57.5%，在三个 VLA 骨干上的操作任务最高提升 30.8 个百分点。

研究问题： VLA 模型具备强局部控制与指令跟随能力，但在需要持久记忆与规划的长程任务上普遍吃力。Task harness 通过保留任务历史与跨执行阶段追踪进度，为 agent 推理提供持久上下文——两者能力互补。然而现有 harness 多是静态手写的：一旦写好就不再变，无法从机器人实际执行中学习哪种协调方式对本任务、本环境更有效。核心问题是：能否让 harness 本身成为可被机器人经验优化的对象，从而把 agent 推理与 VLA 执行真正对齐？

核心方法： ①解耦的多智能体适配流程：把证据分析、harness 修订、行为评估分离到不同的工作上下文中，避免三者互相污染（分析者看到的失败细节会干扰修订者的判断）。②可测试的协调假设：修订不是盲改，而是先提出可被检验的协调假设，再由后续 rollout 评估其预测效果，形成闭环。③有状态的修订图（revision graph）：把执行证据、假设、修订与观察到的效果链接起来，保留备选 harness 与适配记忆，支持任务内反复精修以及跨任务、跨环境的持续适配。④与 VLA 骨干解耦：harness 层独立于底层 VLA，因而在多个骨干上都可复用。

技术亮点：

  • 把「优化对象」从策略权重换成协调策略，是一个成本—收益比很高的选择：不改 VLA 权重意味着不需要昂贵的再训练，却能拿到 22.5% → 57.5% 的提升。
  • 「可测试假设」这个设计让修订可审计：每次修订都带着预期效果，rollout 后能对照检验，失败时可归因到具体假设，而不是黑箱地调 prompt。
  • 有状态修订图解决了「改坏了回不去」的问题：保留备选 harness 与回滚能力，消融显示把修订图换成扁平历史会让导航成功率从 57.5% 掉到 42.5%、操作 L2 从 38.3% 掉到 26.7%——即便保留了版本与回滚，缺少图结构的因果链接仍然损失巨大。
  • 消融精准指出了哪些组件真正重要：去掉完成度检查，导航成功率从 57.5% 掉到 29.2%；改成紧凑记忆则掉到 33.3%——这两项是导航侧最大的损失来源。操作侧去掉视觉刷新导致 L1 从 55.8% 掉到 37.5%，损失最大。
  • 真机验证覆盖了任务阶段的持续推进：不只是仿真分数，论文展示了适配后的策略在真机部署中跨任务阶段的稳定执行。

实验结果： 仿真中，AdaHVLA 把 NaVILA-LH 的平均测试成功率从 22.5% 提升至最高 57.5%；在三个 VLA 骨干上，操作测试成功率相对初始 harness 最高提升 30.8 个百分点。消融：去掉完成度检查 → 导航 29.2%；改用紧凑记忆 → 导航 33.3%；去掉视觉刷新 → 操作 L1 从 55.8% 降至 37.5%；去掉恢复机制 → L2 从 38.3% 降至 23.3%；用扁平历史替代修订图 → 导航 42.5%、操作 L2 26.7%。真机部署进一步展示了适配策略在任务各阶段的稳定执行。

应用场景： 长程具身任务（多级导航、多阶段操作）、VLA 骨干不可改动或改动成本极高的部署场景、以及需要跨任务与跨环境持续积累协调经验的系统。

研究价值： ⭐⭐⭐⭐（4/5）— 在「不动基座模型的前提下如何提升长程能力」这条路上给出了一个结构清晰、可审计、且代码已开源的方案。修订图的因果链接设计尤其值得借鉴。

Direction-Scale Decomposition in Action Representation: Rethinking What to Tokenize for Vision-Language-Action Models

链接： https://arxiv.org/abs/2609.28865

项目主页： https://vla-dsd.github.io/

作者 / 机构： Yufei Duan, Hang Yin, Alberta Longhini, Chao Tang, Danica Kragic（KTH Royal Institute of Technology；University of Copenhagen；Stanford University）

一句话总结： KTH、哥本哈根大学与 Stanford 团队提出 DSD（Direction-Scale Decomposition），指出离散 token VLA 中习以为常的位姿增量表示对执行速度与数据集归一化方式高度敏感、掩盖了跨演示共享的几何结构；它在 tokenize 之前把平移增量拆成方向 + 尺度、把相对旋转拆成轴 + 角，在 SimplerEnv 混训设定下比均匀分箱 BIN 高 10.3 个百分点，在五数据集混合中把「更多异质数据」从负担变为资产（40.7% → 43.3%，而 BIN 反而从 40.0% 跌到 33.0%）。

研究问题： 动作表示在离散 token VLA 学习中处于核心位置，却长期缺乏系统考察。常规做法是直接用位姿增量（pose increment）作为 tokenize 对象，但这带来三个问题：①对执行速度敏感——同一轨迹以不同速度演示会产生完全不同的 token 目标；②跨数据集归一化不一致——不同采集设置的数值范围不同，token 目标无法复用；③归一化错配时运动方向本身会被扭曲。核心问题是：应该把什么 tokenize 成动作，才能让表示对速度与归一化鲁棒、并保留跨演示共享的几何结构？

核心方法： ①方向—尺度解耦：把平移增量分解为方向分量与尺度分量，方向被隔离出来、量级保留在独立的尺度通道中；相对旋转同样拆成轴与角。②固定方向界：为方向分量设定固定的数值界，从而在不同数据集之间提供统一的数值约定——这是跨数据集训练能真正生效的前提。③解析式表示，与 tokenizer 正交：DSD 不绑定特定 tokenizer，论文同时评估了均匀分箱（BIN）与基于 B 样条的 BEAST 两种。④保留夹爪指令：夹爪命令不参与分解，直接保留。

技术亮点：

  • 把「tokenize 什么」而非「怎么 tokenize」作为研究对象：社区近期的动作 tokenizer 工作多在离散化方案上卷，这篇退一步问输入本身该是什么形式——答案是一个解析式分解，与任何 tokenizer 兼容。
  • 「固定方向界提供跨数据集统一约定」是关键且低成本的一步：它不需要额外学习，却直接决定了混合数据训练能否收敛到共享结构。
  • 混合数据实验的结论极具说服力：加入四个额外数据集后，DSD-BIN 的整体成功率从 40.7% 升到 43.3%，而 BIN 从 40.0% 跌到 33.0%——同一个数据增广，一个涨一个跌，说明差异确实来自表示而非数据量。
  • 归一化路径保真度也改善：DSD-BIN 相对 BIN 将平均 DTW 距离降低 20.5%（DSD-BEAST 相对 BEAST 降低 10.1%），说明生成的轨迹形状更贴近演示，不只是成功率好看。
  • 无需机器人预训练即可对标预训练模型：在五数据集混合下仅用机器人数据，DSD-BIN-mix 取得所有对比方法中最高的 43.3% 整体成功率，超过带大规模机器人预训练的微调基线；无预训练时平均成功率 92.3% vs π-FAST 的 85.6%，并与使用流匹配的 π₀（92.3%）持平。

实验结果： LIBERO 上 DSD 在两种 tokenizer 下均提升平均成功率，Long 套件上达到对比方法中最高的 88.6%。SimplerEnv 混训设定下 DSD-BIN 的整体成功率比 BIN 高 10.3 个百分点。无预训练时 DSD-BIN 平均成功率 92.3%，优于预训练的 π-FAST（85.6%）并与 π₀（92.3%）持平；实机任务上 BIN 60.0% → DSD-BIN 73.3%。加入四个数据集后 DSD-BIN 从 40.7% 升至 43.3%（BIN 由 40.0% 降至 33.0%），DSD-BIN-mix 在全部对比方法中整体成功率最高。DTW 距离：DSD-BIN 相对 BIN 降低 20.5%，DSD-BEAST 相对 BEAST 降低 10.1%。真机实验在有/无机器人预训练两种设定下均有增益。

应用场景： 跨数据集、跨 embodiment 的 VLA 大规模预训练；对执行速度不一致的众包/人类演示数据的利用；以及任何使用离散动作 token 的自回归 VLA。

研究价值： ⭐⭐⭐⭐（4/5）— 一篇「改一行表示、收益遍布全身」的工作。它最重要的贡献可能是证明了异质数据之所以常常帮倒忙，问题可能不在数据而在动作表示——这对正在大规模堆机器人数据的社区是一记及时的提醒。

TactileStep: Sole Tactile Learning for Regulating Foot–Terrain Interaction in Humanoid Locomotion

链接： https://arxiv.org/abs/2609.28959

项目主页： https://tactilestep.github.io/

作者 / 机构： Zizhuo Wang, Ming-Ju Lee, Shaoting Zhu, Haozhe Lou, Hang Zhao, Yiming Li（清华大学 Tsinghua University）

一句话总结： 清华大学团队提出 TactileStep，把足底压力感知引入人形机器人跑酷控制，使足—地交互成为一等优化目标：通过标定过的触觉仿真把压力特征在仿真与真机压力鞋垫之间对齐，并用触觉与运动线索识别不同的足部接触相位、施加相位感知奖励；在 Unitree G1 上把落地峰值力降低最多 48.8%、峰值 A 计权冲击噪声降低最多 30.1 dB、站立接触面积提升最多 23.8%。

研究问题： 人形跑酷策略已经能穿越多种地形，但「任务完成」这个二值指标会掩盖一系列真实问题：落地过重、边缘接触、支撑不稳。人类天然通过触觉反馈调节足—地交互，依据地形软硬调整接触顺应性。这揭示了人与机器人之间一个关键的域差距——绝大多数人形系统缺乏丰富的触觉感知。核心问题是：能否在不牺牲通过性的前提下，让策略学会「轻柔、稳定、有物理意识」地落地与支撑？

核心方法： ①可部署的足底触觉特征：使用压力鞋垫提供的分布式压力信号，构成策略可直接利用的接触特征。②触觉仿真与真机对齐：对触觉仿真做标定，使其与真实压力鞋垫输出一致，从而让策略在训练时接触到的特征与部署时硬件上可取到的特征同源。③相位感知奖励：训练中用触觉与运动线索识别不同的足部接触相位（触前、触地、支撑等），并在每个步态的正确时刻施加相应奖励，鼓励更安全的落地与更稳定的支撑。④跨多样地形评估：在仿真与 Unitree G1 真机、多种地形上评测。

技术亮点：

  • 把评价标准从「过没过去」换成「怎么过去的」：这是全文最核心的立场转变——跑酷成功率已经很高，但落地冲击、噪声与支撑质量此前几乎不被度量，而它们恰恰决定硬件寿命与真实可用性。
  • 仿真—真机触觉对齐是让这套方法能落地的真正难点：触觉信号比视觉更难仿真，论文明确做了标定并强调策略「学到的是硬件上同样可取到的接触特征」，避免了 sim-to-real 中最常见的特征错配。
  • 相位感知奖励把监督放到了时间轴上的正确位置：笼统地惩罚冲击力会让策略变保守（不敢跳、不敢踩边），而在触前/触地/支撑各相位分别设奖励，才能既保持通过性又改善接触质量。
  • 指标选得很贴近工程现实：峰值力（硬件损耗）、A 计权噪声（可感知性/噪声污染）、接触面积（稳定性）三个量分别对应三类实际问题，而不是只报一个成功率。
  • 局限说明坦诚：策略在有限指令范围内训练与评测，对更快运动（接触时长更短、冲击瞬变更大）的泛化尚未探索；步态相位估计仍依赖手工设计的接触与运动线索。

实验结果： 在仿真与 Unitree G1 真机、跨多样地形的评测中，TactileStep 相对强感知基线把峰值落地力降低最多 48.8%、峰值 A 计权冲击噪声降低最多 30.1 dB、站立接触面积提升最多 23.8%。论文指出该方法在保持地形通过能力的同时，使人形运动「不仅鲁棒，而且更轻柔、更安静、更具物理意识」。

应用场景： 人形机器人跑酷与复杂地形穿越；对硬件损耗敏感的长时巡检；需要低噪声运行的室内/人机共处场景；以及任何希望提升足—地接触质量的腿足系统。

研究价值： ⭐⭐⭐⭐（4/5）— 在触觉智能这条线上，把「触觉不只是给操作用的」讲得很清楚：腿足运动的接触质量同样依赖触觉闭环。48.8% 的峰值力下降与 30.1 dB 的噪声下降是硬件侧能直接感知的收益。

AV-GRPO: Modality-Anchored Decoupling Diffusion Reinforcement Learning for Joint Audio-Video Generation

链接： https://arxiv.org/abs/2609.29816

代码： https://github.com/zhiyuxu03/AV-GRPO

作者 / 机构： Zhiyu Xu, Weilong Yan, Yufei Shi, Shiyang Li, Yihao Liu, Kin-Man Lam, Yuewen Cao（上海人工智能实验室；香港理工大学；新加坡国立大学；南洋理工大学；浙江大学）

一句话总结： 上海 AI Lab、香港理工大学、NUS、NTU 与浙江大学联合提出 AV-GRPO，一套模态锚定的在线扩散 RL 框架，并配套 5DAV 难度可控解耦训练集：用模态锚定 rollout 解耦学习信号并稳定难度、用轨迹锁定 + 冻结塔优化降低成本并重新分配信用、用适配各模态动力学的自适应目标与扰动强度；把耦合的多模态偏好学习转化为单模态子问题，在 JavisBench 与 VABench 上于 LoRA 与全参微调两种设定下均超过 LTX-2.3。

研究问题： 联合音视频生成近年进展显著，但现有模型仍受限于单模态保真度不足、文本—模态对齐不充分、跨模态同步弱。RL 后训练是有希望的补救，但直接迁移到联合音视频生成面临三重障碍：①异构多模态奖励纠缠学习信号，信用分配困难；②两个模态塔联合优化计算昂贵，而二者优化动力学本就不同；③同步评测难度依赖配对样本，导致奖励无法公平比较。核心问题是：如何把耦合的多模态 RL 拆成可精确归因的单模态子问题，同时不牺牲跨模态同步？

核心方法： ①模态锚定 rollout（modality-anchored rollouts）：采样时锚定一个模态，解耦学习信号并稳定评测难度，使同步奖励可在可比条件下计算。②轨迹锁定 + 冻结塔优化（trajectory-locked frozen-tower optimization）：锁定采样轨迹、冻结其中一个模态塔，只优化另一塔，从而大幅降低计算成本并让信用明确归属到被优化的模态。③自适应目标与扰动强度：针对音视频两塔不同的优化动力学，分别设定目标与扰动强度。④5DAV 数据集：沿五个维度解耦样本，提供难度可控、系统化的训练数据。

技术亮点：

  • 「锚定一个模态」是一个优雅的实验设计兼训练技巧：它同时解决了「同步度怎么公平打分」与「两个塔互相背锅」两个问题——前者是评测问题，后者是优化问题，一个设计一起解决。
  • 冻结塔优化让 RL 后训练的成本从「双塔」降到「单塔」：对音视频这种双塔架构，联合 RL 的显存与时间开销常常直接劝退，这一步把方法拉回可用区间。
  • 信用分配被显式建模而非隐式期待：多模态 RL 最常见的失败是奖励涨了但不知道是哪个塔变好的；这里通过锚定 + 冻结，把「谁的功劳」变成设计上的确定性。
  • 5DAV 的「五维解耦」补上了数据侧的空白：难度可控意味着可以做课程式训练，而不是一上来就在最难的配对上碰运气。
  • 评测覆盖 LoRA 与全参微调两种设定：说明收益不是只在某一种参数高效设定下才成立。

实验结果： 在 JavisBench 与 VABench 上，AV-GRPO 在生成质量、语义对齐与跨模态同步三个维度上均优于 LTX-2.3，且在 LoRA 与全参数微调两种设定下结论一致。配套提出的 5DAV 数据集沿五个维度解耦样本、难度可控，用于系统化训练。

应用场景： 联合音视频生成模型的 RL 后训练；影视/短视频/游戏音效一体化生成；需要精确音画同步的虚拟人、广告与交互内容生产；以及多模态扩散模型的通用 RL 对齐框架。

研究价值： ⭐⭐⭐⭐（4/5）— 把多模态 RL 从「硬耦合地训」改造成「锚定—冻结—归因」的三步走，思路干净且可迁移到其他多塔生成架构。扣一星是因为公开的量化提升幅度以相对描述为主，绝对指标披露有限。

📊 今日研究趋势

世界模型的评估坐标系正在被重写。 今天最值得注意的不是又出现了多少新架构，而是多篇工作开始质疑「我们到底在用什么标准判断一个世界模型好不好」。AD-WM 的诊断最直接：事实预测误差与整体动作排序都不跟随闭环成功率的排序，只有与 CEM 对齐的 elite regret 才跟得住——如果这条结论在更多环境上成立，那么社区长期依赖的重建/预测误差选型准则就是系统性误导。WROP 则从另一头提供了替代方案：不再用泛化的视觉质量分，而是用有发展心理学依据的认知先验（客体永久性与坚固性）构造 150 个受控任务、1.5M 样本语料与 300 题考试，在 14 个视频模型上做盲评 Elo。两者的共同点是：都拒绝用「像不像」代替「对不对」。

异步与流式正在成为世界模型落地的默认约束。 Streaming-WAM 把异步执行从系统层优化升格为建模问题：已下发但仍在执行的动作前缀必须进入未来视觉预测的条件集，否则预测出的世界与机器人届时面对的世界是错开的。这个洞察的价值在于它几乎不增加成本——LIBERO 上 98.35% 的成功率配 2.93 倍的回合加速，真机 Stamp Paper 从 90 秒压到 38 秒。同批的 DeltaWAM 用视觉增量（delta）而非完整帧做预测、并用流式增量记忆更新缓存锚点上下文，训练 FLOPs 降低 17.78–23.77%，思路同源。可以预期「流式 / 异步 / 增量」会成为 WAM 下一阶段的标准配置。

触觉正在从操作侧延伸到全身运动。 TactileStep 把足底压力带进人形跑酷控制，在 Unitree G1 上把落地峰值力降低 48.8%、冲击噪声降低 30.1 dB。它的立场转变比指标更重要：跑酷成功率已经不是瓶颈，「怎么过去的」才是——落地冲击、边缘接触、支撑稳定性决定硬件寿命与真实可用性。配合本批次中 TactileStep 之外的多触觉工作（指尖感知自锚定、视触觉音频数据采集等），触觉模态正从「灵巧操作的补充信号」变成「全身接触质量的通用通道」。

表示层的老问题重新回到舞台中央。 DSD 证明了在 VLA 里，动作该 tokenize 成什么比怎么 tokenize 更关键：把位姿增量拆成方向 + 尺度后，加入四个异质数据集让 DSD-BIN 从 40.7% 升到 43.3%，却让 BIN 从 40.0% 跌到 33.0%——同一份数据增广，一个涨一个跌。这个对照实验几乎可以直接当作「表示决定数据能否被吃下」的教科书案例。同批的 AdaHVLA 则从更高的层次做了类似的事：不优化策略权重，而优化协调策略本身，NaVILA-LH 从 22.5% 提到 57.5%。当基座模型难以改动时，改「包在它外面那层」往往是性价比更高的杠杆。

🏆 最值得关注的 3 篇

  1. AD-WM（2609.30264） — 它给出的不只是方法，而是一条判据：事实预测误差不跟随闭环成功率排序。任何用潜世界模型做规划的工作都该读一遍它的诊断部分；而辅助头测试时丢弃、MPC 一行不改的即插即用设计，让落地门槛低到几乎为零。

  2. Training Object Permanence in World Models / WROP（2609.28654） — 在「世界模型有没有物理常识」这个被讨论太多、测量太少的议题上，第一次给出了有认知科学锚点、有 150 万样本语料、有 20 人盲评 Elo 的完整工具链，并证明认知原则驱动的合成数据真能把客体永久性训进 16B 模型。开源范围含训练栈，复现友好。

  3. Streaming-WAM（2609.28927） — 把异步执行中长期被忽略的时序错配讲成了一个干净的建模问题，并用「已承诺动作作为共享上下文」给出了近乎免费的解答。98.35% + 2.93× 加速 + 真机 90s→38s，是本期工程价值最高的一篇。

数据来源：ArXiv 2026-09-25（Fri, 25 Sep 2026）公告批次 | 分析生成时间：2026-09-26 06:00 (北京时间)