📅 本期覆盖 2026-10-06（Tue, 6 Oct 2026） arXiv 公告批次，去重后 1252 篇（cs.CV 285 / cs.RO 174 / cs.AI 554 / cs.LG 600 / cs.GR 14 / cs.MM 7），各分类条数与上一期记录的 10-05 批次明显不同，属新批次；文件名与标题沿用运行当天日期 2026-10-07（arxiv-daily-2026-10-06.md 已被上一期占用）。

经全站 770 个历史 arXiv ID 与 784 条历史标题双重去重，dup_id = 0、dup_t = 0，即本批次与历史零重叠（八个历史 ID 探针全部命中，去重脚本自检通过）。Top 34 候选逐篇核对 Submission history，v1 全部落在 2026-10-02 ~ 10-05 且均为单版本，与公告批次一致，无旧文需剔除。

本期八篇有一条贯穿的主线：长程一致性正在从「架构问题」变成「记忆管理问题」。 HLA-WM 与 Keepsake 是这条线上最锋利的两把刀，而且它们的诊断惊人地一致——不是模型记不住，而是记住的东西没有被正确地重新评估。前者指出 Gated DeltaNet 的循环状态会被后续无关转移逐步稀释，解法是缓存 chunk 级仿射摘要、用相机几何去「寻址」；后者指出既往的选择性记忆只做一次留存判断就再不回头，解法是把观测价值定义成关系量（有多少强替代物）而非固有属性。有意思的是，两条路都通向同一个工程结论：一致性可以靠「维护一个更小的记忆库」来提升，而不是靠把记忆撑大——Keepsake 用 32 条观测打赢 5397 条，HLA-WM 用 1/12 的存储打赢全 KV 缓存。另外两条副线同样清楚：WAM 的效率瓶颈已从骨干转移到执行调度（RealtimeWAM 同时砍掉专家内迭代与专家间等待），以及 VLA 的监督正在往「物理可核验」的方向走（ForeAct3D 用刚体一致性约束未来预测，AgenticTactileVLA 用电机电流当接触证据，VLA-ZO 干脆把适配预算花在动作侧）。

📄 论文精选

Kandinsky 6.0 Video: Foundation Models for Synchronized Video and Audio Generation

链接： https://arxiv.org/abs/2610.05608

项目主页： https://github.com/kandinskylab/kandinsky-6 ｜ 模型： https://huggingface.co/collections/kandinskylab/kandinsky-60-diffusers

作者 / 机构： Kandinsky Team（Julia Agafonova、Bulat Akhmatov、Mikhail Aksyutin、Grigorii Alekseenko 等，完整贡献者名单见论文末尾）（Kandinsky Lab）

一句话总结： Kandinsky Lab 发布 Kandinsky 6.0 Video，一个同步音视频生成的基础扩散模型家族（Lite 3B / Pro 29B），用双流 CrossDiT 把预训练视频流与新训音频流双向对齐，产出 5 秒、44 kHz 同步音频（含口型对齐）并可超分到 Full-HD，同时全量开源代码与权重。

研究问题： 文本到视频已经相当成熟，但「画面与声音一起生成」仍然落后：现有方案要么先出画面再配音（音画语义与时间难以真正对齐，口型尤其明显），要么干脆放弃音频。难点在于两个模态的成熟度完全不对等——视频侧已有强大的预训练骨干，音频侧没有。如果直接用共享权重联合训练，要么音频学不好，要么把已经很好的视频能力带坏。如何在保住视频原有保真度的前提下，让音频流从零长出来并与视频在时间、语义上严格对齐，是这个技术报告要解决的核心工程问题。

核心方法： ① 双流 CrossDiT 架构：一条预训练的视频流与一条从零训练的音频流，通过双向 cross-attention 连接，用于时间与语义对齐；两条流各自保留独立的表征能力。② 连续预训练策略（continuous pretraining）：先在大规模纯音频语料上从零把音频流训起来，再在配对音视频数据上联合训练两流——关键约束是保持单模态保真度不退化。③ 预训练之后接 SFT + 基于强化学习的后训练 + 蒸馏 三段式。④ 内置超分模型把输出分辨率抬到 Full-HD（1920×1080）。⑤ 支持 T2AV（文本到音视频）与 I2AV（图像到音视频）两种模式。

技术亮点：

  • 把「模态不对等」当成架构设计的第一约束，而不是当成一个需要被平均掉的小事。视频流冻结式复用 + 音频流从零学 + 双向 attention 做桥，这个组合比强行统一参数空间要务实得多，也直接决定了它能继承 Kandinsky 5.0 的视频底子。
  • 连续预训练里显式加了「单模态保真度」约束。联合训练最常见的失败模式就是强模态被弱模态拖累，把这一条写进训练目标而不是寄希望于数据配比，是工业级技术报告里少见的坦诚。
  • 蒸馏被放在后训练流水线的最后一环，与 SFT、RL 并列。这说明团队把「推理成本」当作发布指标而非事后优化——29B 的 Pro 如果没有这一步，开源出去也几乎没法用。
  • 44 kHz 同步音频 + 口型对齐 + Full-HD 三个指标同时给出，且 Lite / Pro 两档规模相差近 10 倍，给了不同算力预算的使用者清晰的选择空间。

实验结果： 论文以并排人工评测（side-by-side human evaluation）为主要结论：Kandinsky 6.0 Video Pro 明显优于其前代 Kandinsky 5.0 Video Pro，并与当前领先的音视频生成模型保持竞争力，尤其在语音质量上。论文定位为技术报告（arXiv comment 写明「Technical report on the open-source T2AV model」），核心贡献在于模型家族与开源发布，而非在自动指标上刷榜；写作时未从正文抓到可直接引用的分项自动评测数值，因此此处按摘要与结论的原话给出定性结论，不做数值估算。

应用场景： 短视频与广告素材的端到端生成（画面、配乐、人声一次出齐）；影视与动画的分镜预演（previs），尤其适合需要口型对齐的对话片段；游戏与虚拟人的实时内容生产；作为音视频联合生成的开源基座，供社区做可控编辑、风格化与下游微调。

研究价值： ⭐⭐⭐⭐（4/5）— 在音视频联合生成这个「大家都在做、但很少有人全量开源」的位置上，给出了一个 29B 规模且权重代码齐备的基座，实际推动力大于其方法新颖度。对做视频生成的人来说，它更重要的意义是验证了「强模态冻结 + 弱模态从零 + 双向桥接」这条继承式多模态扩展路线可行——这条路对任何想在已有视频基座上挂新模态的团队都有直接参考价值。

HLA-WM: Hybrid Linear Attention for Long-Horizon Video World Models

链接： https://arxiv.org/abs/2610.05739

项目主页： https://caesarhhh.github.io/hla-wm/

作者 / 机构： Zhuokun Chen, Feng Chen, Xi Lin, Xiyu Wu, Jiahao He, Jianfei Cai, Bohan Zhuang（Monash University；The University of Adelaide；浙江大学）

一句话总结： 莫纳什大学、阿德莱德大学与浙江大学团队提出 HLA-WM，一个免训练的混合线性注意力框架，通过缓存 chunk 级仿射摘要并用相机几何去「寻址」历史，为循环线性注意力补上可选址的长程记忆，在 60 秒上下文下历史状态存储仅为全 KV 缓存的 1/12，却把 PSNR 提升 0.74 dB、旋转误差降低 28.5%。

研究问题： 长程视频世界模型需要持久记忆来维持场景一致性。Softmax 注意力靠不断增长的 KV 缓存保留全部历史，代价是显存；循环线性注意力（如 Gated DeltaNet，GDN）把历史压进固定大小状态，代价是便宜但会忘。作者实证刻画了这个遗忘：GDN 的循环状态会被后续往往无关的状态转移逐步衰减——远处但相关的场景信息，在 chunk 级分析下呈现出清晰的、随转移次数累积的衰减。问题因此被精确地重述为：不是「线性注意力记不住」，而是「记住了但取不出来」。

核心方法： HLA-WM 是粗粒度几何检索 + 细粒度循环状态计算的混合体，完全免训练：① 缓存 chunk 级转移摘要——利用 GDN 的仿射结构，把每个 chunk 的转移压缩成紧凑摘要缓存下来（而不是存原始历史）；② 相机几何寻址——用相机位姿信息判断哪些历史 chunk 与当前查询的场景相关；③ 时序状态重组——把检索到的 chunk 按时间顺序重组成「查询专属」的循环状态，再交给原有的循环计算。

技术亮点：

  • 诊断极其干净：把「线性注意力长程不行」这个模糊说法，拆成了「chunk 级转移的累积衰减」这一个可观测、可量化的现象。有了这个诊断，解法才有明确的靶子。
  • 仿射结构是个被低估的杠杆。GDN 的状态更新是仿射的，意味着转移可以复合、可以缓存、可以重放——这等于免费获得了一个「可随机访问的历史索引」，而不需要额外训练一个检索器。这是全篇最漂亮的一步。
  • 用相机几何做检索信号，而不是学一个检索器。视频世界模型天然知道相机在哪儿，「哪些历史 chunk 曾看到过这片区域」是个纯几何问题。免训练因此成立，且不会引入额外参数与训练成本。
  • 免训练既是优点也是自陈的局限。作者在结论里明确写了：HLA-WM 目前免训练，这限制了可获得的上限，未来应把选择性状态检索整合进训练。这种自我限定在长程记忆的工作里不多见，也让后续方向一目了然。

实验结果： 在 60 秒的 SANA-WM-Bench 上，HLA-WM 无需任何额外训练就改善了基座自回归生成器的全部六项回访一致性与相机控制聚合指标，包括 PSNR +0.74 dB 与旋转误差降低 28.5%；该增益在下游精炼之后仍然存在。在 MBench-A 上，全部三项回访一致性指标在全部四个子集、全部评测推理模式下一致改善，覆盖 547 个样本。效率方面：60 秒上下文下历史状态存储比全 KV 缓存少 12 倍，而推理吞吐下降最多 1.6%。

应用场景： 需要长时间保持场景一致的交互式世界模型与视频世界模型（如可回头的自由相机探索）；具身智能体在长任务中的记忆管理；自动驾驶与机器人的长程视觉仿真；任何已经在用 GDN 类线性注意力、又不愿为长上下文付出全 KV 缓存显存的生成系统——它是个可以直接挂上去的免训练插件。

研究价值： ⭐⭐⭐⭐⭐（5/5）— 长程一致性是视频世界模型目前最硬的瓶颈，而这篇给出的是成本极低、机理清晰、且可组合的解法：不改生成器、不改检索规则、不训练，只改「历史怎么被重组」。1/12 存储、≤1.6% 吞吐损失换到 PSNR +0.74 dB 与旋转误差 −28.5%，这个性价比几乎不构成采用门槛。更重要的是它把问题定性为「可寻址的记忆」而非「更大的记忆」，这个转向会影响后续一批工作。

Keepsake: Selective Spatial Memory for Long-Horizon Video Generation

链接： https://arxiv.org/abs/2610.06588

作者 / 机构： Abdul Mohaimen Al Radi, Kunyang Li, Yuzhang Shang, Mubarak Shah, Yu Tian（中佛罗里达大学人工智能研究所 Institute of Artificial Intelligence, University of Central Florida）

一句话总结： 中佛罗里达大学团队提出 Keepsake，一个在线、免训练的定容空间记忆控制器，把每条观测的价值定义成关系量（它有多少强替代物）而非固有属性，从而在 15 条 180 秒轨迹上把 FVD 降低 35.1%，而记忆库只保留 32 条观测而非 5397 条。

研究问题： 长程相机可控视频生成依赖持久记忆来维持场景一致性。现有两条路线各有硬伤：全历史保留带来无界的存储与检索开销；选择性构建虽然降低了冗余，但只做一次留存决策就再不回头——而一条观测的价值，是会随记忆库本身的演化而变化的。两条路线共同留下一个没人回答的问题：随着生成历史演进，哪些已存的观测还应该继续留在记忆里？

核心方法： 关键洞察是——一条已存观测的价值不是固定的，而是关系性的，它取决于记忆库里当下有哪些替代品。被大量几何与视觉相似的替代物支撑的视角，放弃它几乎不损失覆盖；而替代物稀少的观测，无论多旧都该留下。具体实现：每次更新时，Keepsake 在「已保留观测」与「新生成观测」之上构建一张位姿—外观图（pose-appearance graph），把相机位姿邻近度与视觉相似度结合起来；保留优先级同时刻画「强替代物的数量」与「最近替代物的相似度」，从而实现对每条观测的持续重估。

技术亮点：

  • 把记忆管理从「准入问题」重定义为「维护问题」。既往的选择性记忆本质是个准入过滤器——进来时判一次，之后不再过问。Keepsake 的立场是：记忆库是个动态演化的集合，价值必须持续重估。这个转向和 HLA-WM 的「可寻址记忆」是同一个思想在不同层面的落地。
  • 关系性价值定义是真正的新东西。不按「年龄」「 novelty」「与当前的相似度」这类绝对量排序，而是按「有多少东西能替代我」排序——这是一个天然的、无需超参的覆盖度判据，且天然处理了「旧但唯一」与「新但冗余」两种反直觉情形。
  • 位姿 + 外观双通道图，而不是只用其中一个。相机可控生成里，「从同一个角度看」和「长得像」是两件不同的事，只用视觉相似度会在回访时误判，只用作位姿会在物体变化时失效。
  • 免训练、不换生成器、不改检索规则。这一点让结论非常干净：增益全部来自「留了谁」，而不是来自换了更强的模块。论文还专门做了诊断，区分了「被驱逐而丢失的证据」与「留着但没被检索选中的证据」，把归档维护定位为检索的补充而非替代。

实验结果： 在 MemCam 与 WorldMem 上评测。Keepsake 在不改动生成器与检索规则的前提下，相对完整保留改善了 FVD 与 LPIPS。在 15 条配对的 180 秒 MemCam 轨迹上，它在只保留 32 条观测（而非 5397 条）的情况下把 FVD 降低 35.1%。论文总结：选择性遗忘可以同时改善长程生成质量并大幅降低记忆与检索成本，优于全历史保留与各类有界基线。

应用场景： 长程相机可控视频生成与交互式世界探索（走远再回访的场景，正是这套机制的主场）；具身智能体的长期空间记忆；三维重建与 SLAM 中的关键帧管理——「替代物多的关键帧可以丢」这个判据在那里同样成立；任何受限于固定容量记忆库的生成式系统。

研究价值： ⭐⭐⭐⭐⭐（5/5）— 用一个近乎朴素的关系性判据，把「选择性记忆」从一次性启发式升级成了可维护的机制，并且给出了一个反直觉但极具说服力的数字：保留 32 条胜过保留 5397 条。这说明长程一致性的瓶颈从来不是「记得不够多」，而是「记得不够对」。对做长视频与世界模型的人，这篇和 HLA-WM 应该放在一起读——它们共同指向「记忆的维护比记忆的规模更重要」。

Kepler4D: Controllable Future Video Generation via 4D Scene State Evolution

链接： https://arxiv.org/abs/2610.04152

项目主页： https://brack-wang.github.io/kepler4d/

作者 / 机构： Feiran Wang（University of Illinois at Chicago）, Bin Duan（University of Michigan Ann Arbor）, Junyi Wu（University of Illinois at Chicago）, Gaowen Liu（Cisco）, Yan Yan（University of Illinois at Chicago，通讯作者）

一句话总结： 芝加哥伊利诺伊大学、密歇根大学与 Cisco 团队提出 Kepler4D，把未来视频生成表述为显式 4D 场景状态演化：从单目视频构建包含背景几何、物体运动史与语义上下文的共享三维表征，由 Chain-of-Motion 推理产出可检查、可编辑的未来物体轨迹，再渲染成几何控制信号交给预训练视频生成器。

研究问题： 视频世界模型既要保住场景结构，又要预测超出已观测画面的动态物体演化。现有做法大多在潜空间里直接「往前推」，问题是推出来的未来不可读、不可控、也不可改——你无法在渲染之前检查「那辆车到底会往哪开」，更无法把它的速度改掉。作者要的是把「未来」从潜变量里拿出来，变成一个显式的、可编辑的中间表示。

核心方法： ① 4D 场景状态构建：给定单目视频，构建共享三维表征，包含背景几何、物体运动史、粗粒度空间支撑与语义上下文。② Chain-of-Motion：先总结已观测到的运动，再用视觉语言模型选择结构化的速度与朝向决策，并判断是否需要从下方约束物体中心高度。③ 确定性 rollout：把这些决策转换成未来物体轨迹，在合成之前供检查与编辑。④ 几何控制渲染：把演化中的代理体（proxies）渲染成几何控制信号，喂给预训练视频生成器，从而把粗粒度物体运动与外观与关节运动的合成分离开。

技术亮点：

  • 把「未来的表示」从潜空间搬到显式三维轨迹，是本作最本质的选择。一旦未来是一组轨迹，它就天然可检查、可编辑、可反事实修改——这是潜空间 rollout 永远给不了的。
  • 用 VLM 做结构化决策，而不是让它直接生成视频。VLM 在这里的角色是「读运动史、给速度与朝向」，输出是离散的结构化决策而非像素。这个分工让语言模型的推理能力落在它擅长的地方。
  • 运动与外观的显式解耦：视频生成器只负责外观与局部关节运动，粗粒度物体运动由轨迹决定。这既降低了生成器要解的歧义，也让控制真正可控。
  • 「是否在下方约束物体中心高度」这个细节很见功力。物体不会沉到地面以下是个常识性物理约束，但很少有人把它做成由模型显式决策的选项——这类细节通常是「生成结果看起来怪但不报错」的根源。

实验结果： 在真实世界视频上评测。静态视角合成（DL3DV 基准）上，Kepler4D 相对 GEN3C、TrajectoryCrafter、SPMem 等基线给出有竞争力的整体结果：重建指标（PSNR / SSIM / LPIPS）与 FID 上的表现说明场景状态渲染更好地保留了目标视角下的场景结构，同时生成视角保留了更细的外观细节与视觉真实感；在 VBench 维度上，虽然 GEN3C 取得最高的 Motion Smoothness，但 Kepler4D 在大多数重建与 VBench 指标上更优，在目标相机运动下平衡了视角精度、视觉质量与场景一致性。效率上呈现运行时间—显存的权衡：峰值显存 62.46 GB（基线为 37.81–54.73 GB），但单片段推理时间最低，为 5.2 分钟。此外论文在静态渲染、自动动态演化与语言引导控制三类设定下均做了验证。

应用场景： 自动驾驶的场景预演（「如果那辆车变道会怎样」这类可编辑的反事实生成）；机器人操作前的视觉规划（先推理物体会怎么动，再决定抓哪）；交互式环境中的动作可控仿真；影视与游戏的分镜预演——尤其是需要在渲染前反复调整物体运动轨迹的场合。

研究价值： ⭐⭐⭐⭐（4/5）— 在「视频世界模型该把未来放在哪儿」这个问题上给出了一个清晰且可用的答案：放在显式 4D 轨迹里，而不是潜变量里。可读性与可编辑性是这条路的独有收益。扣分在于它付出了不小的显存代价（62.46 GB，高于全部基线），且生成质量仍受制于所挂载的预训练视频生成器。对做世界模型与可控视频生成的人，它的中间表示设计比它的指标更值得看。

RealtimeWAM: One-Step Asynchronous World Action Models

链接： https://arxiv.org/abs/2610.06617

代码： https://github.com/ModelTC/LightX2V/tree/main/examples/realtimewam

作者 / 机构： Chengtao Lv, Jinyang Du, Shuyi Feng, Yang Yong, Shiqiao Gu, Shunzi Yang, Ruihao Gong, Shen Ren, Tianwei Zhang, Wenya Wang（南洋理工大学 Nanyang Technological University；北京航空航天大学；商汤科技 Sensetime；大陆汽车新加坡 Continental Automotive Singapore）

一句话总结： 南洋理工、北航与商汤团队提出 RealtimeWAM，用 Teacher-Anchored Consistency Distillation（TACD） 把动作生成压到一步，用 Cross-Expert Wavefront Pipelining（CEWP） 消除视频/动作双专家的串行等待，在 LIBERO 上取得 97.0%、延迟低至 12.2 ms，H100 上端到端加速约 14–25 倍，性能损失不到 1%。

研究问题： World Action Models（WAM）借助视频生成骨干的视觉表征来指导动作预测。近期的高效 WAM 采用 MoT（Mixture-of-Transformers） 架构，让视频表征只算一次再复用于动作专家。但仍有两处效率瓶颈：专家内迭代（动作的多步去噪）与专家间等待（视频专家与动作专家串行执行）。前者可以靠步数蒸馏压掉，但这里有个陷阱——论文明确点出局部—全局误差鸿沟：局部一致性误差低，并不能保证最终动作准确。

核心方法： ① TACD（教师锚定一致性蒸馏）：在局部一致性之外，显式地用冻结教师的多步 rollout 终点做监督，补上「终点在哪」这个全局信息，从而使一步动作生成也准确。实现上：教师终点由冻结教师的 10 步 rollout 得到，教师锚定损失权重 λ = 0.2；冻结视频专家，只在动作专家上训练 rank-128 LoRA；AdamW、学习率 1e-4、权重衰减 1e-2、训练 30,000 步、EMA 衰减 0.995。② CEWP（跨专家波前流水）：通过按块共享视频 KV 缓存把两个专家重叠起来，只在对应的动作注意力即将消费它之前才做同步，从而消除不必要的专家级等待。

技术亮点：

  • 「低局部一致性误差 ≠ 准确的最终动作」这个诊断，是整篇最有价值的一句话。步数蒸馏在图像上之所以好用，是因为局部误差能较均匀地累积；在动作这种末端决定性的输出上，中间每一步都「差不多」恰恰可能累积成终点的大偏差。补一个教师终点约束，本质上就是把监督的粒度对齐到真正被衡量的那个量。
  • TACD + CEWP 分别打在两个正交的瓶颈上，且互不干扰：一个管「算几次」，一个管「等多久」。这也是为什么它能同时拿到 <1% 的性能损失与十几倍的加速。
  • 波前流水（wavefront pipelining）的同步点选得很克制：只在动作注意力真正要读的那一刻同步，而不是每块结束就同步。细粒度同步是让两个异构专家真正重叠起来的关键。
  • 公平对比做得到位：DMD、一致性蒸馏、MeanFlow 蒸馏全部采用相同的训练设置再比；同时与 Flash-WAM、Light-WAM 等高效 WAM 对照；延迟评测计入 VAE 编码时间、排除文本编码时间（指令每 episode 只编码一次），这个口径说明得很清楚。

实验结果： 在 LIBERO、RoboTwin 2.0 与 LIBERO-Plus 上评测，基于 Fast-WAM 与 Faster-WAM 两个变体。RoboTwin 2.0：一步生成的 RealtimeWAM 取得 90.84%，相对 10 步 Fast-WAM 仅下降 0.67%；Faster-WAM 变体为 92.64%，下降仅 0.29%；显著优于一步 Flash-WAM（81.41%）与 DMD（88.22%）。LIBERO：一步取得 97.0% 总体成功率，与 10 步 Fast-WAM 持平；相比直接把 Fast-WAM 降到单步（95.0%）提升 2.0 个百分点；优于一步 Flash-WAM（95.1%）与 DMD（96.1%），与 Light-WAM（97.2%）相当。速度：实现实时动作生成（例如 12.2 ms 延迟），在 H100 上端到端加速约 14–25 倍，跨多种硬件均有显著加速，整体性能损失 <1%。

应用场景： 需要高频闭环的机器人操作系统——一步动作 + 异步流水意味着控制频率可以大幅提高，这对接触丰富、需要快速反应的操作尤其关键；边缘设备上的具身智能部署（冻结视频专家 + 动作侧 LoRA，训练与显存成本都低）；任何基于 MoT 架构的 WAM/VLA 推理栈，TACD 与 CEWP 都是可以直接搬的加速模块。

研究价值： ⭐⭐⭐⭐⭐（5/5）— WAM 的效率竞争已经从「换更轻的骨干」进入「抠执行调度」的阶段，这篇是这个转折点上做得最完整的工作：两个瓶颈、两个正交解法、三个基准、公平对比齐全，且 <1% 损失换 14–25 倍是可以直接落地的数字。另外，它关于「局部一致性不等于终点准确」的诊断，对所有把扩散蒸馏用到动作输出上的工作都成立，其影响超出 WAM 本身。

ForeAct3D: Policy-Grounded Future World Modeling for VLA Policies

链接： https://arxiv.org/abs/2610.04607

代码： https://github.com/anthonytao80-crypto/ForeAct3D

作者 / 机构： Zhe Tao（University of Illinois Urbana-Champaign）, Feiran Wang（University of Illinois Chicago）, Gaowen Liu（Cisco）, Ramana Rao Kompella（Cisco）, Yan Yan（University of Illinois Chicago）

一句话总结： UIUC、UIC 与 Cisco 团队提出 ForeAct3D，让 VLA 策略内部的世界模型由策略自己即将执行的动作块来锚定，并用背景静止性与实例级刚体性这类物理一致性约束把当前与未来三维语义状态扣在一起，无需机器人预训练即在 LIBERO 上取得 98.3%、CALVIN 平均任务长度 3.73。

研究问题： 机器人需要预见自己的动作会如何改变世界，因为操作成败取决于随之产生的接触与物体运动。但现有的 VLA 世界模型从共享特征里预测未来观测时存在两个脱节：一是预测与策略真正会执行的动作无关（预测的是「一般会怎样」，而不是「我这么干会怎样」）；二是没有对场景如何演化施加任何物理约束（预测出一个物体穿模、背景漂移的未来，训练时也不会被惩罚）。结果是这类未来预测对动作生成的帮助有限。

核心方法： ① 可学习几何查询：从策略表征中解码深度、语义分割与相机位姿，得到当前与未来两套语义三维场景状态。② 动作条件化的未来查询：未来查询以策略生成的动作块为条件，把预测锚定在「计划中的那次交互」上。③ 物理一致性闭环（physical-consistency closure）：用背景静止性与实例级刚体性把当前与未来两个状态关联起来，并把腕部相机位姿锚定到末端执行器运动学。④ 这些目标只在训练时塑造用于动作生成的共享表征；推理时不需要任何未来预测。

技术亮点：

  • 「未来预测必须以策略自己的动作为条件」这一点，听着像常识，却是当前 VLA 世界模型的普遍漏洞。预测「一般会怎样」学到的是场景的边际演化，而操作需要的是「我这么干会怎样」的条件演化。这一条足以解释为什么很多 VLA 里的未来预测模块增益有限。
  • 物理一致性闭环提供了无需额外标注的稠密监督。背景静止、实例刚体、腕部相机位姿与末端位姿一致——这些都是免费的、可从几何本身读出的约束，不需要人标注未来真值。等于把「未来预测」从「需要未来数据的监督任务」变成了「可用当前几何自洽来约束的任务」。
  • 只在训练时生效，推理零开销。这是它能直接叠加到现有 VLA 上的关键：世界模型在这里的角色是表征整形器，不是推理时的额外模块。
  • 腕部相机位姿锚定到末端运动学是个很具体的抓手，把「相机在哪」这个通常被忽略的量也纳入了物理约束，避免了未来状态在相机位姿维度上的自由漂移。

实验结果： 在 LIBERO 与 CALVIN 上评测操作性能。LIBERO：单模型覆盖四个套件时取得 98.3% 平均成功率，为该协议下列出方法中的最高，比基座策略 StarVLA-OFT 高 1.7 个百分点，四个套件全部有增益，其中 Goal 与 Long 提升最大。CALVIN（ABC→D 设定，聚焦无机器人预训练的方法）：平均任务长度从 2.94 提升到 3.73，超过全部列出的无机器人预训练方法，包括从头训练的 Seer（3.64）。消融显示语义三维监督、物理一致性、动作条件化三者各自都有贡献，互为补充。真机：三个桌面任务的累积消融把平均成功率从 6.7% 提升到 37.8%，动作条件化在评测试验中改善了目标区域的保持。

应用场景： 需要长程规划与接触推理的桌面操作（LIBERO / CALVIN 类）；机器人预训练数据稀缺、只能从零训策略的场景——这篇特别强调「无机器人预训练」下的增益；工业分拣与装配中对物体最终位姿有严格要求的任务；作为现成 VLA 的训练期插件，用于改善共享表征的几何与物理结构。

研究价值： ⭐⭐⭐⭐⭐（5/5）— 这篇正面回答了「VLA 里的世界模型为什么常常不奏效」：因为预测没有被动作锚定，也没有被物理约束。两个补丁（动作条件化 + 物理一致性闭包）都不需要未来真值标注，且推理零开销，这让它具备很强的可移植性。真机上 6.7% → 37.8% 的累积消融幅度，说明这类约束在仿真之外的收益可能比仿真里更大。做具身世界模型与 VLA 的人应当把它当成一条基线对照：你的未来预测，到底有没有被「要执行的动作」条件化？

VLA-ZO: Fast Zeroth-Order Adaptation for Vision-Language-Action Models

链接： https://arxiv.org/abs/2610.06271

作者 / 机构： Jaemin Kim, Jiahn Kim, Taesik Gong（通讯作者）（UNIST 蔚山科学技术院 Ulsan National Institute of Science and Technology）

一句话总结： UNIST 团队提出 VLA-ZO，把零阶（zeroth-order）优化做成 VLA 部署期可用的适配方案：只在动作侧做适配、冻结视觉语言前缀并跨扰动查询与优化步复用其条件状态，在 LIBERO 相机视角偏移上把端到端适配时间缩短 25.59×（q=16）/ 32.54×（q=64），成功率从 48.27% 提升到 58.17% / 63.58%。

研究问题： 让 VLA 适配部署期的分布偏移对可靠运行很重要，但常规一阶适配的显存开销会超出推理型部署平台的预算——反向传播要存激活，而边缘设备往往只有「推理级」的显存。零阶优化提供了一条只做前向的替代路径，显存等同于推理；但准确估计梯度需要大量扰动查询，朴素 ZO 对大模型来说慢到不可用。于是问题变成：能不能让 ZO 快到「大查询预算」也变得实际？

核心方法： VLA-ZO 利用 VLA 计算结构本身来加速：① 只在动作侧适配——把适配范围限制在动作侧，昂贵的视觉语言前缀保持冻结；② 跨扰动查询与优化步复用前缀的条件状态——同一个前缀状态被所有扰动查询和多个优化器步骤共享，不再重复计算；③ 调度感知预取（schedule-aware prefetching）——把状态传输开销隐藏起来。三者叠加，直接把前向次数里最大头的那部分消掉了。

技术亮点：

  • 抓住了 VLA 的计算结构特征：VL 前缀是共享的，动作侧才是变的。扰动只加在参数上，而 VL 前缀的参数被冻结——这意味着它的输出对所有查询都一样，本来就没必要重算。朴素 ZO 的浪费恰恰在于每次扰动都走一遍全流程。
  • 「速度可以直接兑换成适配质量」是这篇最有启发性的论点。在固定时间预算下，ZO 的估计质量取决于查询方向数 q；更快的执行 ⇒ 更大的 q ⇒ 更好的梯度估计。这让「加速」不再是单纯的效率优化，而是质量优化。论文结论段明确强调了这一点。
  • 显存对齐到推理级，这是 ZO 相对一阶方法的根本优势，也是它在部署平台上唯一的生存理由。VLA-ZO 没有为了速度牺牲这个优势，反而在保持它的前提下提速 25–32 倍。
  • 评测协议设计得很实：采用 DART 的**场景级一次性（scene-wise one-shot）**协议，每个场景只用五条专家演示，且测试三档相机偏移（Small / Medium / Large）外加 Medium 与模糊、光照变化的复合偏移；40 个任务 × 每任务 40 个初始状态 = 1600 episode；初始状态索引 0–9 因用于学习率选择而被排除，避免选超参污染结果。

实验结果： 在 LIBERO 相机视角偏移上评测 π₀.₅ 与 OpenVLA-OFT（40 个任务，Spatial / Object / Goal / LIBERO-10 四个套件）。相对基线 ZO，VLA-ZO 把端到端适配时间缩短 25.59 倍（q=16）与 32.54 倍（q=64）；同时平均任务成功率从无适配的 48.27% 提升到 **58.17%（q=16）**与 63.58%（q=64）。论文的执行消融在固定查询预算下逐步启用「步内复用 → 跨步复用 → 调度感知预取」，验证三者各自贡献。对比基线包括未适配策略、FLA 与 DART。

应用场景： 边缘与嵌入式平台上的 VLA 部署期在线适配（显存只够推理、跑不动反向传播的场景）；机器人遇到相机被碰歪、光照改变、场景换了一批物体时的一次性快速自适应；多机器人 fleet 中每台设备各自适配自己的视觉条件；任何需要在不改动推理栈显存预算的前提下做模型更新的场合。

研究价值： ⭐⭐⭐⭐（4/5）— 把一个长期被认为「理论优雅但工程不可行」的方向（零阶优化做大模型适配），通过利用 VLA 的结构特性做到了 25–32 倍提速，从而让大查询预算变得实际。它真正的贡献不只是速度，而是把「快」与「准」在固定时间预算下统一了起来——这个论点对整个 test-time adaptation 方向都成立。扣分在于目前的验证集中在相机视角偏移这一类视觉分布偏移，跨任务、跨机型的适配效果还有待观察。

AgenticTactileVLA: Contact-Guided Execution-Time Supervision for Generalizable Dexterous Manipulation without VLA Retraining

链接： https://arxiv.org/abs/2610.04391

作者 / 机构： Elizaveta Semenyakina, Ivan Snegirev, Mikhail Kiselev, Miguel Altamirano Cabrera, Artem Lykov, Hajira Amjad, Dzmitry Tsetserukou（斯科尔科沃科技学院智能空间机器人实验室 Intelligent Space Robotics Lab, Skolkovo Institute of Science and Technology；MWS 研发中心 R&D Center, MWS）

一句话总结： 斯科尔科沃科技学院团队提出 AgenticTactileVLA，一个执行期监督器：固定 VLA 只负责给出接近位与手部目标，监督器依据手指位置与电机力矩这类本体接触证据，决定保持透明、修正手指屈曲、保留或释放修正后的构型、交还 VLA 重试、或切换到柔顺手部控制——既不需要触觉传感器，也不需要重训 VLA，在五个 VLA 训练中未见过的物体上把完成率从 61.3% 提到 84.0%。

研究问题： VLA 策略可能预测出一条可迁移的操作策略，却在真正碰到的那个物体上失败：适配同一种抓法的物体在几何与顺应性上各不相同，而视觉反馈在手指闭合遮挡下会显著退化。问题的症结在于，物体特异的适配被错误地压给了「预测」这一侧——而它本该在物理交互中解决。换句话说：同一套抓握意图，遇到硬壳与软囊，需要的收拢程度与力度完全不同，这件事在看到之前是判不准的。

核心方法： AgenticTactileVLA 被设计成一个执行期监督器（execution-time supervisor），把一部分物体特异性适配从「预测」搬到「物理交互」：① 固定的 VLA 提供接近轨迹与手部目标；② 监督器在每个决策点选择五种行为之一——保持透明（不干预）、修正手指屈曲、保留或释放已修正的构型、把控制权交还 VLA 重试、或选择柔顺手部控制模式；③ 它用手指位置与电机力矩反馈作为本体感受式的接触证据，因此既不需要触觉传感器，也不需要重训 VLA。

技术亮点：

  • 把适配的分工重新划了一遍：VLA 管「做什么」，监督器管「做多重」。这是一个非常清醒的职责切分——策略层面的东西是可迁移的、该由 VLA 学；物体层面的东西是接触时才暴露的、该在交互中解决。
  • 用电机力矩当触觉。这是全篇最实用的一点：绝大多数灵巧手平台都没有触觉传感器，但都有电机电流。把电流当作接触证据，等于让这套方法能直接落到现有硬件上，而不是停留在需要改装手的实验室设定里。
  • 「保持透明」作为显式选项很重要。监督器不是全程接管，而是选择性触发——消融显示选择性触发把修正次数降低 65.7% 而完成率无可检测变化，说明大部分时候它确实该闭嘴。
  • 「保留或释放修正构型」这个选项承认了历史依赖性：同一个物体在这一次抓握中已经被修正过，下次再遇到是否沿用？把它做成显式决策，而不是每次从零判断。
  • 评测是随机配对的区组设计（randomized matched-block），五个物体全部从 VLA 训练中留出（held out），且增益在中等位姿扰动下依然存在——这两条合起来才让「泛化」这个说法站得住。

实验结果： 在 Unitree G1 配 BrainCo Revo2 灵巧手上评测，采用随机配对区组设计，五个物体均从 VLA 训练中留出。在共享预算下：基座 VLA 完成率 61.3%，无条件 close-to-stall 控制 72.0%，监督器 84.0%。增益在每一个物体上都为正，且在中等位姿扰动下依然存在。消融表明该增益不能仅由延长闭合时间来解释；选择性触发把修正 episode 减少 65.7%，而完成率无可检测变化。保留度审计（retention audit）显示接受（acceptance）可预测保留。

应用场景： 灵巧手抓取同类但材质/尺寸/顺应性各异的物体（工业分拣中的异形件、农产品、医疗器械）；没有触觉传感器但有机电力矩反馈的现有机器人平台——这是最大的落地优势；需要在不重训大模型的前提下快速提升新物体成功率的产线场景；服务机器人处理未见过的日常物品。

研究价值： ⭐⭐⭐⭐（4/5）— 在「VLA + 触觉」这个方向普遍走向「加传感器、加预训练、加流程」的时候，这篇反其道而行：不加传感器、不重训，只加一个执行期的薄监督器，在五个未见物体上拿到 61.3% → 84.0%。它的价值不只是性能数字，而是提出了一个更省的分工范式——让预测负责可迁移的部分，让交互负责物体特异的部分。对做触觉智能与灵巧操作的人，这篇值得作为「最小改动方案」的对照基线。

📊 今日研究趋势

第一条主线：长程一致性的战场已经转移到「记忆维护」。 本期最值得注意的，是 HLA-WM 与 Keepsake 两篇独立工作给出了高度一致的诊断与结论。它们都拒绝「把记忆做大」这条老路，转而问「记住的东西是否仍值得记」。HLA-WM 指出 GDN 的循环状态会被后续无关转移稀释，解药是缓存 chunk 级仿射摘要并用相机几何寻址——把「记不住」重述为「取不出」；Keepsake 指出选择性记忆只做一次准入判断就再不回头，解药是把观测价值定义成关系量（有多少强替代物）。更惊人的是它们的工程结论也一致：Keepsake 用 32 条观测打赢 5397 条（FVD −35.1%），HLA-WM 用 1/12 的存储打赢全 KV 缓存（PSNR +0.74 dB、旋转误差 −28.5%，吞吐仅损失 ≤1.6%）。两条路都是免训练、不换生成器的，这意味着「记忆维护」已经可以作为独立模块被插到既有系统里——这是它会被快速跟进的直接原因。

第二条主线：世界模型的效率瓶颈，已经从骨干转移到执行调度。 RealtimeWAM 是个标志性工作：它不再试图换一个更轻的骨干，而是把 MoT 架构下两个正交的浪费逐一拆掉——专家内迭代（动作多步去噪，用 TACD 压到一步）与专家间等待（视频/动作专家串行，用 CEWP 按块共享 KV 缓存做波前流水）。结果是 <1% 的性能损失换 H100 上 14–25 倍加速、12.2 ms 延迟。这里最有迁移价值的是它对蒸馏失败模式的诊断：局部一致性误差低 ≠ 最终动作准确——因为动作的成败由终点决定，中间每一步「差不多」会累积成终点的大偏差。补一个冻结教师的 rollout 终点约束就把监督粒度对齐了。这条诊断对所有把扩散蒸馏用在动作输出上的工作都成立。

第三条主线：VLA 的监督信号正在向「物理可核验」靠拢。 ForeAct3D 给出了这个方向最完整的答案：它指出 VLA 里的未来预测之所以常常无效，是因为既没有被策略真正要执行的动作锚定，也没有被物理约束。它的两个补丁都不需要未来真值——未来查询以动作块为条件（预测「我这么干会怎样」而非「一般会怎样」），物理一致性闭包用背景静止性、实例级刚体性、腕部相机与末端运动学的一致性来约束，且只在训练时生效、推理零开销。结果是 LIBERO 98.3%、CALVIN 平均任务长度 2.94 → 3.73，真机三个任务的累积消融更是从 6.7% 拉到 37.8%。同期 AgenticTactileVLA 从另一端走向同一目标：它把「物体特异性适配」从预测侧搬到交互侧，用电机力矩这类本体证据当接触判据，不加触觉传感器、不重训 VLA 就把五个未见物体的完成率从 61.3% 提到 84.0%。两者共同说明：能免费从物理世界里读出来的约束，比额外的标注与额外的模型更有效。

第四条主线：基础设施与基座层面的开源仍在稳步推进。 Kandinsky 6.0 Video 给出了 3B / 29B 两档、5 秒 44 kHz 同步音频（含口型对齐）、可超分到 Full-HD 的音视频联合生成家族，并全量开源代码与权重。它的方法论价值在于「强模态冻结复用 + 弱模态从零学 + 双向 cross-attention 桥接」这条继承式多模态扩展路线——对任何想在已有视频基座上挂新模态的团队都有直接参考意义。同时它把蒸馏明确写进后训练流水线（SFT → RL → 蒸馏），说明开源方已经把「推理成本」当作发布指标而非事后优化。

🏆 最值得关注的 3 篇

  1. Keepsake（2610.06588） — 用一个近乎朴素的关系性判据，把「选择性记忆」从一次性启发式升级成了可维护的机制，并给出了一个极具说服力的反直觉数字：保留 32 条观测胜过保留 5397 条，FVD 反而降 35.1%。它说明长程一致性的瓶颈从来不是「记得不够多」，而是「记得不够对」。免训练、不换生成器、不改检索规则，增益全部来自「留了谁」——结论干净到几乎不容辩驳。做长视频、世界模型、乃至 SLAM 关键帧管理的人都该读。

  2. HLA-WM（2610.05739） — 长程一致性目前最硬的瓶颈上，成本最低、机理最清晰的解法。它把「线性注意力长程不行」精确拆成「chunk 级转移的累积衰减」，然后利用 GDN 的仿射结构免费获得一个可随机访问的历史索引，用相机几何去寻址。1/12 存储、≤1.6% 吞吐损失换 PSNR +0.74 dB 与旋转误差 −28.5%，且在 MBench-A 四个子集、全部推理模式、547 个样本上一致改善。这个性价比几乎不构成采用门槛，可以直接挂到任何用 GDN 类线性注意力的生成系统上。

  3. ForeAct3D（2610.04607） — 正面回答了「VLA 里的世界模型为什么不奏效」：预测没被动作锚定，也没被物理约束。两个补丁都不需要未来真值标注，且推理零开销，具备很强的可移植性。真机三个任务累积消融 6.7% → 37.8% 的幅度，说明这类约束在仿真之外的收益可能更大。它应当成为一条基线对照——你的未来预测，到底有没有被「要执行的动作」条件化？

数据来源：ArXiv Tue, 6 Oct 2026 公告批次（去重后 1252 篇；出刊日 2026-10-07）｜分析生成时间：2026-10-07 06:00 (北京时间)