📅 本期精选来自 2026-09-03 ArXiv 最新论文,聚焦交互式视频世界模型的"开放基座"化、把 3D 几何注入世界动作模型、VLA 跨本体迁移的量化归因、长程操作中语义意图与连续控制的解耦、世界模型在人形运动中的预测性表征价值,以及世界模型训练目标从"重建得像"转向"判别得出"的范式迁移,共 8 篇。


📄 论文精选

SolarWM: Open Data and Scalable Training for Long-Horizon Video World Models

链接: https://arxiv.org/abs/2609.02886

项目主页: https://junchao-cs.github.io/SolarWM-Web/ | 代码: https://github.com/Junchao-cs/SolarWM/tree/main | 数据: https://huggingface.co/datasets/junchaoh-cs/SolarWM-Data 作者 / 机构: Junchao Huang, Guian Fang, Shengju Qian, Xianghao Kong, Zhuoran Zhao, Wei Huang, … , Mike Zheng Shou, Li Jiang(CUHK-SZ、SLAI、NUS、CUHK、HKUST、HKUST-GZ、NVIDIA、UCLA、MSRA)

一句话总结: 多校联合团队发布 SolarWM,用统一数据契约 + 主干原生适配框架把 10 个数据集的 143 万条片段与 Wan2.2 / LTX-2.5 / MiniMax-H3 三种异构视频主干解耦,训练出可实时交互、能推演数分钟到数小时的长程视频世界模型,并全栈开源。

研究问题: 交互式视频世界模型的训练长期被"数据—主干"的强耦合卡住:不同数据集在时间尺度、相机几何、画质、运动分布与标注风格上差异巨大,不同视频生成器又各有 latent 表示与架构。朴素混数据 + 逐模型定制实现,既导致监督信号不一致,也让结果难以复现和横向比较。

核心方法: 两个层次的"解耦 + 统一"。① 可重构多源数据引擎:把 10 个数据集的 143 万条规范片段转换成统一的帧对齐契约,覆盖视觉观测、度量级(metric)相机几何、字幕、质量元数据、筛选决策与数据溯源,同时把"数据源处理"与"混合配比构造"解耦。② 主干原生适配框架(backbone-native adaptation):在共享的相机条件化、训练与推理接口下,实例化 4 个 5B–33B 模型(基于 Wan2.2、LTX-2.5、MiniMax-H3),并各自保留其原生表示与训练目标,而非强行统一架构。训练采用三阶段配方:双向适配(bidirectional adaptation)→ 教师强制的自回归初始化 → 分布匹配蒸馏(distribution matching distillation)。

技术亮点:

  • 统一契约把"度量相机几何"提升为一等公民,使跨数据集的相机条件化监督可对齐,这是长程交互一致性的前提。
  • 主干原生适配允许在同一套流程下公平比较 5B–33B 不同规模、不同架构的视频生成器,把"架构选择"变成可消融变量。
  • 三阶段配方中以 分布匹配蒸馏 收尾,把双向模型转成因果(causal)模型,兼顾长程稳定与实时性。
  • 只用 5 秒序列训练,却能在推理时维持数分钟到数小时的 rollout 交互,长程外推能力是核心卖点。
  • 数据、pipeline、配方、权重、框架全部开源,直击该领域可复现性痛点。

实验结果: 在共享接口下成功实例化基于 Wan2.2、LTX-2.5、MiniMax-H3 的 4 个 5B–33B 模型;所得因果模型支持分钟级至小时级 rollout 的实时交互,而训练仅使用 5 秒片段。

应用场景: 交互式世界模型研究的可复现基座; embodied 智能体的长程想象与规划;游戏 / 仿真环境的生成式动力学;相机可控长视频生成。

研究价值: ⭐⭐⭐⭐⭐(5/5)— 本期分量最重的一篇。它不追求单点指标刷新,而是把"长程交互式视频世界模型"从各家自制的封闭流水线变成可比较、可复现的开放基座。对用户关注的可控视频生成与世界模型方向,这套统一相机几何契约 + 蒸馏转因果的配方具有很高的可借鉴性;143 万片段的开源数据也降低了跟进门槛。同时被 Hugging Face Daily Papers 收录(133 票),社区热度印证其价值。


Spatially Aware World Action Model via Geometric Latent Diffusion

链接: https://arxiv.org/abs/2609.02531

项目主页: https://jlopetegui98.github.io/projects/sa_wam.html 作者 / 机构: Javier Alejandro Lopetegui Gonzalez, Paul Pacaud, Cordelia Schmid(Inria 与法国巴黎高等师范学院(ENS)计算机系,PSL Research University)

一句话总结: Inria / ENS Paris 团队提出 SA-WAM,用非线性深度编码把无界度量深度塞进冻结 VAE tokenizer 的有界输入域,在单一扩散主干内联合预测动作、RGB 与深度,让世界动作模型首次具备 3D 空间感知。

研究问题: World Action Models(WAMs)借助大规模预训练视频扩散模型联合预测未来观测与动作,继承了互联网级视频的视觉与物理先验,已成为机器人策略学习的重要范式。但现有 WAM 只吃 RGB 观测,完全不利用 3D 信息;而 3D 感知的 VLA 策略已证明几何在操作密集任务中至关重要。如何在不破坏预训练先验的前提下把空间感知引入 WAM,是本文要解的题。

核心方法: 沿用 latent-frame injection 策略(把隐视频扩散模型适配为视动策略),将深度作为额外的 latent frames 注入 DiT 的 latent 序列,与 RGB 观测一起由同一个冻结的预训练 VAE tokenizer 处理。关键难点在于无界的度量深度与 VAE 期望的有界输入域不匹配。SA-WAM 采用非线性深度归一化:受扩散式深度估计中的非线性参数化启发,压缩远场、保留近场分辨率——因为操作精度恰恰在近场最要紧。这样无需任何 3D 专用微调或额外的模态编码器,即可复用 tokenizer 并保住预训练先验。

技术亮点:

  • 深度作为"额外 latent 帧"而非额外通道,天然复用视频主干的时空注意力,架构改动极小。
  • 非线性深度编码是一个"免费"的归纳偏置:远场压缩省容量、近场保精度提操控。
  • 明确消融了世界模型预测质量与 rollout 成功率的相关性,为 WAM 的改进方向给出实证依据。
  • 单一扩散主干同时输出动作、RGB 与深度,训练与推理都不引入多阶段流水线。

实验结果: 在 RoboCasa 与 LIBERO-Plus 上取得 state-of-the-art,同时未来状态预测质量也同步提升。RoboCasa 上仅用每任务 50 条演示即达 76.6% 成功率,比同等配置的 Cosmos-Policy 基线高 9.5 个百分点,且超过了用 6–20 倍数据训练的先前方法。在 UR5 机械臂真机评测中同样超越强基线,在随机化环境中增益尤为明显。

应用场景: 操作密集型机器人策略学习;需要精确接触与几何推理的装配 / 插拔任务;把空间智能引入通用世界动作模型。

研究价值: ⭐⭐⭐⭐⭐(5/5)— 精准命中"世界模型 + Spatial Intelligence"的交叉点。它的价值不在于堆模块,而是用一次巧妙的输入域重参数化,让 3D 信息零成本进入冻结的视频扩散先验。数据效率上"50 条演示打赢 6–20 倍数据"的结果,对算力受限的机器人学习场景极具说服力。


ZETA: A Controlled Study of Zero-Shot Cross-Embodiment VLA Transfer for Tabletop Manipulation

链接: https://arxiv.org/abs/2609.02546 作者 / 机构: Mi Yan, Wenhao Zhang, Zhiqi Zhang, Yu Peng, Tangxinyu Wang, Lingfei Zhai, … , Zhizheng Zhang, He Wang(Galbot、北京大学计算机学院 CFCS、北京大学、中国人民大学、厦门大学马来西亚分校、香港大学)

一句话总结: 北大 / Galbot 等团队建立 ZETA 受控基准,首次清晰区分"严格零样本"与"预训练暴露过"两种跨本体迁移,在 14 个留出本体上量化了状态-动作表示、本体多样性、辅助共训练与目标本体暴露四类因素的贡献。

研究问题: 随着机器人硬件快速迭代、按本体采集数据成本高昂,VLA 对未见本体的零样本泛化变得关键。但文献对该问题缺乏统一定义,也缺少能把"本体变化"与任务、场景、评测协议差异隔离开的受控评测环境,导致很多结论不可比、不可归因。

核心方法: 先是定义层面的澄清:区分 strict zero-shot transfer(目标本体完全不出现在任何训练数据中)与 pretrain-exposed zero-shot transfer(目标本体只在预训练阶段出现过)。进而构建覆盖 14 个留出目标本体 的受控基准,含仿真与真实世界验证,并在此框架内对四个因素做受控分析:状态-动作表示、预训练本体多样性、辅助共训练目标、目标本体暴露程度。

技术亮点:

  • “严格 vs 预训练暴露"的二分法直击该领域评测口径混乱的病根,使既有文献结论可被重新归档。
  • 14 个留出本体的规模在同类研究中罕见,且仿真 + 真机双重验证。
  • 不是提新模型,而是给出可操作的配方增益:每类因素贡献多少百分点,一目了然。
  • 揭示"目标本体 5% 数据"这一低成本杠杆的实际收益。

实验结果: 局部末端执行器(EEF)状态-动作表示、源本体多样性、辅助共训练分别带来约 15、18、7 个百分点 的跨本体迁移提升。仅在预训练阶段加入 5% 目标本体数据,即可将目标本体平均任务进度提升 13.4 个百分点。

应用场景: 通用机器人策略的本体迁移评估;新硬件接入时的 VLA 适配策略制定;跨本体数据集构建与配比决策。

研究价值: ⭐⭐⭐⭐(4/5)— 典型的"把领域从玄学变成工程"的工作。在多本体 VLA 喧嚣的当下,这篇给出的量化归因(尤其是"5% 目标数据换 13.4 个百分点”)对实际部署极具指导意义。扣分点在于它是一篇受控研究而非新方法,结论的适用边界还需后续在不同任务族上复核。


HINT: Human-Intent Inception for Long-Horizon Robot Manipulation

链接: https://arxiv.org/abs/2609.02653

项目主页: https://robot-hint.github.io/ 作者 / 机构: Mingyu Mei, Haojie Xu, Shihao Jin, Zibo Dai, Qihao Cheng, Zhengrui Lv, … , Huiliang Shen, Zaixing He(浙江大学、上海交通大学、Noematrix、EndlessAI)

一句话总结: 浙大 / 上交等团队提出 HINT,借鉴人类操作规律——语义意图只在操作模式切换时稀疏变化、连续控制主要依赖演化的"手-物"关系——只在模式转换点调用语义推理,其余时刻用多视角定位与视觉追踪维持意图承诺,从而抑制 VLA 走视觉捷径。

研究问题: 人类能凭一句总体意图完成复杂操作,并持续适配不断变化的视觉观测。但当前 VLA 模型在"稠密演化的视觉输入 + 稀疏的语言指导"下难以实现这种高层智能:视觉相关性会压过语义意图,导致动作追随视觉捷径而非人类真实目标。

核心方法: HINT(Human-INTent INcepTion)是一个 agentic 框架,其设计公理是:语义意图在操作模式转换处稀疏变化,而连续控制主要依赖物体-手部关系的演化。据此,HINT 只在模式转换点唤起语义推理以解析当前子任务与目标,随后通过多视角 grounding 与视觉追踪维持这一承诺(commitment)。为把追踪到的意图传递给动作策略,论文探索了两种视觉接口:图像空间语义高亮与注意力先验注入——两者都不向基础动作模型引入任何额外可训练参数。

技术亮点:

  • “意图稀疏变化 + 控制连续演化"的时间尺度解耦,是对 VLA 何时该"想”、何时该"做"的清醒建模。
  • 零参数侵入:通过视觉接口而非微调来注入意图,可直接叠加在任意基础动作策略之上。
  • 多视角 grounding 缓解单视角遮挡导致的意图漂移。
  • 保持低延迟,具备实际部署可行性。

实验结果: 在三个长程任务及其分布外变体上,HINT 在两种基础策略(foundation policies)上均显著提升了意图理解、任务进度与端到端成功率,同时保持低延迟。

应用场景: 长程机器人操作;语言指令稀疏的真实家务 / 工业任务;在既有 VLA 之上叠加意图层而无需重训。

研究价值: ⭐⭐⭐⭐(4/5)— 抓住了 VLA 落地的真实痛点(视觉捷径),且方案工程上克制——不动基础模型权重、不改训练流程。这种"外挂式意图层"思路对想复用现成 VLA 的团队很友好。若后续能在更多基础策略与更长的任务链上验证,价值会更高。


World-Model-Augmented Visual Locomotion for Humanoids on Foothold-Constrained Terrain

链接: https://arxiv.org/abs/2609.02542 作者 / 机构: Yuxi Liu, Lijun Han, Ziming Wang, Ao Zhang, Cong Yang, Wei Sui(地平线机器人 D-Robotics、北京邮电大学、哈尔滨工业大学、苏州大学;前两位作者同等贡献)

一句话总结: 团队提出 WM-LOCO,联合训练循环世界模型与 PPO 策略,仅凭本体感知与单张机载深度图产出预测性循环特征来引导策略,无需显式足点标签,即在 Unitree G1 人形机器人上以 93.3% 平均成功率通过踏石、跨沟、窄台阶三类足点受限地形。

研究问题: 足点受限地形(稀疏、不连续或几何受限的可行落脚点,如踏石、沟壑、窄台阶)上,一次失足几乎没有恢复余地。仅依据当前可见地形做落足决策的策略极易失败。核心问题是:对未来观测与奖励的学习式预测摘要,能否提供这类场景所需的"预判"信息?

核心方法: WM-LOCO 联合训练一个循环世界模型与一个 PPO 策略。世界模型以本体感知历史和单张机载深度图像为条件,产生一个预测性的循环特征来引导策略;整个过程不使用任何显式足点标签(无需足点分割或地形标注的监督)。

技术亮点:

  • 世界模型在此不是用来"生成画面",而是作为预测性表征提取器为策略提供前瞻信息,角色定位干净利落。
  • 单张深度图 + 本体感知的极简传感配置,贴合真实机载算力与部署约束。
  • 无显式足点监督,省掉昂贵的地形标注。
  • 仿真到真机直接迁移同一策略,未做针对性适配。

实验结果: 仿真中,WM-LOCO 在沟壑与踏石地形上成功通关,而配置相同的基线完全失败;在楼梯上成功率与基线持平,但步幅效率更高、骨盆加速度更低。在实体 Unitree G1 人形机器人上,仅用机载本体感知与单路深度流,三类地形平均成功率 93.3%。

应用场景: 人形机器人在非结构化 / 灾害现场的通行;足点受限地形的动态运动控制;以预测性表征替代显式地形估计的通用运动策略。

研究价值: ⭐⭐⭐⭐(4/5)— 世界模型在机器人领域的价值常被"生成质量"叙事带偏,这篇给出了另一种干净范式:把世界模型当预测性特征器,只在表征层服务控制。93.3% 的真机成绩与"基线完全失败"的对照,说服力充足。


Modeling What Changes: Sparse, Residual World Models for Object-Centric Manipulation

链接: https://arxiv.org/abs/2609.02046

代码: https://github.com/ParamThakkar123/sparse_world_models 作者 / 机构: Param Thakkar(Veermata Jijabai Technological Institute), Parsika Paresh Shah(Arizona State University), Manisha Sushant Gote(ZuiGO Private Limited)

一句话总结: 提出"建模变化而非重建全局"的归纳偏置:用逐物体变化门 + 只扰动被标记物体的残差增量头替代整体式世界模型,在 MuJoCo 推物任务上以 8.6–11.1 倍更少的参数把下一状态位姿预测精度提升 2.5–4.6 倍,并显著抑制自回归 rollout 的误差累积。

研究问题: 整体式(monolithic)世界模型在每一步都预测完整的下一状态,把大量容量浪费在重复预测场景中占绝大多数的静态部分,还会把误差注入这些本不该变的区域。本文追问:显式建模"变化"(逐物体变化门 + 只扰动被门标记物体的残差增量头)是否会是物理预测与控制中更有效、更可解释的归纳偏置?

核心方法: 模型由两部分组成:一个 per-object change gate 判断该物体这一步是否发生变化,一个 residual delta head 只对被门标记为"变化"的物体施加位姿残差增量。未被标记的物体保持原状,从根本上避免了静态区域的误差注入。在 MuJoCo 桌面推动基准上,物体数量从 3 扩展到 8。

技术亮点:

  • 变化门天然带来可解释性:模型显式告诉你它认为什么在动,这对诊断与规划都很值钱。
  • 稀疏 + 残差的组合同时命中参数效率与数值稳定性两个目标。
  • 自回归 rollout 中误差累积远低于整体式模型,紧贴"无运动下界"(no-motion floor),而密集模型持续漂移。
  • 零重训跨物体数量迁移(99.4% F1 保持),说明学到的是规则而非记忆。

实验结果: 在 3→8 物体规模的 MuJoCo 桌面推动基准上,稀疏/残差模型预测下一状态位姿的精度是密集 MLP 的 2.5–4.6 倍,参数量却少 8.6–11.1 倍;变化检测 F1 稳定在 0.80–0.87,而密集基线退化至不可用;跨物体数量零重训迁移保持 99.4% 的 F1;用四分之一数据即可达到全量数据约 90% 的精度。在采样式规划器内部,纯预测型模型全部失败(用真模拟器 oracle 配同一规划器可解,证明规划器本身无误);一旦对规划器访问到的状态做特征化与训练,稀疏模型开始具备规划能力(3 个种子上成功率 0.23 ± 0.06),而密集整体式模型在所有种子上均为 0。

应用场景: 物体中心的机器人操作世界模型;需要长程自回归推演且误差敏感的规划场景;参数受限的机载世界模型。

研究价值: ⭐⭐⭐(3/5)— 想法锋利、对照诚实(连"预测型模型规划失败"的负面结果都如实报告),对世界模型的架构设计有启发。但实验局限于 MuJoCo 仿真推动任务、未上真机,且规划场景下的绝对成功率仍低,距离可用还有距离,所以只给三星。


Discriminative World Models for Web Agents

链接: https://arxiv.org/abs/2609.02885

项目主页: https://dhruvpendharkar.github.io/dwm/ 作者 / 机构: Kelvin Li, Dhruv Pendharkar, Anish Pahilajani, Chuyi Shang, Leon Oks, Leonid Karlinsky, Rogerio Feris, Trevor Darrell, Roei Herzig(UC Berkeley、MIT-IBM Watson AI Lab、加州理工州立大学圣路易斯奥比斯波分校、Xero)

一句话总结: Berkeley / MIT-IBM Watson 团队指出世界模型的"下一状态监督预测"训练目标与下游"跨候选动作排序"的使用方式错配,提出 predicted-state matching——让预测表示必须能把真实结果状态与替代动作导致的状态区分开,从而提升 Web 智能体的测试时动作选择。

研究问题: 近期 Web 智能体用世界模型做测试时动作选择:采样候选动作 → 预测各自导致的 Web 状态 → 用排序模型或过程奖励模型(PRM)打分排序。但这些世界模型通常用"有监督的下一状态预测"训练,去生成 HTML / AXTree 快照这类固定表示。问题在于:该目标与下游排序器错配——排序器需要的是预测状态在候选之间具有判别性,而不是重建得有多像。

核心方法: 提出 predicted-state matching 训练目标:预测出的表示必须能够把"真实结果状态"与"替代动作所到达的状态"区分开来。为支撑该目标,构建了一个分叉式(branching)Web 智能体数据集,源自 WebArena Go-Browse 轨迹,其中每个决策点都包含多个替代动作及其各自的结果状态。

技术亮点:

  • 一针见血地指出世界模型领域普遍存在的"训练目标—使用方式"错配,这一批评同样适用于 embodied 世界模型。
  • 目标设计优雅:不要求重建像素或 DOM,只要求判别,把容量花在决策相关信息上。
  • 分叉数据集天然提供对比学习所需的正负样本,数据采集思路可迁移到其他交互式环境。
  • 评测链条完整:表示质量(predicted-state matching 基准)→ 排序质量(WebPRMBench)→ 端到端任务成功率(WebArena-Lite)。

实验结果: 在留出的 predicted-state matching 基准上,该方法优于用有监督下一状态预测训练的世界模型;在 WebPRMBench 上,相比纯动作 PRM 与叠加了有监督下一状态世界模型的 PRM,均提升了 PRM 式动作排序表现;在 WebArena-Lite 上,用该世界模型做测试时动作选择提升了端到端任务成功率。

应用场景: Web 智能体的测试时动作选择与排序;GUI / 软件操作智能体;一切"世界模型用于候选动作比较"的交互式决策场景。

研究价值: ⭐⭐⭐⭐(4/5)— 虽然是 Web 场景,但其方法论内核(世界模型的训练目标应服务于其被使用的方式)对 embodied 世界模型同样成立。当前很多世界模型论文在比"重建 FVD 谁更低",而真正用于规划时却需要判别力——这篇给出了明确的纠偏信号。


Latent Cluster Analysis for Vision-Language-Action Models

链接: https://arxiv.org/abs/2609.02634 作者 / 机构: Theodor Wulff, Sergio Lanza, Tamara Bila, Angelo Cangelosi, Stefan Wermter, Igor Farkas(曼彻斯特大学、汉堡大学、布拉迪斯拉发夸美纽斯大学)

一句话总结: 提出 LAVLA 框架对 VLA 模型做隐空间聚类分析,针对 GR00T N1.5 的动作解码器做逐层研究,用交叉注意力嵌入加权强化判别性特征,揭示隐簇如何逐层解耦时空与运动学特征。

研究问题: VLA 模型因能把语言与感知落地为动作而被广泛采用,但驱动其行为的内在表示仍知之甚少。尤其动作解码器内部在扩散去噪过程中如何组织时空与运动学信息,缺乏系统刻画。

核心方法: LAVLA 是一套 VLA 隐空间聚类分析框架。为更好刻画动作扩散过程中的隐空间,作者引入一种基于交叉注意力的嵌入加权方法,放大相关特征、抑制信息量低的特征。在定量评估之外,还为每个簇抽取人类可解释的概念,把隐表示连接到语义描述上,提升可解释性。

技术亮点:

  • 首次系统性地对 GR00T N1.5 这一 SOTA VLA 的动作解码器做逐层隐空间解剖。
  • 交叉注意力嵌入加权是一个轻量的聚类质量增强手段,加权聚类一致优于基线。
  • 不只给聚类编号,而是给每个簇配人类可读概念,让"可解释性"真正可消费。
  • 给出清晰的层级演化规律:隐簇逐步解耦时空与运动学特征,中层表示最精细,靠近输出层趋于稳定。

实验结果: 定量评估显示加权聚类持续优于基线聚类。分析表明隐簇逐层渐进解耦时空特征与运动学特征,表示在中层变得更加精细,并在接近输出时稳定下来。

应用场景: VLA 模型的表示诊断与调试;策略失败归因;指导 VLA 架构设计与层选择(如在何处接入适配器、何处做干预)。

研究价值: ⭐⭐⭐(3/5)— 在 VLA 性能军备竞赛中,这篇做的是少有人做但很必要的基础工作:打开黑箱看看动作解码器里到底编码了什么。实用性偏诊断而非性能提升,短期价值有限,但对想理解 / 改进 VLA 表征的研究者是很好的参考坐标。


📊 今日研究趋势

世界模型正在从"生成得像"转向"用得对"。 本期最清晰的一条主线是世界模型训练与评估目标的重新校准。Discriminative World Models for Web Agents 直接点名了长期存在的错配:世界模型用有监督下一状态预测训练,却在测试时被要求对候选动作做排序——前者优化重建保真度,后者需要跨候选的判别力。predicted-state matching 把目标改成"必须能区分真实结果与替代动作的结果",并在表示质量、排序质量、端到端成功率三个层次逐层验证。同样的思路在 embodied 一侧也有回响:Modeling What Changes 拒绝让整体式世界模型在每一步重预测整个场景,而是只预测"变化的部分",把容量与误差预算集中在实际发生运动的物体上。两者殊途同归——世界模型的价值不由重建指标定义,而由它服务于的下游决策定义。

空间与几何信息正以"零先验损失"的方式进入视频先验。 SA-WAM 代表了本期最精巧的一类工作:它不引入 3D 专用编码器、不微调 tokenizer,只用一个非线性深度归一化把无界度量深度压进冻结 VAE 的有界输入域——压缩远场、保住近场,恰是操作精度的要害所在。结果是每任务 50 条演示在 RoboCasa 上达到 76.6%,反超用 6–20 倍数据训练的先前方法。与之呼应,SolarWM 把"度量相机几何"写入统一数据契约的一等字段,让跨数据集的相机条件化监督得以对齐。两条路径共同说明:空间智能不必靠堆模态,把已有的视频扩散先验"喂对格式"往往收益更大。

VLA 的研究重心从"造更大的模型"转向"说清什么在起作用"。 ZETA 用 14 个留出本体、严格 / 预训练暴露二分的受控框架,把跨本体迁移拆成四个可量化因素:局部 EEF 表示 +15pp、源本体多样性 +18pp、辅助共训练 +7pp、预训练中仅掺 5% 目标本体数据 +13.4pp。HINT 则从时间尺度切入,主张语义意图在操作模式切换处稀疏变化、连续控制主要依赖演化的手-物关系,因此只在转换点唤起推理,其余时刻靠多视角追踪维持承诺——以零参数侵入的方式抑制视觉捷径。LAVLA 进一步向内看,用隐空间聚类解剖 GR00T N1.5 的动作解码器,发现隐簇逐层解耦时空与运动学特征、中层最精细。三篇合起来勾勒出该领域的成熟化信号:从追指标转向建基准、定口径、做归因。

世界模型作为"预测性表征"而非"模拟器"的范式在控制任务上站稳了。 WM-LOCO 联合训练循环世界模型与 PPO 策略,但世界模型的产出不是未来画面,而是一个预测性循环特征,仅凭本体感知加单张机载深度图引导落足决策,且完全不用显式足点标签。在踏石与沟壑这类"一次失足就无法恢复"的地形上,同等配置基线完全失败,而它在实体 Unitree G1 上以 93.3% 的平均成功率通过三类地形。这与 Modeling What Changes 中"纯预测型模型直接用于规划会失败、需针对规划器访问到的状态做特征化训练"的负面结果形成有趣对话:世界模型要进控制回路,关键未必是预测得更准,而是预测得"对策略有用"。

🏆 最值得关注的 3 篇

  1. SolarWM: Open Data and Scalable Training for Long-Horizon Video World Models — 本期唯一的全栈开源基座工作。143 万片段的统一帧对齐契约 + 跨 Wan2.2 / LTX-2.5 / MiniMax-H3 的主干原生适配 + 以分布匹配蒸馏收尾的三阶段配方,把长程交互式视频世界模型从"各家自制"变成可复现、可比较的公共基础。只用 5 秒序列训练却能推演数分钟到数小时,对可控视频生成与世界模型两条线都有直接参考价值。

  2. Spatially Aware World Action Model via Geometric Latent Diffusion — 精准命中世界模型与 Spatial Intelligence 的交叉口。一次非线性深度归一化就换来 3D 感知进入冻结视频扩散先验,且不牺牲任何预训练知识;RoboCasa 上 50 条演示达 76.6%、超越 6–20 倍数据训练的方法,数据效率极为突出,并附真机 UR5 验证。

  3. ZETA: A Controlled Study of Zero-Shot Cross-Embodiment VLA Transfer for Tabletop Manipulation — 在多本体 VLA 概念泛滥、评测口径混乱的当下,这篇做的是定海神针式的工作:区分严格 / 预训练暴露零样本,用 14 个留出本体给出四类因素的百分点级归因。尤其"预训练中掺 5% 目标本体数据换 13.4pp"这一结论,对任何需要把 VLA 落到新硬件的团队都是可直接执行的低成本杠杆。


数据来源:ArXiv 2026-09-03 | 分析生成时间:2026-09-04 06:00 (北京时间)