How to?

papers batch 8

Aug 4, 2026
papers
11 Minutes
2028 Words

Explicit Kinematic Guidance from Analytic Concepts for Vision-Language-Action Models

[Gemini 3.1 Pro] 引入物理概念专家先提取 3D 信息再微调 VLA | 👤 SJTU, Mingyang Sun, Jianhua Sun | [🌐]- | 📃 2607.26513 | | [📂]-

现有 VLA 模型依赖 2D 输入导致缺乏 3D 物理空间感知,本文引入一个概念专家模块,先用视觉基础模型估计物体的运动和结构参数,随后在推理时动态跟踪这些参数以对齐观察,并在微调时作为空间引导和密集奖励训练 VLA。

实验显示该结构化引导能提高监督学习和强化学习操作成功率。

HiFi-UMI: Learning Deployable Manipulation Policies from High-Fidelity UMI Data Alone

[Gemini 3.1 Pro] 采集高保真数据以实现零真机数据的 VLA 部署 | 👤 Simple AI, Yuteng Wei, Xiaofei Li | [🌐]- | 📃 2607.25895 | | [📂]-

现用便携 UMI 采集的数据保真度低且需要混入真实机器人数据微调,本文设计了带头戴离线 SLAM 和 200 度双广角相机的微秒级同步采集系统,录制了两千小时数据,仅用这些数据后训的策略直接部署在真机上就能匹配同分布遥操的成功率。

A Causality-aware Infer-diagnose-refine Framework for Test-time Modality Adaptation in VLA Models

[Gemini 3.1 Pro] 测试时动态调整视觉输入权重来细化 VLA 动作 | 👤 Tsinghua, Haoyu Zhang, Fan Li | [🌐]- | 📃 2607.25516 | | [📂]-

机器人操作在不同阶段对视觉观察的依赖程度不同,本文提出推断-诊断-细化框架,先在正常和视觉掩码两种反事实情况下推断动作,借此量化视觉特征的因果权重,最后用门控残差网络在免训练下细化动作预测。

FELT: Generating Tactile Signals from Vision for Visuo-Tactile Manipulation

[Gemini 3.1 Pro] 从 RGB 图像生成双指不对称触觉特征辅助策略学习 | 👤 Tsinghua, Zinan Li, Daniel Seita | 🌐 | 📃 2607.20683 | | [📂]-

触觉传感器脆弱且收集数据困难,本文利用冻结的视觉编码器和轻量查询解码器,将左右面板分两支独立解码,直接从 RGB 图像单向生成双指的高保真触觉特征。

生成的特征在推理时无需实体传感器即可提升接触任务成功率。

WCM: A World Critic Model for Vision-Language-Action Reinforcement Learning

[Gemini 3.1 Pro] 评价器兼顾状态预测和奖励估计捕捉时间动态 | 👤 Fudan, Senyu Fei, Xipeng Qiu | [🌐]- | 📃 2607.29613 | | [📂]-

传统 VLA 强化学习的评价器单帧输入难以捕捉操作中的跨时间动态,本文将轻量级 LeJEPA 架构引入作为评价器 WCM,让其同时预测未来潜在状态和估计回报,从而解决状态近似不足的问题,并兼容 Pi0 和 OpenVLA 强化训练。

FA-RDP: A Frequency-Adaptive Reactive Diffusion Policy for Contact-Rich Manipulation

[Gemini 3.1 Pro] 接触任务中自适应切换扩散策略的推理频率 | 👤 SJTU, Lifeng Zhuo, Han Xue | [🌐]- | 📃 2607.28596 | | [📂]-

丰富接触任务在接触前需要低频多步采样以保持多模态,而接触后需要高频以反应反馈力,本文提出了频率自适应的反应式扩散策略,利用视觉-力混合 Transformer 根据接触状态动态预测高频和低频动作块。

[Gemini 3.1 Pro] 为多连杆空中机器人设计混合阻抗-导纳控制 | 👤 Tsinghua, Zicheng Luo, Jinjie Li | [🌐]- | 📃 2608.01800 | | [📂]-

为了解决多连杆空中机器人在表面滑动时的接触稳定性问题,本文结合阻抗控制和导纳控制策略,使机器人可以在自由飞行和表面交互模式之间灵活稳定切换。

The Gate, Not the Cache: Gate Provenance Bounds the Closed-Loop Reliability of Training-Free VLA Token Skipping

[Gemini 3.1 Pro] 指出决定免训练 Token 跳过机制可靠性的是门控信号来源 | 👤 UCB, Qi Luo, Hao Zhao | [🌐]- | 📃 2608.00391 | | [📂]-

为了在降低 VLA 推理延迟的同时保障控制可靠性,本文深入探究了免训练 Token 跳过机制的闭环表现,发现系统鲁棒性的关键边界由门控信号的计算来源和规律决定,而非缓存本身。

Event-Based Upper-Body Humanoid Teleoperation Under Challenging Illumination

[Gemini 3.1 Pro] 融合事件相机信息提升人形机器人在极端光照下的遥操表现 | 👤 NVIDIA, Haoyu Fu, Chengze Li | [🌐]- | 📃 2607.29227 | | [📂]-

面对传统视觉遥操在强光或逆光下容易跟丢的问题,本文引入事件相机捕捉高动态范围光照特征,融合 RGB 信息提取上半身运动学参数,在恶劣光照下也实现了稳定的人形机器人遥操作。

SM4RT: Learning Structured Motion Geometry for 4D Reconstruction

[Gemini 3.1 Pro] 将场景运动分解为 SE(3) 基重构 4D 运动几何 | 👤 Tsinghua, Yiming Yang, Li Yi | [🌐]- | 📃 2607.22534 | | [📂]-

本文提出结构化运动 4D 重构 Transformer,将密集的场景运动分解为由时间序列组成的 6D SE(3) 扭曲运动基,同物体的像素共享同一组刚体运动轨迹权重,从单目 RGB 视频直接端到端推断出 3D 几何和运动结构。

Temporal Policy: History-Initialized Action Generation for Robotic Learning from Demonstration

[Gemini 3.1 Pro] 从机器人历史状态初始化生成流匹配降低推理延迟 | 👤 NVIDIA, Dylan Miller, Martin Jagersand | 🌐 | 📃 2607.29482 | | 📂

生成式策略在示教学习中采样开销大,本文将动作生成建模为时间耦合传输问题,不从纯噪声而是从近期历史状态初始化流匹配过程,使得需要拟合的向量场更平直,从而大幅降低推理延迟并保持成功率。

When Does Legacy Data Start to Help? Emergent Transfer in Cross-Configuration Robot Learning

[Gemini 3.1 Pro] 研究跨硬件机器人学习中历史数据的有效阈值 | 👤 Tsinghua, Tao Wang, Yang Gao | [🌐]- | 📃 2607.25593 | | [📂]-

当机器人硬件升级后复用旧配置数据往往不会立刻见效,本文通过测试发现存在一个转换临界点,只有新配置数据积累到最低任务能力要求后,与旧数据联合训练才会产生收益并迎来成功率急速增长。

Ordered Action Tokens for Visuomotor Policy Learning

[Gemini 3.1 Pro] 按有序重要性量化连续动作为离散 Token 以灵活推理 | 👤 Tsinghua, Chaoqi Liu, Yilun Du | [🌐]- | 📃 2607.21670 | | [📂]-

现有的动作标记化方法缺乏结构性,本文设计了有序动作标记器 OAT,用 Transformer 将动作块离散为有序序列,前段 Token 包含粗略控制信息而后续 Token 补充残差细节,从而允许在推理时根据性能权衡灵活截断动作保真度。

Learning Panorama-Aware VLA for Mobile Manipulation with Whole-Body Teleoperation

[Gemini 3.1 Pro] 采集带移动底盘的全景数据训练具有全局空间感知的移动 VLA | 👤 Beihang, Donglin Yang, Si Liu | [🌐]- | 📃 2608.02257 | | [📂]-

移动操作需要底盘与机械臂协同以及全局空间理解,本文开发了一套基于单 VR 接口的全身遥操系统采集多模态数据集,并利用全景编码器融合局部观察与机器人状态输出联合动作,解决了传统局部视角容易丢失目标的问题。

FIRMGrasp: A Friction-Informed Risk Margin for Robust Grasp Synthesis

[Gemini 3.1 Pro] 考虑摩擦系数分布不确定性进行风险调整的抓取综合评价 | 👤 Boston University, Clinton Enwerem, Calin Belta | [🌐]- | 📃 2607.25049 | | [📂]-

经典抓取质量指标通常假设单一摩擦系数导致预测力闭合易失效,本文提出了基于条件风险价值的摩擦波动感知抓取指标 FIRMGrasp,它计算恶劣摩擦尾部分布折现后的力闭合裕度,从而准确筛选出被标称指标误判为高质量的高风险抓取。

Article title:papers batch 8
Article author:Julyfun
Release time:Aug 4, 2026
Copyright 2026
Sitemap