具身
An Agentic Framework for Proactive Robots with Procedural Assistance Memory
提出基于记忆的主动机器人框架,用程序化辅助记忆(PAM)以有限状态机记录活动阶段与辅助规则,VLM 任务预测器结合当前观察决定何时辅助及执行何种任务,VLA 执行器完成任务,反思 VLM 每日更新记忆无需重训。5 天桌面辅助实验中精度、召回与 F1 持续提升,首次触发延迟从 5 秒降至 1 秒。
具身智能·arXiv cs.RO·5 天前
先用站内已采集内容作答;站内不足时联网检索,每条结论都给出来源链接
4 条 · 点击可看原文全文与中文译文
提出基于记忆的主动机器人框架,用程序化辅助记忆(PAM)以有限状态机记录活动阶段与辅助规则,VLM 任务预测器结合当前观察决定何时辅助及执行何种任务,VLA 执行器完成任务,反思 VLM 每日更新记忆无需重训。5 天桌面辅助实验中精度、召回与 F1 持续提升,首次触发延迟从 5 秒降至 1 秒。
KODA 提出将人类第一视角 RGB 演示转换为类人机器人全身 VLA 训练数据的方法:用稀疏追踪与采样优化生成经仿真校验的规范全身轨迹,据此合成机器人视角观测,并为不同控制器生成状态-动作监督。在 Unitree G1 四项任务上,机器人数据不变时未见条件成功率提升约 45 个百分点,降低了对昂贵机器人演示的依赖。
该论文研究视觉-语言-动作(VLA)策略内部表征的几何形状,通过线性探针与激活干预,对七个任务相关概念建立分类体系。发现概念几何多为多维且受物理约束塑造,如关节限位使腕部朝向呈弧而非圆,距离由粗/细两个正交子空间表示。该几何在多个模型与真实数据中复现,并可用于引导操控,表明概念形状与可读性同等重要。
研究对三个前沿视觉-语言-动作(VLA)模型做机制性因果分析,发现动作专家仅通过中后段少量交叉注意力层(动作条件接口)接收关键信息,且物体选择与空间信息分层存储。据此将 MolmoBot 的条件层从 36 层减至 3 层,推理 FLOPs 降 33%,3000 次评测成功率基本持平,并已在真机部署验证。