阅读研究雷达投资体系
登录 / 注册
← 返回阅读
资讯专题 · 物体重定向机器人训练1 分钟阅读·2026-10-16DisconfirmAI 编辑部

预印本提出“物体重定向”法:手机人类演示可作跨具身机器人后训练数据

新研究提出通过记录物体姿态而非手部动作,将手机采集的人类演示转化为不同机器人的后训练数据,模拟测试显示31.2%通过率。

重要性实质性证据E2 未复现写法快讯

原文发布时间 2026-10-15 12:00

一项由Nagasrikanth Kallakuri提出的新方法表明,使用智能手机录制的人类操作视频可以作为不同形态机器人的后训练数据。该方法的核心在于不重定向人手动作,而是重定向被操作物体的运动轨迹。

传统上,人类演示主要用于视觉-语言-动作模型的预训练,难以直接用于特定目标机器人或任务导向的训练。新系统通过提取物体随时间的姿态、接触区间及重建的3D模型,生成一份“无身体依赖”的记录。任何给定URDF模型和简短描述的机器人均可针对该记录进行求解,并在模拟中以演示的物体运动作为基准进行评估。

在包含42次捕捉、8种机器人和157个配对样本的分析中,该方法实现了31.2%的模拟通过率,52.2%失败率,14.0%因运动学可行性检查而被拒绝。值得注意的是,所有被系统标记为不可行但仍强行运行的配对均告失败。目前尚无策略在该记录上进行训练,真实机器人上的执行效果仍待下游验证。

来源

  • 原始出处arxiv.org↗
专题

物体重定向机器人训练

【物体重定向与自动化采集】

2 节点0 篇更新于 2026-10-17 20:41

事情怎么走到这一步

  1. 2026-10-14预印本《Retargeting the Object, Not the Hand》提交,提出通过记录物体姿态而非手部动作,将手机人类演示转化为跨具身机器人后训练数据。
  2. 2026-10-15预印本《DemoStream》提交,提出利用GPU加速批量TAMP算法自主生成高质量机器人操作数据,实测采集速率达每小时66次。
登录 / 注册
阅读研究雷达投资体系

还没定论的部分

  • 物体重定向方法生成的数据,在真实机器人上训练出的策略成功率究竟如何?(论文指出尚无定论,需后续验证)
  • DemoStream系统在大规模复杂场景下,能否完全消除对人工干预(如场景重置、标签标注)的需求?
  • 这两种方法(数据转换 vs 数据生成)是互补还是竞争关系?能否结合使用以提升整体效率?
读完整专题 →
带入研究 →