arXiv · cs.AI · Seungyong Lee, Suhyeok Jang, Minyoung Kim, Jinwoo Shin · 5 小时前模型评分55
RoboTryOn 用虚拟试穿思路把人类视频转成机器人演示
RoboTryOn: Synthesizing Dexterous Robot Demonstrations from Human Videos via Virtual Try-On
导读
RoboTryOn 提出把人类视频转成机器人演示数据的方法，思路类似虚拟试穿：保留演示动作，把画面里的人换成参考图指定的机器人，同时保留任务、物体和背景。方法先用自回归方式转换关键帧，再以人类手部骨架为运动条件引导视频合成，并用引入深度特征的逆动力学模型（IDM，Inverse Dynamics Model）从合成视频推断动作标签。
分类置信度
中 · 待人工复核
- 只有单一媒体来源，需要人工复核。
来源级别：媒体与个人
事件类型：研究发布
证据摘录
- “To address this limitation, we propose RoboTryOn, which treats human-to-robot translation as virtual try-on: try-on keeps the person and swaps the garment, RoboTryOn keeps the demonstrated motion and swaps the human for the robot.”
来源：arXiv · cs.AI · arxiv.org