OMOMO 人-物交互动作数据集
OMOMO (Object Motion Guided Human Motion Synthesis) Dataset进阶斯坦福用光学动捕录制的约 10 小时全身搬动日常物体动作数据
OMOMO 数据集出自斯坦福大学 Jiaman Li、吴佳俊、C. Karen Liu 的 SIGGRAPH Asia 2023 论文。作者用 12 台相机的 Vicon 光学动捕,记录 17 名受试者搬动、拖拽 15 种日常物体(拖把、落地灯、椅子、桌子、箱子等)的全身动作,共约 10 小时,提供物体 3D 几何、物体运动和 SMPL-X 人体动作。论文方法是只给物体怎么动,用条件扩散模型先预测手的位置、再生成全身姿态。这是少有的全身与大件物体交互数据,现在常作为人形机器人学搬运、推拉等全身操作的参考动作,例如 OmniRetarget 就用它重定向到宇树 G1。
例子给定一把椅子被拖动的运动轨迹,OMOMO 方法生成一个人弯腰抓住椅背、边走边拖的全身动作。
- 也叫
- OMOMO、OMOMO Dataset
- 相关
- 人-物交互、光学动捕、SMPL 人体模型、扩散模型、OmniRetarget、动作重定向
- 来源
- Object Motion Guided Human Motion Synthesis (arXiv 2309.16237)
Object Motion Guided Human Motion Synthesis (arXiv HTML 全文) - 信息截至
- 2023-09