HOT3D 数据集

HOT3D: Hand and Object Tracking in 3D from Egocentric Multi-View Videos进阶

Meta 用 Aria 眼镜和 Quest 3 录制、带动捕真值的第一人称手物交互数据集。

HOT3D 是 Meta 发布的第一人称手物交互数据集，论文收录于 CVPR 2025。19 名参与者在厨房、办公室、客厅等布景中操作 33 件刚性物体，用 Project Aria 研究眼镜和 Quest 3 头显两种设备录制，共 833 分钟以上、370 万张图。数据包括多视角 RGB 与单色图像、眼动注视、场景点云，以及相机、双手和物体的 3D 位姿；位姿真值来自贴光学标记点的动作捕捉系统，比靠算法估出来的准。手部标注同时给出 UmeTrack 和 MANO（常用参数化手模型）两种格式，物体附带带 PBR 材质的 3D 网格。它主要服务于手部与物体的 3D 跟踪、位姿估计研究，也被当作从人类第一人称视频学习灵巧操作的数据来源。使用需同意 HOT3D 许可协议。