VirtualHome 家庭活动仿真

VirtualHome: Simulating Household Activities via Programs进阶

用「程序」驱动虚拟人在 Unity 家庭场景里做家务的仿真平台。

VirtualHome 是 MIT 与多伦多大学在 CVPR 2018 提出的家庭活动仿真平台，基于 Unity3D 游戏引擎，用 Python API 调用。它把「做早饭」「看电视」这类家务写成「程序」，即由走到、拿起、打开、开关电器等原子动作组成的步骤序列，让虚拟人在仿真公寓里逐步执行，并渲染出带标注的视频。它关心高层任务规划，不模拟机械臂和接触力学，因此常用来测大语言模型的任务分解能力。当前版本 2.3 支持程序化生成场景，还衍生出人机协作基准 Watch-And-Help。