VBench 视频生成评测基准

VBench: Comprehensive Benchmark Suite for Video Generative Models进阶

把视频生成质量拆成 16 个维度分别打分的开源评测基准。

VBench 由南洋理工大学与上海人工智能实验室等机构的团队提出（第一作者 Ziqi Huang），2023 年 11 月发布，入选 CVPR 2024 Highlight。它不给一个笼统的总分，而是把文生视频质量拆成 16 个维度，如主体一致性、背景一致性、时间闪烁、运动平滑度、动态程度、美学质量、物体类别、空间关系等，每个维度配专门的提示词和自动评估方法，并用人类偏好标注检验打分是否和人的判断一致。后续的 VBench++ 扩展到图生视频、长视频和可信度评测；2025 年 3 月的 VBench-2.0 转向常识推理、物理真实性、人体动作等「内在忠实度」。具身领域评估视频世界模型时，常借用它的部分指标。

例子评估一个用来生成机器人训练视频的模型时，可以用 VBench 的主体一致性和运动平滑度检查机械臂在视频中途有没有变形、抖动；动作是否符合物理，还要用 Physics-IQ 这类专门基准。

也叫: VBench、VBench++、VBench-2.0
相关: 视频生成模型、世界模型、弗雷歇视频距离、Physics-IQ 物理理解基准、WorldScore 世界生成评测、EWMBench 具身世界模型评测
来源: VBench: Comprehensive Benchmark Suite for Video Generative Models (arXiv 2311.17982)
Vchitect/VBench GitHub 仓库
信息截至: 2025-03