RoboChallenge
常用原力灵机与 Hugging Face 办的真机在线评测平台,首个基准叫 Table30。
RoboChallenge 是原力灵机(Dexmal)联合 Hugging Face 于 2025 年 10 月推出的真机评测系统。参评者不必交出模型权重,而是在自己机器上跑模型,通过接口远程操控平台上的真实机器人。首个基准 Table30 含 30 个桌面操作任务,考察精确三维定位、遮挡、依赖前序步骤等难点,机器人有 UR5、Franka Panda、Cobot Magic ALOHA 双臂和 ARX-5 四类。每个任务推演 10 次,报告成功率和按阶段计分的进度分数。它针对的是仿真分数不等于真机能力、各实验室真机条件不可比的问题。
例子RoboChallenge 论文用 Table30 对比了 π0、π0.5、CogACT 和 OpenVLA 系列变体在单任务训练与通用训练两种设定下的表现。
- 也叫
- Table30
- 相关
- 真机评测、成功率、进度分数、评测协议、原力灵机、RoboArena
- 来源
- RoboChallenge: Large-scale Real-robot Evaluation of Embodied Policies (arXiv 2510.17950)
RoboChallenge 论文 HTML 全文 - 信息截至
- 2025-10