行业生态
全行业的评测体系、开源数据与分类法:我们采纳哪些,空位在哪。
哪些词汇表该直接采纳,我们的行才能和别人的数据 join;哪一格是真的空的。i
没有一个公开分类法会归因到硬件
它们把每一次失败都记在策略头上,所以硬件那一列是空的。
分类法轴覆盖 · 空的那一列就是位置
全部失败分类法对照
| 分类法 | 类数 | 策略轴 | 硬件轴 | 环境轴 | 说明 |
|---|
开源数据集只记成功
规模很大,但几乎都不标注失败。
开源数据集规模 · 以及有没有标注失败
全部数据集
| 数据集 | 轨迹 | 本体 | 任务 | 标注失败? | 说明 |
|---|
四样东西直接采纳
每一样都让我们的结果能和别人已发布的对上。
- 01RoboArena 的双盲两两对比协议。直接搬,不要自己发明排名方法。i
- 02Table30 的 specialist / generalist 双赛道。「每任务一个策略」和「每本体一个统一策略」是两个问题,不要混在一起报。
- 03Open X-Embodiment 的技能词汇表。
task_family对齐到它,我们的行就能和 100 万条轨迹 join。i - 04SimplerEnv 的扰动轴。Visual Matching 与 Variant Aggregation 两套配置,直接搬进我们 A/B 档的扰动表。
不要再做一个仿真基准
LIBERO、CALVIN、RoboCasa 已经把这一格做得很好。我们唯一的结构性优势在真机。i
每一行都带来源链接
这一页背后的完整对照。
评测体系
| 体系 | 类型 | 本体 | 任务 | 它做对的 | 它缺的 | 我们的姿态 |
|---|
对照表:我们的类与别人的类
我们的类 ↔ 别人的类。i
| 外部分类法 | 它的类 | 我们的类 | 关系 | 说明 |
|---|