Skip to content

EGO 数据集标注层次对照(扩展至 8 集 · 含企业级 EGO 数据)

R1(EGO/人数据)首步执行:把光轮 EgoSuite-Open100K 与 它石 WIYH 并入对照,原 6 集→8 集。 精度:✔=已核验;⚠=公司公告/公开信息,细粒度待 README/白皮书实测。


一、L0–L4 覆盖矩阵(8 集)

数据集 来源 id/源 L0 L1 L2 L3 L4 天花板
EgoVerse 学术 2604.07607 ✔ 见原文 见原文 见原文 转移研究 依赖下游
Open-AoE 学术 2607.14183 ✔ ✔文本 ✔MANO+轨迹 ✔原子动作 ✔retarget 最高
Ego-OSCAR 学术 2608.08285 ✔ ✔自由文本 ✔3D手 ✘ ✘ 到L2+文本
EPIC-KITCHENS 学术 1804.02748 ✔ ✔narration 部分 ✔39.6K分割 ✘ 到L3泛任务
EgoInfinity 学术 2606.17385 ✔ 自动 ✔4D手物GT ~ ✔retarget 引擎→L4
HRDexDB 学术 2604.14944 ✔多相机 ✘ ✔高精度3D ✘ 配对真值 基准(小)
EgoSuite-Open100K 光轮 HF/AtomGit ✔ ⚠全模态 ⚠ ⚠ ⚠待观察 量级第一(待实测)
WIYH 它石 官网/开源 ✔ ✔语言+触觉 ⚠ ⚠(含动作) ⚠待观察 VLTA全模态

二、两家企业级 EGO 数据定位(核验边界)

7 · 光轮 EgoSuite-Open100K

  • 可核验事实(✔web):10万小时全模态人类行为开源数据集;HF/AtomGit,捐开放原子基金会;附评测标准化+触觉基础设施;宣称"仿真=Token化数据"、5年100亿h目标;联58同城。
  • L0–L4 填实(⚠待 README/白皮书):模态类型(视/触/眼/手?)、传感器配置、标注层次与粒度、任务覆盖、采集方式——当前均未公开细粒度,不臆测。
  • 设计判断:这是把"EGO 数据线 L0+L1+L2"直接量产成产业标品;规模量级(10万h)是全场第一,但"是否到L3/L4可直接训动作"是验证R1成败的关键未知数。

8 · 它石 WIYH (World In Your Hands)

  • 可核验事实(✔web):全球首个大规模真实世界 VLTA(视觉-语言-触觉-动作)多模态数据集;人中心数据引擎范式;联想创投被投;自称"领先特斯拉半年"。
  • L0–L4 填实(⚠待实测):规模小时数、VLTA 各模态精度、动作是否到可执行级、触觉采样设备——细粒度待实测。
  • 设计判断:触觉被当作与视觉/语言/动作并列的一级模态——这是横切路线 R6 的产业级信号;且"人中心"与光轮同属 B 哲学,但多了一条触觉+动作纵队(R1×R6 交汇)。

三、8 集对照结论(增量更新)

  1. "大规模"这一格现在有产业答案:EgoSuite 10万h 量级远超学术 EgoVerse(1362h)——但大规模≠高标注层次,EgoSuite/WIYH 的 L3/L4 是否到"可直接训"仍待实测。
  2. 残留缺口(核心):仍无任何一套 ego 数据同时满足"大规模 × 到 L4(可行动作)";EgoInfinity(引擎retarget)是唯一的 L4 补丁。→ R1 的判据实验正落在这个缺口上。
  3. 企业级 EGO 数据当前是"黑盒规模+未公开标注":这既是研究风险(无法直接验证),也是研究机会(谁能先用工具链把它填成 L3/L4,谁定义供给标准)。
  4. 一句话:8 集合照=学术给"标注深度"(Open-AoE/HReDexDB/EgoInfinity)、产业给"规模量级"(EgoSuite/WIYH),"规模×深度"仍未合体——R1 路线要走的正是这座桥。

四、下一步(R1 执行清单)

  • [ ] 网络恢复后取 EgoSuite-Open100K / WIYH 的 REPO 白皮书/README,把 L0–L4 从 ⚠ 填成 ✔/✘。
  • [ ] 判断两者有无配套工具链(如 Open-AoE 的 retarget),决定能否直接训动作。
  • [ ] 把 EgoInfinity 式引擎跑在 EgoSuite 子集上,做"人数据→目标本体"迁移收益首测(R1 判据实验 v0)。