Scale AI
AI 数据标注和训练数据采集公司。2026 年宣布已收集超过 10 万小时的物理 AI 训练数据,参与人形机器人训练数据采集生态。
涉及领域
- 物理 AI 数据采集(人类动作视频用于机器人训练)
- 数据标注平台
- 与人形机器人产业(Tesla、Figure AI 等)紧密关联
Source
[2026-08-10] 行业坐标:Meta 投资、高管变动与 HarnessOpt-Bench
估值与高管变动
来源:AI 评测行业深度研究报告。
- 2025 年 Meta 以 143 亿美元投资 Scale AI 49% 股份,估值 290 亿美元;Alexandr Wang 离职加入 Meta 任首席 AI 官。
- 报告提示:Scale AI 估值很大程度来自 Meta 战略投资,且主要收入是数据标注而非纯评测。
- 在评测行业四阵营中属安全合规服务阵营(与 NCC Group、Trail of Bits、HiddenLayer 等同列);一次完整大模型安全评估收费数十万至数百万元。详见 AI 评测行业。
HarnessOpt-Bench(2026-08,arXiv 2608.06301)
来源:评测日报 08-09。首个系统评测”LLM 能否自动优化另一个 agent 的 harness”的基准:
- 测”optimizer LLM 能否自动改好目标 agent 的 harness”;候选方案在全程不可见的 held-out 分区打分,TEE 强制隔离、计量资源消耗、保留版本供审计(可防”在评测集上过拟合 prompt”)。
- 规模:4 任务 × 5 前沿模型,共 111 次计分运行。
- 三结论:optimizer 模型间差距 > 编码 harness 间差距;原生 harness 并非稳定优于统一 harness;增益随任务与种子起点大幅波动。
详见 Agent Harness。