Scale AI

AI 数据标注和训练数据采集公司。2026 年宣布已收集超过 10 万小时的物理 AI 训练数据,参与人形机器人训练数据采集生态。

涉及领域

  • 物理 AI 数据采集(人类动作视频用于机器人训练)
  • 数据标注平台
  • 与人形机器人产业(Tesla、Figure AI 等)紧密关联

Source

[2026-08-10] 行业坐标:Meta 投资、高管变动与 HarnessOpt-Bench

估值与高管变动

来源:AI 评测行业深度研究报告

  • 2025 年 Meta 以 143 亿美元投资 Scale AI 49% 股份,估值 290 亿美元Alexandr Wang 离职加入 Meta 任首席 AI 官。
  • 报告提示:Scale AI 估值很大程度来自 Meta 战略投资,且主要收入是数据标注而非纯评测。
  • 在评测行业四阵营中属安全合规服务阵营(与 NCC Group、Trail of Bits、HiddenLayer 等同列);一次完整大模型安全评估收费数十万至数百万元。详见 AI 评测行业

HarnessOpt-Bench(2026-08,arXiv 2608.06301)

来源:评测日报 08-09。首个系统评测”LLM 能否自动优化另一个 agent 的 harness”的基准:

  • 测”optimizer LLM 能否自动改好目标 agent 的 harness”;候选方案在全程不可见的 held-out 分区打分,TEE 强制隔离、计量资源消耗、保留版本供审计(可防”在评测集上过拟合 prompt”)。
  • 规模:4 任务 × 5 前沿模型,共 111 次计分运行
  • 三结论:optimizer 模型间差距 > 编码 harness 间差距;原生 harness 并非稳定优于统一 harness;增益随任务与种子起点大幅波动。

详见 Agent Harness