Mercor 估计美国 90% 的工时没有 AI 基准覆盖

Brendan Foody的公司将29项基准映射到劳工部的工作任务上，揭示了一个差距，这也支持Mercor进军AI评估的努力。

By · Published · Updated

Primary source: Mercor

为何重要

该地图使基准覆盖在任务层面上可见，而其局限性表明，仅凭模型得分无法证明对整项工作的就绪度。Mercor推动测量这一差距的努力也支持其专家数据与评估业务。

Mercor estimates 90% of US work hours lack AI benchmark coverage — Brendan Foody's company mapped 29 benchmarks to Labor Department job tasks, exposing a gap that also supports Mercor's push into AI evaluation.

Brendan Foody 围绕匹配人和工作建立了 Mercor。Mercor 对 90% 的美国工作时长 落在几乎没有 AI 基准覆盖的任务上的估计，把一个测量问题放在其业务的中心：用来评判 AI 系统的工作，仍然只是人们所做工作的一个狭窄片段。

由 Mercor 制作的基准地图截图。…

When you purchase through links in our articles, we may earn a small commission. This doesn’t affect our editorial independence.

Reader comments

Conversation for this story loads after sign-in.