90% рабочего времени американцев приходится на задачи, которые почти не покрыты AI-бенчмарками
90% of US working hours are spent on tasks not covered well by AI benchmarks
Mercor сопоставила 29 AI-бенчмарков с таксономией O*NET из 923 профессий и 18 797 задач. Выяснилось: только 208 профессий имеют хотя бы одну задачу с пятью и более промптами, а 90% рабочих часов американцев уходит на задачи, которые бенчмарки почти не затрагивают. Покрытие смещено в сторону высокооплачиваемых и AI-подверженных профессий, оставляя blind spots в оценке реальных возможностей моделей.
Наши результаты показывают, что 90% американского рабочего времени тратится на задачи, которые почти или совсем не покрыты существующими бенчмарками.