BTC $62 468 -1.9%ETH $1 742 -2.0%SOL $73 +0.8%TON $1,01 -5.0%BTC $62 468 -1.9%ETH $1 742 -2.0%SOL $73 +0.8%TON $1,01 -5.0%
ииХабр ИИ

METR повторил исследование о замедлении разработчиков с ИИ и усомнился в его цифрах

В июле 2025 года METR сообщил, что опытные разработчики с ИИ работают на 19% медленнее, хотя считают, что ускорились на 20%. В феврале 2026 года эксперимент повторили на 57 разработчиках, и METR сам объяснил, почему прежним цифрам нельзя верить: часть участников отказывается работать без ИИ даже за деньги, а 30–50% скрывают задачи, с которыми ИИ справляется лучше всего. Отдельно McKinsey сообщил, что 80% респондентов отметили рост личной производительности от ИИ, но лишь 37% видят влияние на операционную прибыль компании. Общий вывод тот же: цифры производительности собираются из самоотчётов, а не из измеримого поведения.

В июле 2025 года исследовательская организация METR (Model Evaluation and Threat Research) сообщила: опытные разработчики, работающие с ИИ-ассистентом, тратят на задачи на 19% больше времени, чем без него. При этом сами участники были уверены, что работают быстрее — в среднем на 20%. Результат широко разошёлся по публикациям и почти год цитировался как аргумент в споре о реальной пользе ИИ в разработке.

В феврале 2026 года METR провёл повторный эксперимент на 57 разработчиках и опубликовал объяснение, почему прежним замерам нельзя доверять без оговорок. Первая причина — мотивационная. Часть участников отказывается выполнять задачи без ИИ-помощника даже за деньги, поэтому чистое сравнение производительности с ИИ и без него становится невозможным.

Скрытые задачи

Вторая причина — поведенческая: от 30% до 50% участников, по данным METR, скрывают от исследователей те задачи, где ИИ особенно хорош. Мотив простой: разработчик не хочет, чтобы его оценивали по работе, которую сделал алгоритм, и предпочитает выполнить такую задачу за пределами эксперимента.

В мае 2026 года появился ещё один опрос об ускорении разработки «в 3 раза» — и METR снова сопроводил его оговорками о качестве подобных измерений. Речь идёт об одной и той же проблеме: цифры производительности собираются из самоотчётов участников, а не из объективного измерения времени и результата, поэтому зависят от того, что участники готовы рассказывать о себе.

Разрыв между личной производительностью и результатом компании виден и в отдельном исследовании McKinsey: 80% респондентов сообщили, что ИИ повысил их личную производительность, но только 37% замечают его влияние на операционную прибыль компании. Перевод материала опубликован в блоге VK Tech; его авторы объясняют разрыв налогом на координацию — издержками согласования работы между этапами, которые ИИ на отдельном участке не снимает. Из цифр McKinsey напрямую не следует, сколько именно времени экономят разработчики, — это снова самоотчёт, а не измерение.

Источник

Хабр ИИ · права на исходный материал принадлежат автору.

Материал носит информационный характер и не является индивидуальной инвестиционной рекомендацией. Операции с криптовалютами связаны с риском полной потери вложенных средств. Подробнее — «Отказ от ответственности».

Bittalk в Telegram

Разборы событий, итоги дня и то, что двигает рынок. Без сигналов и обещаний — только факты и что они значат.

Читать в Telegram →

По теме