Исследование показало, что AI-кодирующие агенты увеличивают объём генерируемого кода, но не влияют на выпуск софта из-за узкого места — ручного ревью.
Кратко:
●AI-кодеры увеличивают объём кода.
●Ручное ревью стало узким местом.
●Реальные результаты не улучшаются.
●Необходим пересмотр процесса.
AI-кодеры: больше кода, но не больше софта
На прошлой неделе Ars Technica опубликовала исследование, которое показало интересные результаты. AI-кодирующие агенты действительно помогают создавать больше кода, однако выпуск готового программного обеспечения остаётся на прежнем уровне.
Эффективность и узкие места
По данным исследования, внедрение AI-кодеров увеличивает количество строк кода на 30%, число коммитов — на 20%, а объём pull-реквестов — на 23%. Однако, количество завершённых задач в системах управления проектами, таких как Jira, статистически не изменилось.
Проблема в том, что ручной процесс код-ревью стал значительно дольше. Время от создания pull-реквеста до его слияния увеличилось на 49%, а количество комментариев на один pull-реквест выросло на 35%. Это означает, что человеческое вмешательство остаётся критическим узким местом.
Роль человека в процессе
Несмотря на широкое внедрение AI-кодеров (95% компаний), значимого уменьшения числа сотрудников не произошло. Исследования показывают, что доля сотрудников, вовлечённых в ревью, увеличилась на 14%. Это подчёркивает необходимость пересмотра процессов.
Почему так происходит?
Исследование MIT Sloan подтверждает, что эффективность разработчиков с AI-инструментами растёт, но итоговые продукты не увеличиваются пропорционально. "Узкие места" на уровне ревью и загрузки участников препятствуют значимым улучшениям.
Заключение: что делать дальше?
Очевидно, что для достижения значительных результатов необходимо пересмотреть организацию процесса: сместить фокус на эффективность ревью, проверку и надёжность. AI-кодеры могут писать больше, но без эффективного управления человеческими ресурсами и оптимизации процессов их потенциал остаётся нереализованным.
Частые вопросы
Что показало исследование?
Исследование показало, что AI-кодеры увеличивают объём кода, но не влияют на выпуск софта из-за узкого места — ручного ревью.
Какие данные использовались?
Анализ охватывал 300 миллионов рабочих событий и данные по более чем 700 компаниям.
Какие изменения наблюдаются в код-ревью?
Время код-ревью увеличилось на 49%, количество комментариев выросло на 35%.
Какой вывод можно сделать?
Необходимо пересмотреть процессы ревью и управления ресурсами для достижения значимых результатов.