Исследование METR: ИИ для написания кода может замедлять работу программистов
- AlexT
- 12-июл-2025, 10:00
- 0 комментариев
- 8 просмотров
Популярные ИИ-инструменты для программирования, такие как Cursor и GitHub Copilot, могут не ускорять работу программистов, а наоборот — снижать их производительность. К такому выводу пришли специалисты некоммерческой исследовательской группы METR.
Эксперты ожидали, что ИИ для написания кода повысит эффективность за счёт автогенерации программных решений и подсказок. Однако, как сообщает TechCrunch, проведённый 10 июля 2025 года эксперимент показал противоположные результаты.
В тесте приняли участие 16 опытных разработчиков, работающих с проектами с открытым исходным кодом. Им предложили решить 246 реальных задач из крупных репозиториев. Половину заданий они выполняли с помощью продвинутых ИИ-ассистентов, включая Cursor Pro, вторую половину — полностью вручную, без ИИ.
Перед началом тестирования участники были уверены, что использование ИИ-инструментов сократит время работы примерно на 24 %. На практике всё вышло иначе: среднее время решения задач с ИИ увеличилось на 19 % по сравнению с ручной работой.
По данным METR, одной из ключевых причин замедления стал сам процесс взаимодействия с ИИ: разработчики тратили дополнительное время на формулировку запросов и уточнение ответов, тогда как напрямую писать код оказалось быстрее. К тому же текущие ИИ-модели сталкиваются с трудностями при работе с большими и сложными фрагментами кода — например, не всегда понимают архитектуру проекта и контекст задач.
Отметим, что 94 % участников уже имели опыт использования языковых моделей, а 56 % ранее работали с Cursor. Перед экспериментом всех дополнительно обучили работе с ИИ-инструментами, чтобы исключить влияние низкой компетенции. Тем не менее, подготовка не помогла достичь ожидаемого ускорения.
Авторы исследования подчёркивают, что не делают окончательных выводов. Результаты относятся к текущему уровню технологий и могут быстро устареть — уже через несколько месяцев новые версии ИИ могут показать другую эффективность.
Так или иначе, исследование METR добавляет ещё один аргумент в дискуссию о том, как ИИ влияет на скорость и качество разработки ПО. Сейчас ИИ-помощники скорее выступают в роли дополнения и не всегда заменяют опыт профессиональных разработчиков.