ИИ замедляет скорость кодинга
Некоммерческая исследовательская группа в области ИИ METR провела исследование, чтобы выяснить, насколько искусственный интеллект ускоряет процесс написания кода. Результаты оказались неожиданными: рост оказался отрицательным.
В эксперименте приняли участие 16 опытных разработчиков, которые выполнили 246 реальных задач в крупных репозиториях кода, куда они регулярно вносят свой вклад. Исследователи случайным образом распределили примерно половину задач как «допускающие использование ИИ» с помощью таких инструментов, как Cursor Pro, GitHub Copilot и др., в то время как в другой половине задач использование ИИ было запрещено. Вот что получилось:
▶️ Перед началом эксперимента разработчики предположили, что ИИ сократит время выполнения задач на 24%.
▶️ В реальности же использование ИИ увеличило время выполнения задачи на 19%.
▶️ В качестве причин такого результата исследователи называют то, что разработчики тратят гораздо больше времени на формулирование команд для ИИ и ожидание ответа, чем на непосредственное написание кода.
▶️ Помимо этого, ИИ также с трудом справлялся с большими и сложными задачами, которые использовались в этом тесте.
Так что сегодня налегать на нейросети и видеть в них замену любым кодерам рано. Впрочем, сами авторы исследования признают, что результат через 3 месяца может быть уже совсем иным, поскольку нейросети активно развиваются.
Источник: METR
Ссылка на TG-канал: https://t.me/it2b_channel/3039
