Anthropic опубликовала исследование: ИИ-кодинг не ускоряет работу и мешает учиться
Anthropic опубликовала исследование: ИИ-кодинг не ускоряет работу и мешает учиться. Но не всё так просто.
52 разработчика изучали новую async-библиотеку на Python. Половина — с Claude, половина — без. После задач — тест на понимание. ИИ-группа набрала на 17% меньше баллов.
НО, самое интересное:
35% участников из контрольной группы (которым запретили ИИ) всё равно использовали его. После повторного предупреждения — 25% продолжили. Комментаторы сравнивают со стероидами: попробовал — и уже не можешь вернуться к обычным тренировкам.
Есть гипотеза, что ускорения нет потому что некоторые тратили до 30% времени на промпты. Один участник задал 15 вопросов. Выигрыш в скорости написания съедался временем на формулировку запросов.
Также есть вопросики к методике:
ИТОГО, как мне кажется, что реально можно из исследования почерпнуть:
Копипастить ошибки в ChatGPT и просить починить — худший способ учиться. Но это не значит, что ИИ бесполезен для опытных разработчиков в знакомой кодовой базе. Исследование про обучение новому, а не про ежедневную работу.
Так что вот, если где-то в новостях про это исследование будете читать, имейте в виду.







