После 10 минут с ИИ-помощником люди хуже решают сами: 57% верных против 73%

Хватило 10 минут помощи, чтобы люди стали решать хуже и чаще сдаваться. Вся сессия у них заняла 13 минут.

Не хотите разбираться сами? Внедряем ИИ в ваш бизнес: задачи без лимита, одна цена в месяц, отмена в любой момент.

Как мерили. Грейс Лю из Университета Карнеги-Меллон и соавторы прогнали три рандомизированных эксперимента на 1222 участниках: две серии задач на дроби и одна на понимание текстов уровня SAT. Часть людей 10 минут работала с ИИ-помощником, часть решала сама.

Ассистентом был GPT-5, участникам его представили как ChatGPT. За ошибку не штрафовали, а пропуск задания засчитывали как отказ пробовать.

В первом эксперименте группа с ИИ решила потом сама 57% задач против 73% у контрольной. Пропусков там вышло 20% против 11%. На чтении разрыв повторился: 76% против 89%.

Второй эксперимент авторы усилили методикой и повторили на 667 участниках. Разрыв сжался до 71% против 77%, а рост пропусков перестал быть значимым. Эффект остался, размер поплыл.

Подсказка вместо ответа. Внутри ИИ-группы второго эксперимента 27% участников просили у ассистента подсказку, а не решение. Потом они сами справились с 76% задач и сдались в 5% случаев. Те, кто брал готовый ответ, дали 65% и 13% сдач, а контроль без всякого ИИ решил 77%.

«Желательные трудности» - так когнитивные психологи называют продуктивную борьбу с задачей, которая со временем и растит навык, объясняет Лю. Когда ИИ убирает борьбу, верный ответ человек получает, а способность работать самому не нарастает.

Финальная версия препринта вышла 13 октября, материалы и код экспериментов лежат в открытом репозитории graliuce/ai_assistance_experiments.