10 октября 2026 г.
Открытые ИИ-модели сами не придумывают базовые алгоритмы: без подсказок 9 из 20 не восстановила ни одна
Без подсказок ни одна из трёх открытых моделей не восстановила 9 из 20 базовых алгоритмов информатики (препринт arXiv 2604.05716, 7 апреля 2026). В эксперименте участвовали Qwen3-4B-Thinking-2507, Qwen3-4B-Instruct-2507 и Gemma-4-12B.
Qwen3-4B-Thinking-2507 без подсказок восстанавливает в среднем 30,1% алгоритмов, с подсказкой первого уровня 38,8%, с пошаговой подсказкой второго уровня 72,5%. Когда из промпта убрали названия алгоритмов, средний результат упал на 23,2 процентного пункта.
Есть разрыв между решением задач по усвоенному и самостоятельным поиском базовых алгоритмов. Для нестандартной задачи ответ модели стоит проверять тестами на своих данных.
Не хотите разбираться сами? Внедряем ИИ в ваш бизнес: задачи без лимита, одна цена в месяц, отмена в любой момент.
Проверить самому. Репозиторий Algo-Reinvention на GitHub повторяет эксперимент: два conda-окружения на Python 3.10, скрипты preprocess/scripts/initialize.sh и simple_parallel/scripts/_run.sh. Модели берутся с Hugging Face из организации algo-reinvention, нужна видеокарта с CUDA.
Остальные 11 алгоритмов хотя бы одна из трёх моделей восстановила.
Первоисточник