инсайт
новости/9 июля 2026 г.
00:13ThePrimeagen: бенчмарки давно накручивают, +3% на SWE-Bench Pro ничего не значат
источник: @theprimeagen на X ↗·
машинная выжимка · сверена с источником
Известный разработчик ThePrimeagen публично раскритиковал бенчмарки моделей и заявил, что разница в 3% на SWE-Bench Pro не значит ничего. Практику это напоминание не гнаться за долями процента в рейтингах и проверять инструменты на своих задачах.