27 июля 2026 г.
У Terminal-Bench появилась вторая цифра: Cline сравнил цену прогона на Kimi K3, Fable и GPT
27 июля Cline выложил сравнение по деньгам: сколько стоит один прогон Terminal-Bench на Kimi K3, Fable и GPT. Три модели, один и тот же набор задач, сравнение не по баллам, а по счёту. Сумм в тексте твита нет.
Cline
@cline
Кстати, сколько стоит прогнать terminal bench на kimi k3 в сравнении с fable и gpt...
· 107,7 тыс. просмотров
Почему это важно: Бенчи читают по одной колонке: процент решённых задач. Цена прогона в такие таблицы обычно не попадает, хотя платит за неё тот, кто гоняет агента каждый день. Cline поставил три модели на один набор задач и сравнил их по деньгам. Для практика это второй столбец рядом с процентами: сначала смотрите, кто решил, потом сколько это стоило. По какой цене за токены считали, автор не говорит.
Не хотите разбираться сами? Внедряем ИИ в ваш бизнес: задачи без лимита, одна цена в месяц, отмена в любой момент.
Что дальше: Замер для себя простой: прогнать свой набор задач дважды, на дешёвой и на дорогой модели, и сравнить не проценты успеха, а итоговый счёт.
Первоисточник