13 июля 2026 г.
thdxr: если новые версии моделей не дают разницы, инструмент выбран неверно
Dax (@thdxr) утверждает: если между версиями моделей вы почти не видите разницы, дело в инструменте, а не в модели. По его словам, модели натренированы под конкретные поведения и раскрываются только при правильной структуре вокруг них.
dax
@thdxr
Каким бы инструментом вы ни пользовались - убедитесь, что он выжимает из моделей всё, на что они способны. Они натренированы очень целенаправленно под конкретное поведение, и вокруг них нужна правильная структура. Если вы не видите особой разницы между версиями моделей - вы просто используете не тот инструмент.
· 30,8 тыс. просмотров
Почему это важно: Это ставит проверку на сам инструмент, а не на выбор модели. Апгрейд модели без разницы в выдаче - сигнал, что обвязка (промпты, tool-calls, контекст) не использует то, под что модель обучали. Конкретных инструментов, метрик или примеров структуры в твите нет.
Не хотите разбираться сами? Внедряем ИИ в ваш бизнес: задачи без лимита, одна цена в месяц, отмена в любой момент.
Что дальше: Прогони одну и ту же задачу на старой и новой версии модели в своём инструменте. Нет разницы в выдаче - смотри, как инструмент строит контекст и вызовы, а не меняй модель.
Первоисточник