5 ноября 2026 г.
Робот промахнулся, а модель подняла фрукт: ошибка прогноза в WorldOracle
Модель предсказала успешный захват фрукта при тех же действиях, с которыми реальный робот промахнулся.
Робот не захватил фрукт, но в предсказанном видео фрукт поднялся. Авторы WorldOracle разобрали этот пример в статье от 24 октября.
Правдоподобие подвело. Модель мира предсказывает, что произойдёт после действий робота. Без реального исполнения рядом успешный захват выглядит убедительно. В WorldOracle модель получает то же начальное наблюдение и ту же последовательность действий, что и робот, поэтому авторы сравнивают предсказанный результат с фактическим.
Не хотите разбираться сами? Внедряем ИИ в ваш бизнес: задачи без лимита, одна цена в месяц, отмена в любой момент.
Красивого движения руки для такого сравнения недостаточно. В примере pick fruit модель верно изображает возможное событие, но ошибается в результате конкретных действий: фрукт должен остаться на месте.
Материалы для проверки. На Hugging Face опубликованы 67 validation-эпизодов с реальными видео. Архив эпизода распаковывается командой `tar -xf <episode>.tar -C <destination>`, входные данные лежат в `inputs/`. Код проверки доступен в официальном репозитории WorldOracle на GitHub.
WorldOracle проверяет и полные исполнения, где модели приходится предсказывать последствия всей последовательности действий.
Первоисточник