Gemini Live помогает навести камеру голосом: Guided Vision для незрячих и слабовидящих

Google разрабатывала голосовую помощь вместе с незрячими и слабовидящими людьми. Помощник просит повернуть камеру вправо, наклонить вниз или отойти, если предмет оказался слишком близко.

Guided Vision работает внутри Gemini Live. Google предлагает использовать её для бытовых задач, исключая навигацию и поиск препятствий:

- Читать мелкие этикетки и меню. - Определять режимы стиральной машины. - Искать упавший наушник. - Находить перец среди специй.

Как включить. В приложении откройте профиль → Settings → Use Guided Vision in Live. Затем запустите Gemini Live и включите передачу камеры. Функция работает на совместимых устройствах с Android 9+ в регионах и на языках Gemini Live. Google рекомендует обновить приложение Gemini и систему.

Быстрый запуск настраивается в Android Settings → Accessibility → Vision assistance → Guided Vision. Доступны три способа:

- Плавающая кнопка. - Свайп двумя пальцами. - Удержание обеих клавиш громкости.

В обновлённом TalkBack коснитесь экрана тремя пальцами и выберите Guided Vision в меню.

Проверка в работе. 23 сентября Карин Киван из Accessible Android проверила функцию на Honor 600 Pro. Привычные элементы управления Live сохранились, а Gemini стала отвечать подробнее и подсказывать, как навести камеру.

Gemini описала расположение вентилятора относительно дивана и помогла поместить страницу книги в кадр, прочитав часть страницы. Для передвижения Guided Vision не заменяет трость и другие средства помощи.

Google выдаёт доступ к Guided Vision постепенно.