Google запустила Guided Vision в Gemini Live для Android

Google выпустила функцию Guided Vision в Gemini Live для Android. Она даёт аудиоописания того, на что направлена камера смартфона, в реальном времени.

Главное
  • Guided Vision доступна в приложении Gemini и Google TalkBack на устройствах Android 9 и выше.
  • Функция помогает читать мелкий текст, описывать окружение и находить предметы.
  • Google предупреждает: не использовать Guided Vision для навигации или обнаружения препятствий.
Смартфон с открытым приложением Gemini Live и камерой, наведённой на текст
Фото: The Verge

Google запустила Guided Vision — новую функцию в Gemini Live, которая использует камеру смартфона для аудиоописания объектов в реальном времени. Об этом сообщает The Verge. Функция доступна на совместимых устройствах Android.

Чтобы воспользоваться Guided Vision, нужно включить камеру в Gemini Live. ИИ поможет прочитать мелкий текст, описать окружающую обстановку, найти или идентифицировать предметы, а также рассказать детали о конкретных объектах. Можно задавать уточняющие вопросы, например попросить Gemini прочитать срок годности на найденном продукте.

Guided Vision также встроена в Google TalkBack. Пользователи могут настроить быстрый доступ через меню специальных возможностей в настройках Android 9 и выше. Функция анонсирована в рамках недавнего обновления для Pixel.

Google отмечает, что Guided Vision создана для людей с нарушениями зрения, но может быть полезна и в повседневных ситуациях. Если объект не попадает в кадр, Gemini подаст звуковые подсказки, чтобы правильно навести камеру.

Компания предупреждает: не стоит полагаться на Guided Vision для навигации, безопасного передвижения или обнаружения препятствий, а также использовать её вместо трости или других средств передвижения.

Вопросы и ответы

На каких устройствах доступна Guided Vision?
На совместимых устройствах Android, а также в приложении Gemini и Google TalkBack. Требуется Android 9 и выше.
Можно ли использовать Guided Vision для навигации?
Google не рекомендует применять функцию для навигации, безопасного передвижения или обнаружения препятствий, а также как замену трости.