Google 1 октября запустила Guided Vision в Gemini Live — функцию голосовой визуальной помощи для незрячих и слабовидящих пользователей, а также для тех, кому нужно разобраться в окружающей обстановке. На совместимом Android-устройстве пользователь может показать окружение через камеру, услышать его описание и задавать уточняющие вопросы в формате естественного диалога.
Guided Vision не ограничивается описанием текущего кадра. Если камера направлена слишком высоко, расположена близко к предмету или отклонена в сторону, Gemini, по заявлению Google, произносит подсказки: например, просит медленно повернуть устройство вправо, наклонить его вниз или отойти назад. Это должно помочь модели получить более полный визуальный контекст перед ответом.
Среди заявленных сценариев — чтение мелкого шрифта на упаковке, меню и бытовой технике; поиск потерянных предметов; определение цветов, узоров и форм; описание незнакомой комнаты или расположения объектов на столе. Функция поддерживает разговоры на нескольких языках. Точный перечень доступных языков на странице анонса не приведён: Google связывает доступность с регионами и языками, где работает Gemini Live.
Google сообщает, что разработка велась совместно с сообществом доступности и компанией Aira. Для обучения работе с повседневным визуальным контекстом специалисты интерпретировали данные в общей сложности десятки тысяч часов. Более 1000 участников сети Aira Trusted Tester проверяли систему на бытовых задачах, а эксперты Aira помогали формировать и оценивать защитные ограничения.
Guided Vision доступен на устройствах с Android 9 и новее в поддерживаемых Gemini Live регионах и языках. Google рекомендует обновить приложение Gemini и системное ПО. Запустить режим можно из настроек Gemini, через ярлык специальных возможностей Android или из меню TalkBack. Анонс не уточняет полный список совместимых моделей устройств.
Практический контекст: Практическая ценность функции заключается в сочетании описания с подсказками по наведению камеры: пользователь может последовательно уточнять сцену, а не пытаться сразу получить идеальный кадр. Однако генеративная модель способна ошибаться. Google прямо указывает, что Guided Vision не является медицинским устройством, средством мобильности или заменой белой трости и не предназначен для навигации, обнаружения препятствий либо рекомендаций по безопасному передвижению.
| Способ | Как открыть |
|---|---|
| Приложение Gemini | Включить Use Guided Vision in Live в настройках профиля, открыть Gemini Live и поделиться камерой |
| Специальные возможности Android | Настроить ярлык: плавающую кнопку, жест двумя пальцами или одновременное нажатие клавиш громкости |
| TalkBack | Открыть меню TalkBack касанием тремя пальцами и выбрать Guided Vision |
Источники
Дата события: 2026-10-01. Дата первоисточника: 2026-10-01.
