Gemini научился читать мелкий шрифт и описывать всё вокруг через камеру

Google добавила в Gemini Live режим Guided Vision. Включаете камеру, наводите на что угодно — и ИИ вслух описывает, что в кадре. Функция начала раскатываться 1 октября на совместимых Android-смартфонах.

Придумана она для людей с плохим зрением и незрячих, но пригодится и остальным. Навели на упаковку лекарства — Gemini прочитает мелкий текст. Попросили найти на столе ключи или очки — подскажет, что и где лежит. Можно описать детали конкретной вещи: цвет, надписи, состояние.

Можно переспрашивать

Диалог не заканчивается на первом ответе. Нашли банку в шкафу — спросите, какой срок годности, и Gemini зачитает дату. Если предмета в кадре нет, ИИ голосом подскажет, куда повернуть телефон, чтобы он попал в камеру.

Google прямо предупреждает: не полагайтесь на Guided Vision для навигации, безопасного маршрута и обнаружения препятствий. Заменой трости или другого средства передвижения функция не служит.

Где найти

Кроме приложения Gemini, Guided Vision есть в службе специальных возможностей Google TalkBack. Ещё его можно вывести на быстрый жест или кнопку в «Настройках» — на устройствах с Android 9 и новее. Про эту возможность Google рассказывала в недавнем наборе обновлений для Pixel. Как раз такая опция подойдёт, если голосовой помощник нужен под рукой за секунду, а не через несколько меню.

У Apple похожая вещь давно есть на iPhone: Live Recognition в VoiceOver. Теперь у Android есть прямой ответ. О том, как Gemini меняется на телефоне в целом, мы писали недавно; справка по специальным возможностям лежит на странице поддержки Google.

Раскатка идёт постепенно, поэтому если пункта пока нет, подождите обновления Gemini и сервисов Google.