Добавь сайт в закладки! Инструкция по ссылке.
Функция доступна бесплатно на устройствах Android и iOS.
Мобильное приложение «Алиса AI» получило обновление, которое сделает его более полезным для людей с нарушениями зрения. Команда Яндекс модифицировала Live-режим, позволяющий в реальном времени получать информацию об окружающем мире через камеру смартфона.
Новая функция предназначена для помощи незрячим и слабовидящим пользователям в их повседневной жизни. Наведя камеру на объект, человек может задать вопрос голосом и получить ответ от нейросети. Например, можно выяснить, с какой стороны расположен вход в магазин, что отображается на экране бытовой техники или какие продукты находятся в холодильнике и что из них можно приготовить.
Основой технологии является мультимодальная нейросеть Alice AI VLM, которая умеет распознавать объекты и описывать их. Взаимодействие с «Алиса AI» происходит в голосовом формате, а история запросов сохраняется в чате. По словам менеджера по цифровой доступности Яндекса Анатолия Попко, эта технология служит инструментом для самостоятельной ориентации в пространстве и решения бытовых задач без посторонней помощи.
Включить Live-режим можно через меню приложения или с помощью голосовой команды. Функция доступна бесплатно на устройствах Android и iOS. Однако активировать режим голосом пока могут только пользователи Android, но в Яндексе обещают добавить эту возможность и для iOS-устройств в ближайшем будущем. Обновление было представлено на фестивале Young Con в Москве.
ИсточникПоделись видео: