На Made by Google 2024 некоторые из новых ИИ-функций компания направила, в первую очередь, на повышение комфорта и улучшение пользовательского опыта для людей с ограниченными возможностями.
Среди таких функций Google выделила Guided Frame, Magnifier, Live Transcribe и Live Caption — они помогут слабовидящим и слабослышащим пользователям.
Guided Frame — помощь людям с проблемами со зрением при использовании Pixel Camera. Искусственный интеллект даст голосовые указания, которые помогут пользователю расположить угол обзора камеры или поместить своё лицо в кадр для селфи.
Также Guided Frame подскажет, как лучше наклонить лицо, расскажет что такое «низкое освещение» и как с ним разобраться и обеспечит улучшенное распознавание объектов.
Раньше функция была доступна только через TalkBack, программу чтения с экрана Android — сейчас активировать Guided Frame можно в настройках камеры.
Обновлённый Magnifier. Лупа с искусственным интеллектом от Google — ещё одна функция для людей с ограниченными возможностями. В новой версии добавили режим «Картинка в картинке», поиск определённых слов среди разного текста и возможность переключения объектива.
При помощи приложения можно осматриваться вокруг и приближать необходимые объекты, например, расписание самолётов в аэропорту (с новой функцией поиска слов можно будет быстро найти необходимое направление).
Приложение также можно использовать как «продвинутое» зеркало, как рассказывается в рекламном ролике от Google:
Live Transcribe. В приложении для транскрибации окружающих речи и звуков в режиме реального времени появился специальный режим для складных смартфонов.
При помощи режима двойной транскрибации Live Transcribe можно использовать одновременно нескольким пользователям — текст будет выводиться и на внутренний, и на внешний экраны «раскладушки» (доступно только для Pixel 9 Pro Fold и других складных Android-смартфонов).
«Теперь все за столом могут следить за разговором — независимо от того, присутствуете ли вы на встрече или разговариваете с друзьями за ужином»— рассказывают в Google
Live Caption. То же, что Live Transcriber, только не для внешних звуков, а для тех, что воспроизводятся на самом смартфоне.
Работает поверх любых приложений, а также, начиная с 13 августа, поддерживает корейский, польский, португальский, русский, китайский, турецкий и вьетнамский языки — всего 15 языков без доступа к интернету и более 120 языков при подключении к сети (такой же набор актуален и для Live Transcribe).
Все функции будут доступны не только на смартфонах линейки Pixel 9, но и на других устройствах Android.