Содержание
Одной из главных тем вступительной речи Google I / O 2019 была инклюзивность. Новая функция в Android Q направлена на улучшение инклюзивности для глухих и слабослышащих людей, предлагая мгновенные заголовки практически для любого аудио или видео, воспроизводимого на телефоне.
Эта функция, называемая Live Caption, использует AI для преобразования речи, воспроизводимой на смартфоне, в быстрые и точные титры. Прелесть его в том, что эта функция работает с любым приложением, независимо от того, воспроизводит ли оно аудио или видео, и независимо от того, транслируется ли контент с сервера, воспроизводится из локального хранилища или генерируется человеком на лету.
Обзор Google Pixel 3a XL: приезжайте за камерой, оставайтесь для опыта
Live Caption работает с подкастами, видео, аудио и видео-чатами, такими как Duo. Демонстрация, которую мы видели на этапе выступления Google I / O, выглядела очень гладкой и впечатляющей, хотя, очевидно, реальные результаты могут отличаться.
Live Caption будет доступен одним касанием - пользователи смогут активировать его, нажав на новый значок, видимый при изменении громкости системы. Все обрабатывается локально, что означает, что вам не нужно беспокоиться о том, что третьи лица прослушивают ваши разговоры.
Подписи отображаются в черном окне, наложенном поверх обычного интерфейса. Подписи не сохраняются для дальнейшего использования, поэтому вы увидите их только при воспроизведении соответствующего звука.
Live Caption работает с подкастами, видео, аудио и видео-чатами, такими как Duo.
В то время как глухие люди могут извлечь выгоду из большей части этой замечательной новой функции, Live Caption потенциально может быть полезен для многих других пользователей в различных ситуациях. Он даже работает, когда звук выключен до нуля, что позволяет пользователям использовать контент, не мешая окружающим.
Live Caption - это новая функция специальных возможностей, встроенная в Android Q. Вам необходимо включить ее в настройках, прежде чем использовать ее, и пока неясно, будет ли эта функция включена всеми OEM-изготовителями в их устройствах Android Q.
Живое реле
Хотя возможность смотреть видео без звука довольно крута, она также тривиальна по сравнению с тем изменяющим жизнь эффектом, который может иметь технология субтитров для некоторых людей. Google показал, как Live Caption в сочетании с функциями Smart Reply и Smart Compose, впервые представленными в прошлом году, могут помочь людям, которые не могут говорить, разговаривать. Технология, называемая Live Relay, может превратить речь в письменный текст, с которым могут легко взаимодействовать глухие пользователи. Далее ответ превращается в синтезированный голос и передается человеку в конце строки.
Проект Евфония
Делая шаг вперед, исследователи Google также ищут способы обучения моделей распознавания речи для понимания нестандартных речей, таких как те, которые заикаются, страдают от инсультов или страдают от других нарушений. Долгосрочная цель состоит в том, чтобы компьютеры поняли миллионы людей, у которых есть нарушения речи или они вообще не могут говорить.
Google предупредил, что в этом квесте предстоит еще много работы, чтобы технологии работали буквально для всех. Генеральный директор Сундар Пичаи пригласил людей с нарушениями речи представить образцы речи, которые помогут компании создать более инклюзивные технологии распознавания.
Следите за новостями из Google I / O.
