В «Яндекс.Браузере» появилась функция автоматического перевода любых видео с английского языка на русский. Технология работает с помощью нейросетей, рассказали «Афише Daily» представители компании.
«Выглядит это все просто как магия: нажимаешь на кнопку перевода в десктопном браузере или мобильном приложении „Яндекса“ и практически мгновенно получаешь видео с двухголосой русской озвучкой», — написал руководитель «Яндекс.Браузера» Роман Иванов в своем фейсбуке.
Искусственный интеллект распознает речь, превращает ее в текст и разбивает на предложения. Затем определяется пол говорящего, предложение переводится, а голос синтезируется.
Последним этапом становится совмещение озвучки с видеорядом — это самый сложный шаг, так как в русском языке предложения длиннее, чем в английском. Весь процесс занимает несколько минут.
На своем ютьюб-канале компания показала образец автоматического перевода на примере лекции основателя «Википедии» Джимми Уэйлса.
По словам Иванова, новая функция доступна в приложении «Яндекс» для iOS и Android, а также в «Яндекс.Браузере» для Windows, macOS, Linux и Android. Автоматически перевести можно видео с YouTube, Vimeo, Facebook и других популярных сервисов.
Тестировать технологию «Яндекс» начал в июле. Теперь функция доступна для всех англоязычных роликов.