Яндекс добавил в браузер синхронный перевод YouTube-трансляций на русский язык

Автор:	Softodrom.ru
Дата:	05.08.2022 12:49

В новой версии Яндекс Браузера для компьютеров появилась возможность переводить прямые эфиры на YouTube на русский язык. Об этом сообщается в блоге компании «Яндекс».

«Анонсы новинок IT-индустрии, спортивные соревнования и вдохновляющие космические запуски теперь будут доступны на русском языке в режиме реального времени. Пока технология работает в режиме открытого бета-тестирования — для перевода доступны трансляции на некоторых YouTube-каналах. Попробуйте! Чтобы фича заработала, нужно перезапустить браузер», — говорится в сообщении.

Как отмечают разработчики, для быстрой и качественной работы в потоковом сценарии понадобилось перестроить всю архитектуру закадрового перевода видео. В случае с записанными роликами нейросеть получает всю аудиодорожку целиком, а значит, обладает полным контекстом, что облегчает задачу. Работа с переводом прямой трансляции строится совершенно иначе: одна нейросеть распознает аудио и превращает его в текст буквально на лету, другая – определяет пол спикера. Но самое сложное — это следующий этап. Третья нейросеть расставляет знаки препинания и выделяет из текста смысловые фрагменты — части, которые содержат законченную мысль. Именно их забирает еще одна нейросеть, отвечающая за перевод, который сразу синтезируется на русском языке.