«Яндекс Браузер» переведет на русский Youtube-трансляции

«Следующий шаг — перевод потоковых трансляций и видеороликов не только на YouTube, но и, например, в Twitch. Мы научили нейросети переводить трансляции на английском, немецком, французском, итальянском и испанском. Далее мы добавим новые пары европейских языков, а также китайский, японский и другие», — цитирует пресс-служба руководителя приложения «Яндекс» и «Яндекс Браузера» Дмитрия Тимко.

Над синхронным переводом видео работают несколько нейросетей: одна распознает аудио и превращает его в текст, другая определяет пол спикера по биометрии, третья расставляет знаки препинания и выделяет из текста части, которые содержат законченную мысль — их забирает четвертая нейросеть, отвечающая за перевод, который синтезируется на русском языке.

Протестировать технологию может любой пользователь «Яндекс Браузера» на своем компьютере.

Прототип автоматического перевода видео «Яндекс» анонсировал в июле прошлого года. Тогда технология работала только с роликами на английском языке.

Adindex.ru