«Яндекс» прокачал нейросетевой перевод в своем браузере — теперь он умеет автоматически накладывать русскую озвучку на ролики с китайской речью.
Для тренировки нейросети разработчики с помощью специального алгоритма обработали 1.5 млн видео и отобрали среди них 100 тысяч с качественными субтитрами на севернокитайском языке. Одной из самых сложных задач было научить ее «понимать» четыре тона, от которых в китайском зависит смысл — каждый слог с повышением или понижением голоса может означать разные вещи.
«Яндекс Браузер» сам предложит перевести видео с китайского на YouTube после того, как пользователь его запустит, а в ближайшее время фича заработает и на китайской видеоплатформе Bilibili.
Как отмечают в «Яндексе», теперь у браузера есть достаточная технологическая база для работы с другими сложными языками — например, корейским и японским. Их поддержка может появиться в будущем.
