«Яндекс Браузер» запустил перевод видео с китайского языка
«Яндекс Браузер» теперь переводит видео с китайского и автоматически накладывают русскую озвучку. Об этом говорится на сайте компании.
В пресс-службе рассказали, что в основе технологии «Яндекса» лежат нейросети, которые работают почти как синхронные переводчики.
На первом этапе нейросеть научилась трансформировать китайскую речь в текст на примере 100 тыс. аудиофайлов с самыми точными расшифровками, которые отдельный алгоритм выбрал из 1,5 млн видеороликов.
Нейросеть также научили учитывать тоны и контекст, поэтому на сегодняшний момент алгоритм различает 6500 иероглифов, когда для общения достаточно 2000. Помимо этого, алгоритм обучили делить сплошной поток иероглифов на смысловые отрезки для точной синхронизации перевода с речью.
Впервые «Яндекс» представил прототип технологии, которая при помощи машинного обучения делает закадровый перевод видео, в июле 2021 года. Тогда алгоритм мог переводить лишь на русский язык и только англоязычные ролики. Сейчас нейросеть может перевести ролики как с английского, так и с испанского, французского, итальянского и немецкого.
Яндекс запустил автоматический закадровый перевод еще для трех языков
Видео с русской озвучкой стало доступно пользователям Яндекса еще на трех языках — французском, испанском и немецком. С автоматическим переводом можно смотреть любое видео на YouTube, Vimeo и других популярных платформах. Продолжительность видео не должна превышать 4 часов. Кроме того, ролик должен быть в общем доступе. Яндекс не может снабжать переводом видео с Coursera, Udemy и других ресурсов, где для просмотра требуется ввести логин и пароль. Переводить с английского по-прежнему можно, но теперь пользователям Яндекса стало доступно еще больше интересного видеоконтента. Например, можно послушать рассказ экскурсовода про Пергамский музей в Берлине, узнать, как готовить роскон — традиционный испанский праздничный пирог, или посмотреть документальный фильм, в котором снялись легендарные путешественники Ален Бомбар и Жак-Ив Кусто. Яндекс не только добавил новые языки, но и доработал саму технологию. Во-первых, она теперь точнее совмещает фразы на языке оригинала и на языке перевода. За счет этого перевод получается более естественным, без натянутых пауз или фраз, сказанных на манер скороговорки. Во-вторых, видео теперь переводятся быстрее — пользователю сразу сообщается, сколько времени это займет.
Автоматический закадровый перевод видео доступен в Яндекс.Браузере для Windows, macOS, Linux, iOS и Android и в приложении Яндекс для Android и iOS. На смартфоне запустить видеоролики с закадровым переводом поможет голосовой помощник, если попросить: «Алиса, включи перевод видео». Напомним, Яндекс начал предлагать автоматически перевести англоязычные видеоролики в сентябре. В октябре технология закадрового перевода была интегрирована в обновленную версию Яндекс.Браузера.
«Черная пятница» в 2021 году установила новый рекорд продаж за пять лет
Количество онлайн-платежей увеличилось на 66%
Оксана Мамчуева 30 ноября 2021
В рунете удвоилось число пиратских и фейковых онлайн-кинотеатров
За последние 2 месяца
Оксана Мамчуева 30 ноября 2021
«Яндекс» запустил закадровый перевод видео ещё для трёх языков — французского, испанского и немецкого
Компания также улучшила саму технологию. Теперь видео переводятся быстрее.
Переводить видео можно в том числе на YouTube, Vimeo, TikTok, Twitter, Facebook и «ВКонтакте». Для перевода новых языков используют ту же технологию, что и для английского: алгоритм распознает речь и превращает её в текст, переводит, а потом синтезирует голос и совмещает его с видеорядом. Об этом представители «Яндекса» рассказали TJ.
Теперь на русском языке можно посмотреть видеотур по космической станции от французского астронавта, экскурсию по Берлину и испанский фильм про потерянные цивилизации.
Когда мы запускали перевод видео, то обещали не ограничиваться английским. И вот сегодня добавили к нему ещё три языка, которые востребованы нашей аудиторией. Это значит, что пользователи смогут узнать ещё что-то новое, что было для них недоступно.
Роман Иванов, руководитель «Яндекс.Браузера»
Перевод доступен в «Браузере» для Windows, macOS, Linux и Android и в приложении «Яндекс» для Android и iOS. На смартфоне перевод можно запустить по фразе «Алиса, включи перевод видео».
«Яндекс» запустил закадровый перевод еще для трех языков
Пользователи «Яндекса» теперь могут смотреть с русской озвучкой видео еще на трех языках — французском, испанском и немецком. На смартфоне запустить видеоролики с закадровым переводом поможет «Алиса». Стоит только сказать: «Алиса, включи перевод видео».
С автоматическим переводом можно смотреть любое видео на YouTube, Vimeo и других популярных платформах. Теперь на русском языке доступны видеотур по космической станции от французского астронавта, экскурсия по Берлину на немецком языке или, например, испанский фильм про потерянные цивилизации. Перевод видео можно включить и на компьютере, и на смартфоне — например, по дороге с работы. А если пользователь не знает, с чего начать, «Яндекс» предложит ему подборку зарубежных видео.
Александр Мосягин, Infosecurity: За пять лет в ИБ-отрасли сменилось несколько эпох
безопасность
Для перевода новых языков используется та же технология, что и для английского. Сначала «Яндекс» распознает речь и превращает ее в текст, переводит его, а затем синтезирует голос и совмещает его с видеорядом. При этом сама технология стала лучше. Сейчас людям почти не нужно ждать, пока будет переведен весь ролик — это происходит гораздо быстрее. Кроме того, переведенные фразы точнее накладываются на оригинал, а значит, закадровый перевод лучше совпадает с картинкой.
Перевод доступен в «Яндекс.браузере» для Windows, macOS, Linux, iOS и Android и в приложении «Яндекс» для Android и iOS.