Яндекс.Браузер научился генерировать субтитры для видео и трансляций на русском языке
Яндекс.Браузер получил новую функцию, которая позволяет создавать субтитры для видео и трансляций на русском языке с помощью нейросети. Новая функция работает на любых сайтах: от видеохостингов и социальных сетей до страниц телеканалов и роликов в облачных хранилищах
Яндекс.Браузер теперь может генерировать субтитры для русскоязычных видео и трансляций благодаря встроенной нейросети. Эта функция доступна на различных сайтах, включая видеохостинги, социальные сети, страницы телеканалов и облачные хранилища. Субтитры особенно полезны в тихих местах, когда нет наушников, или в шумных помещениях, а также для людей с нарушениями слуха.
Чтобы сгенерировать субтитры, пользователь должен открыть страницу в Яндекс.Браузере и навести курсор на видеоплеер. Появятся две кнопки: одна для включения/выключения субтитров, а другая для настройки их вида. Пользователи также могут настроить размер шрифта субтитров и изменить прозрачность их фона.
Генерация субтитров осуществляется с помощью нейросети, встроенной в браузер. Эта нейросеть была разработана на основе модели для распознавания речи в Яндекс.Станции.
Технология была оптимизирована, чтобы уменьшить потребление оперативной памяти, что позволяет запускать ее даже на старых компьютерах. Для оптимизации процесса генерации субтитров специалисты «Яндекса» сократили объем оперативной памяти, который требуется для работы нейросети. Изначально нейросеть использовала 800 МБ оперативной памяти, но после оптимизации этот объем был уменьшен до 150 МБ.
Нейросеть для генерации субтитров доступна в версиях Яндекс.Браузера для Windows и Linux. Поддержка для macOS появится до конца сентября. В будущем планируется добавить поддержку других языков и реализовать технологию на мобильных устройствах.
«Яндекс Браузер» научился создавать субтитры для русскоязычных видео с помощью встроенной нейросети
Команда разработчиков «Яндекса» сообщила о расширении возможностей своего фирменного браузера и включении в его состав функции, в автоматическом режиме создающей субтитры для видео и онлайновых трансляций на русском языке. Это стало возможным благодаря нейросети, встроенной в десктопную версию веб-обозревателя.
Новая функция работает на любых сайтах: от видеохостингов и социальных сетей до страниц телеканалов и загруженных в облачные хранилища роликов. Она может быть полезной в ситуациях, когда нужно соблюдать тишину, а наушников под рукой нет, или когда в помещении слишком шумно. Кроме того, автоматическая генерация субтитров поможет комфортно просматривать видео людям с нарушениями слуха.
Чтобы включить субтитры, достаточно в окне с видео нажать на расположенную сверху кнопку. В настройках можно выбрать размер шрифта и изменить прозрачность фона, чтобы субтитры не сливались с изображением на заднем плане.
Генерация субтитров работает в «Яндекс Браузере» для операционных систем Windows и Linux. В macOS новая функция появится до конца сентября. В планах разработчиков — интеграция технологии в мобильную версию веб-обозревателя и добавление поддержки других языков.
Источник:
«Яндекс Браузер» начал генерировать субтитры для любых русскоязычных видео Статьи редакции
Спасибо, что рассказал, что ты не такой, в белом пальто тут стоишь красивый.
Развернуть ветку
1 комментарий
Есть представители яндекса? У меня ваш браузер не переводит длинные видео, например 2-3 часовые, просто нет опции перевести
Развернуть ветку
сервера нынче дорогие, вот и переводи сам
Развернуть ветку
5 комментариев
добрый день, я из Яндекса. Браузер переводит видео длиной до 4 часов. Кейс, который вы описываете, выглядит как ошибка — напишите, пожалуйста, в форму обратной связи (настройки браузера в правом верхнем углу — пункт меню «Обратная связь»), наша техподдержка разберется, в чем дело ))
Развернуть ветку
3 комментария
Так же как в в Ютубе уже лет 15?
Развернуть ветку
В ютьюбе сплошной поток слов пишется. А тут все знаки препинания, деление на предложения.
Развернуть ветку
2 комментария
в ютубе, а в яндексе во многих сервисах, сечёшь?
Развернуть ветку
Яндекс — умнички как всегда. Все для людей
Развернуть ветку
«Генерация работает только для видео на русском»
Ничего подобного — прекрасно только что посмотрел с генерируемыми субтитрами видео на английском. При наведении курсора на слово еще и перевод предлагает — в контексте, не как словарь. При этом еще пару дней назад этого не было — можно было только аудиоперевод включить
Развернуть ветку
в python давным давно есть огромное количество библиотек, умеющих преобразовывать аудио в текст, и далеко не только на русском. Инновация уровня эфира телевизора
Развернуть ветку
В мире вообще много чего есть, но это ж надо найти, упаковать и доставить потребителю в удобном виде. Инновация крутая!
Развернуть ветку
Это здорово, только массовому пользователю интересен доступный «из коробки» продукт. И уже продвинутые разберутся в остальном
Развернуть ветку
Где вы видели в публичном доступе библиотеки умеющие преобразовывать аудио из онлайн-трансляций в текст?
Развернуть ветку
4 комментария
Давным-давно — с каким качеством? До выпуска OpenAI Whisper год назад c с более менее приличным качеством было 2 и те прилично жрали ресурсы.
Развернуть ветку
1 комментарий
На youtube давно уже эта функция, да ещё и перевод есть.
Развернуть ветку
здравствуйте ) на YouTube Яндекс Браузер переводит видео на иностранных языках и генерирует для них субтитры (на языке оригинала или на русском), здесь идет речь о создании субтитров для роликов на русском языке — раньше такого не было )
Развернуть ветку
1 комментарий
Хреново кстати работает ����♂️
Развернуть ветку
3 комментария
Да, только есть нюанс — качество говно
Развернуть ветку
Комментарий удален модератором
Развернуть ветку
Эта функция была и раньше, по крайней мере, на Ютубе (хоть и не для всех видео).
Развернуть ветку
на YouTube наличие субтитров на русском языке зависит от автора видео, предусмотрел он такую возможность или нет. Здесь же речь идет о том, что пользователь может включить субтитры для любого видео в интернете на русском языке ))
Развернуть ветку
1 комментарий
Почему на русский язык , а не казахский или иврит?
Развернуть ветку
Москва не за один день строилась, подожди немного
Развернуть ветку
Без прописанного текста не понял бы, что там пушистый милый котенок
Развернуть ветку
Когда шло презентация Apple не хотел переводить, там даже кнопки не было.
Развернуть ветку
Когда уже такие функции будут в лайф режиме и с пониманием всех речевых оборотов
Развернуть ветку
Очень нужная вещь, особенно для глухих людей или когда нет возможности послушать видео 🙂
Развернуть ветку
Кто пользовался, как переводят, нормально или нет?
Яндекс.Браузер добавил генерацию автоматических субтитров в видео
Вслед за многоголосым переводом видео у браузера от Яндекс начал автоматически генерировать субтитры к видео — уже залитым на хостинги и к прямым трансляциям. Разработчики говорят, что они первые в мире выпустили такую функциональность.
Субтитры работают на любых сервисах от облачных хранилищ до соцсетей, без ограничений по видеохостингам, даже на тех плеерах, где нет встроенных субтитров. Их можно включить по нажатию одной кнопки и настроить размер шрифта и прозрачность фона, чтобы выделить текст.
Переводчик работает на базе встроенной нейросети. Разработчики оптимизировали ее, чтобы снизить нагрузку на ресурсы пользователя. Исходная версия переводчика использовала 800 мегабайт оперативной памяти, а оптимизированная — всего 150. Генерация субтитров доступна в десктопных версиях Браузера на Windows и Linux, а на macOS появится до конца этого месяца.