«Яндекс» представил технологию автоматического перевода любых видео на русский язык

13.09.2021      18265

«Яндекс» сделал функцию автоматического закадрового перевода иностранных роликов доступной для почти любых видео в интернете. Функция встроена в фирменный браузер компании.

Ожидаемое развитие

Впервые технология «Яндекса» была продемонстрирована в июле этого года. Тогда она могла создавать озвучку только для небольшого числа видеозаписей из заранее подготовленного плейлиста. Сейчас компания объявила о том, что разработка способна обрабатывать любой ролик на английском языке из YouTube, Vimeo, TikTok, Twitter, Facebook и «ВКонтакте». Исключение сделано для лицензионного контента – например, сериалы из стримингового сервиса Netflix программа переводить не будет.

Для того, чтобы протестировать работу технологии, необходимо использовать мобильную или десктопную версию «Яндекс.Браузера». В списке поддерживаемых ОС – Windows, macOS, Linux, Android и iOS. Для начала генерации русской озвучки необходимо нажать соответствующую кнопку в плеере и немного подождать – создание перевода занимает несколько минут. По завершении этого процесса пользователь получит уведомление.

Видео может быть озвучено двумя голосами – мужским и женским (он же используется в ассистенте «Алиса»). «Яндекс» намерен в будущем расширить языковую поддержку и позволить переводить ролики и с других языков, кроме английского.

Перевод в несколько шагов

Роман Иванов, руководитель «Яндекс.Браузера», рассказал, что главная задача технологии – стереть языковые границы во всемирной паутине. Компания идет к этой цели с 2011 года, и сейчас может предложить пользователям перевод самых популярных типов интернет-контента: текстов, изображений и видео. Добавление новых языковых пар и голосов позволит людям получать больше удовольствия от просмотра роликов, уверен Иванов.

Сам процесс перевода видео происходит в несколько этапов. Сперва программа распознает речь, затем превращает ее в текст и при помощи нейросети разбивает его на предложения. После этого приложение определяет пол говорящего в ролике человека, переводит текст на русский язык и синтезирует подходящий голос. На последнем этапе алгоритм совмещает закадровую озвучку с видеорядом.

Проблема прав

Российский сервис AllMyBlog обвинил «Яндекс» в том, что компания украла идею сервиса для закадрового перевода видеороликов, и подал в Арбитражный суд Москвы иск. Истец утверждает, что вел разработку аналогичной технологии, демонстрировал первые наработки представителям отечественного поисковика и предлагал сотрудничество. По словам AllMyBlog, переговоры с компанией длились до 7 июля, и уже на следующий день «Яндекс» заявил о разработке собственного сервиса для перевода видео.

Отечественный ИТ-гигант опровергает заявления «Оллмай.блог». В компании утверждают, что не вели никаких переговоров и не запрашивали математические модели и другие компоненты технологии. Новая функция «Яндекс.Браузера» работает исключительно на собственных разработках «Яндекса», утверждают представители организации.


Автор:
Аналитик


Комментарии
В избранное Подписаться на ответы Сортировка: Древо развёрнутое
Свернуть все
1. dnikolaev 173 13.09.21 15:59 Сейчас в теме
Протестировал. Это нееереально круто. яндекс ты молодец. получилось гораааааздо лучше чем перевод боевиков на VHS кассетах в 90х. голос приятный. интонации меняются. уважаемый Яндекс. я жду софт типа онлайн Яндекс переводчик с голоса для мобильного телефона. ))
2. dnikolaev 173 13.09.21 16:01 Сейчас в теме
(1) Написал я это и тут же понял, что еще одну профессию скоро заменят машины (( переводчики станут не нужными
4. madonov 156 14.09.21 02:15 Сейчас в теме
(2) Эта технология не в состоянии переводить на лету. Она загружает весь ролик (или большой кусок), разбирает голос в тексты, после чего переводит и озвучивает. Создается впечатление перевода и озвучки на лету, но на самом деле предугадывать контекст она пока не может.

И в заголовке статьи громко указано "технологию автоматического перевода любых видео на русский язык", что на самом деле неправда. Пока это работает исключительно с англоязычными видео.
dnikolaev; +1 Ответить
3. пользователь 13.09.21 16:13
Сообщение было скрыто модератором.
...
5. the1 1125 14.09.21 08:59 Сейчас в теме
По ссылке веселье от Яндекса
ixijixi; 27272; dnikolaev; +3 Ответить
Оставьте свое сообщение

См. также

OpenAI опубликовала код системы распознавания речи Whisper

Новость Искусственный интеллект ИТ-новость

OpenAI открыла исходный код эталонной реализации на базе фреймворка PyTorch и набор уже обученных моделей для использования под лицензией MIT. Нейросеть используется для перевода речи в текст.

28.09.2022    1416    VKuser24342747    0       

Вторая версия среды разработки для плат Arduino вышла из бета-теста

Новость ИТ-новость Микроэлектроника

Arduino IDE 2.0 получила стабильную версию, в которой появилась поддержка автодополнения кода и темная тема. Разработка заняла несколько лет. Программа распространяется бесплатно.

23.09.2022    1337    VKuser24342747    0       

Основатель движения свободного ПО выпустил руководство по языку C

Новость Linux ИТ-новость Языки программирования

Ричард Мэттью Столлман, основатель Фонда свободного программного обеспечения, представил руководство по языку C и расширениям GNU. Пособие доступно всем желающим и предназначено как для опытных, так и начинающих программистов.

19.09.2022    1183    VKuser24342747    0       

«Ростелеком» предложил создать национальную экосистему на базе «Авроры»

Новость Импортозамещение ИТ-новость Мобильные приложения

Провайдер считает, что государственная мобильная экосистема поможет обеспечить технологическую независимость и экономический подъем страны. А ОС «Аврора» наиболее перспективная разработка для достижения этих целей.

15.09.2022    1189    VKuser24342747    5       

Яндекс выложил в открытый доступ инструмент для разработки мобильных приложений

Новость ИТ-новость Мобильные приложения Яндекс

Фреймворк DivKit от Яндекса стал доступен как open source решение. Инструмент позволяет менять интерфейс приложений без скачивания обновлений и значительно ускоряет мобильную разработку.

02.09.2022    1111    VKuser24342747    0       

Группа компаний «Астра» представила собственную мобильную ОС

Новость Linux ИТ-новость Мобильные приложения

Доработанная ОС Astra Linux Special Edition может быть запущена на большом числе мобильных устройств, в том числе на планшетах и смартфонах с процессорами на архитектурах ARM, «Эльбрус» и x86-64.

25.08.2022    755    VKuser24342747    1       

В России разработаны меры для решения проблемы нехватки ИТ-специалистов

Новость ИТ-новость

Вице-премьер Дмитрий Чернышенко сообщил, что сейчас экономике страны не хватает 1 млн ИТ-специалистов. Способы преодоления дефицита закреплены в программе нацпроекта «Цифровая экономика»

05.08.2022    1124    VKuser24342747    11       

Яндекс открыл доступ к фреймворку для создания приложений с микросервисной архитектурой

Новость GitHub ИТ-новость Яндекс

Инструмент Userver опубликован как бесплатное open source решение. Яндекс уже несколько лет эффективно его использует в своих приложениях Go, «Еда», «Лавка», «Доставка» и другие. Фреймворк находится в стадии бета – переезда на открытую разработку.

02.08.2022    1850    VKuser24342747    19       

Бизнес сможет использовать повышающий коэффициент для расходов на покупку ПО

Новость ИТ-новость

Принят закон, который позволяет компаниям учитывать расходы на отечественные программы и радиоэлектронное оборудование с коэффициентом 1,5. Решения должны быть включены в соответствующие реестры и относиться к ИИ.

26.07.2022    1737    VKuser24342747    0       

Минэкономразвития тестирует миграцию с Windows 10 на Astra Linux

Новость ИТ-новость

Министерство проводит эксперимент, в ходе которого сотрудники используют российскую ОС Astra Linux вместо Windows 10. По словам главы департамента, эксперимент проходит успешно.

11.07.2022    1300    VKuser24342747    0       

Вышла версия открытого текстового редактора Vim 9.0

Новость ИТ-новость

В приложение добавлен скриптовый язык с поддержкой компилируемых функций для создания плагинов, улучшена проверка правописания и автодополнения, предоставлен выбор цветовых схем.

07.07.2022    1391    VKuser24342747    0       

 «Яндекс» открыл доступ к SmartCaptcha и нейросети по генерации текстов 

Новость ИТ-новость Яндекс

Компания открыла доступ к алгоритму SmartCaptcha, который защищает сайт от спама и DDoS-атак, а также к проекту YaLM 100B, способному писать тексты на английском и русском языках. 

29.06.2022    1566    VKuser24342747    0       

«Яндекс» предложил разработчикам пройти диагностику технических навыков

Новость Кадровые агентства, подбор персонала ИТ-новость Яндекс

Компания запустила сервис, при помощи которого можно получить оценку своих технических навыков от специалистов «Яндекса». Тестирование включает онлайн-интервью и решение задач с реальных собеседований. 

27.06.2022    1510    VKuser24342747    1       

GitHub открыл доступ всем разработчикам к ИИ-помощнику Copilot по подписке

Новость GitHub Искусственный интеллект ИТ-новость

Github Copilot стал общедоступным, но для его использования пользователю репозитория нужно приобрести подписку. Хотя некоторые разработчики могут пользоваться инструментом бесплатно.

24.06.2022    1716    VKuser24342747    1       

В России планируют учредить Федерацию спортивного программирования

Новость ИТ-новость

Минцифры и Минспорта подписали меморандум, в котором закреплено сотрудничество ведомств по развитию в стране спортивного программирования и проведение первого официального чемпионата.

21.06.2022    1895    VKuser24342747    6       

Microsoft окончательно прекратила поддержку Internet Explorer

Новость Интернет ИТ-новость

Microsoft прекратила выпуск обновлений для своего браузера Internet Explorer, а с августа начнет удалять приложение из актуальных версий Windows. Эксперты полагают, что из-за этого пострадает много бизнес-пользователей.

17.06.2022    2134    VKuser24342747    4       

В России начал работу отечественный сервис мониторинга сбоев

Новость Импортозамещение Интернет ИТ-новость

Российская компания BrandAnalytics запустила платформу «Детектор сбоев», предназначенную для отслеживания работоспособности сайтов и сервисов, в том числе русскоязычных.

16.06.2022    1390    VKuser24342747    0       

Минцифры запустило систему отслеживания поддельных сайтов

Новость Безопасность Интернет ИТ-новость

Информационная система под названием «Антифишинг» способна обнаруживать мошеннические веб-ресурсы, которые выглядят как официальные сайты госорганов, компаний и соцсетей.

14.06.2022    2246    VKuser24342747    0       

GitHub прекратил поддержку редактора Atom ради перехода на VS Code

Новость GitHub ИТ-новость

GitHub объявил о прекращении разработки редактора кода Atom. К концу года все проекты в этом приложении станут доступны только для чтения. Причина – медленное развитие приложения.

10.06.2022    2084    VKuser24342747    2       

Вышла новая версия открытой операционной системы AlmaLinux 9

Новость Linux ИТ-новость

AlmaLinux – альтернатива CentOS, поддержка которой будет прекращена в 2024 году. В девятой версии ОС добавлено больше инструментов безопасности и обновлена среда разработки приложений.

09.06.2022    3235    VKuser24342747    2       

GitLab представила новый релиз платформы совместной разработки

Новость GIT ИТ-новость

Вышел релиз ИТ-хостинга для совместной разработки GitLab 15.0. В нем проведена подготовительная работа для перехода на VS Code, а также добавлен расширенный поиск и возможность управлять несколькими итерациями.

01.06.2022    2095    VKuser24342747    2       

Минцифры создаст единую цифровую платформу для акцептования оферт

Новость ИТ-новость Цифровая экономика

Правительство подготовило проект постановления, которое позволяет провести эксперимент по разработке Единой цифровой платформы ведения и акцептования оферт. В тестовом режиме сервис проработает до января 2023 года.

31.05.2022    1458    VKuser24342747    0       

VK совместно с Минцифры запустили магазин приложений RuStore

Новость Импортозамещение ИТ-новость Мобильные приложения

Компания начала бета-тестирование официального магазина приложений для Android. В маркетплейсе уже сейчас доступно более ста программ, часть из которых недоступны в Google Play.

27.05.2022    2671    VKuser24342747    5       

В GitHub появилась нативная поддержка математических выражений в md-файлах

Новость GitHub ИТ-новость

Команда GitHub рассказала о новой функции, которая позволяет записывать математические формулы в Markdown. Разработчики впервые попросили добавить эту возможность восемь лет назад.

26.05.2022    2024    VKuser24342747    0       

Национальный удостоверяющий центр наладил выпуск TLS-сертификатов

Новость Безопасность Импортозамещение Интернет ИТ-новость

Национальный удостоверяющий центр (НУЦ) предложил владельцам сайтов получить сертификаты безопасности с поддержкой технологии прозрачности. Они работают в российских браузерах.

25.05.2022    2170    VKuser24342747    1