«Яндекс» представил технологию автоматического перевода любых видео на русский язык

13.09.2021     

«Яндекс» сделал функцию автоматического закадрового перевода иностранных роликов доступной для почти любых видео в интернете. Функция встроена в фирменный браузер компании.

Ожидаемое развитие

Впервые технология «Яндекса» была продемонстрирована в июле этого года. Тогда она могла создавать озвучку только для небольшого числа видеозаписей из заранее подготовленного плейлиста. Сейчас компания объявила о том, что разработка способна обрабатывать любой ролик на английском языке из YouTube, Vimeo, TikTok, Twitter, Facebook и «ВКонтакте». Исключение сделано для лицензионного контента – например, сериалы из стримингового сервиса Netflix программа переводить не будет.

Для того, чтобы протестировать работу технологии, необходимо использовать мобильную или десктопную версию «Яндекс.Браузера». В списке поддерживаемых ОС – Windows, macOS, Linux, Android и iOS. Для начала генерации русской озвучки необходимо нажать соответствующую кнопку в плеере и немного подождать – создание перевода занимает несколько минут. По завершении этого процесса пользователь получит уведомление.

Видео может быть озвучено двумя голосами – мужским и женским (он же используется в ассистенте «Алиса»). «Яндекс» намерен в будущем расширить языковую поддержку и позволить переводить ролики и с других языков, кроме английского.

Перевод в несколько шагов

Роман Иванов, руководитель «Яндекс.Браузера», рассказал, что главная задача технологии – стереть языковые границы во всемирной паутине. Компания идет к этой цели с 2011 года, и сейчас может предложить пользователям перевод самых популярных типов интернет-контента: текстов, изображений и видео. Добавление новых языковых пар и голосов позволит людям получать больше удовольствия от просмотра роликов, уверен Иванов.

Сам процесс перевода видео происходит в несколько этапов. Сперва программа распознает речь, затем превращает ее в текст и при помощи нейросети разбивает его на предложения. После этого приложение определяет пол говорящего в ролике человека, переводит текст на русский язык и синтезирует подходящий голос. На последнем этапе алгоритм совмещает закадровую озвучку с видеорядом.

Проблема прав

Российский сервис AllMyBlog обвинил «Яндекс» в том, что компания украла идею сервиса для закадрового перевода видеороликов, и подал в Арбитражный суд Москвы иск. Истец утверждает, что вел разработку аналогичной технологии, демонстрировал первые наработки представителям отечественного поисковика и предлагал сотрудничество. По словам AllMyBlog, переговоры с компанией длились до 7 июля, и уже на следующий день «Яндекс» заявил о разработке собственного сервиса для перевода видео.

Отечественный ИТ-гигант опровергает заявления «Оллмай.блог». В компании утверждают, что не вели никаких переговоров и не запрашивали математические модели и другие компоненты технологии. Новая функция «Яндекс.Браузера» работает исключительно на собственных разработках «Яндекса», утверждают представители организации.


Автор:
Александр Вашкевич Аналитик


Комментарии
В избранное Подписаться на ответы Сортировка: Древо развёрнутое
Свернуть все
1. dnikolaev 165 13.09.21 15:59 Сейчас в теме
Протестировал. Это нееереально круто. яндекс ты молодец. получилось гораааааздо лучше чем перевод боевиков на VHS кассетах в 90х. голос приятный. интонации меняются. уважаемый Яндекс. я жду софт типа онлайн Яндекс переводчик с голоса для мобильного телефона. ))
2. dnikolaev 165 13.09.21 16:01 Сейчас в теме
(1) Написал я это и тут же понял, что еще одну профессию скоро заменят машины (( переводчики станут не нужными
4. madonov 156 14.09.21 02:15 Сейчас в теме
(2) Эта технология не в состоянии переводить на лету. Она загружает весь ролик (или большой кусок), разбирает голос в тексты, после чего переводит и озвучивает. Создается впечатление перевода и озвучки на лету, но на самом деле предугадывать контекст она пока не может.

И в заголовке статьи громко указано "технологию автоматического перевода любых видео на русский язык", что на самом деле неправда. Пока это работает исключительно с англоязычными видео.
dnikolaev; +1 Ответить
3. пользователь 13.09.21 16:13
Сообщение было скрыто модератором.
...
5. the1 911 14.09.21 08:59 Сейчас в теме
По ссылке веселье от Яндекса
ixijixi; 27272; dnikolaev; +3 Ответить
Оставьте свое сообщение

См. также

Правительство утвердило разработку российского аналога GitHub

Новость ИТ-новость Цифровая экономика

Премьер-министр Михаил Мишустин на форуме Kazan Digital Week анонсировал создание отечественного репозитория, аналогичного GitHub. Проект реализуется в рамках второго пакета поддержки ИТ.

вчера в 14:12    5778    VKuser24342747    9       

Microsoft присоединилась к Open Infrastructure Foundation для развития облаков

Новость ИТ-новость Новости компаний Облачные технологии

Microsoft стала платиновым членом организации Open Infrastructure Foundation. Компания будет представлять интересы своих телекоммуникационных клиентов в OpenStack.

15.09.2021    3541    VKuser24342747    0       

Microsoft разрешит устанавливать Windows 11 на старые компьютеры

Новость Windows ИТ-новость Новости компаний

Microsoft пересмотрела правила установки Windows 11, которые не позволяли использовать ОС на компьютерах, не соответствующих системным требованиям. Для инсталляции придется создать загрузочный диск.

14.09.2021    2787    VKuser24342747    0       

Оплата лицом заработает на всех станциях метро Москвы

Новость Искусственный интеллект ИТ-новость Цифровая экономика

В столичном метрополитене внедряют систему FacePay. С 15 октября оплатить проезд можно будет, не доставая смартфон, карту или жетоны из кармана.

14.09.2021    2329    user1015646    2       

Исследователи синтезировали выразительную устную речь

Новость Искусственный интеллект ИТ-новость

Синтетическое воспроизведение речи от голосовых помощников и автопереводчиков не передает эмоций и интонаций. Специалисты NVIDIA разработали систему искусственного интеллекта, которая решает эту проблему: ее речь сложно отличить от естественной.

10.09.2021    8747    user1015646    0       

GitHub выпустил веб-редактор кода: возможности, о которых вы могли не знать

Новость GitHub Автоматизация Интернет ИТ-новость

Начинающим программистам часто сложно настроить среду разработки и установить весь необходимый софт. Для них, а также для специалистов, которые работают в распределенных командах, GitHub запустил новый сервис github.dev.

10.09.2021    5136    user1015646    0       

Раскрыта дата релиза Windows 11

Новость Windows ИТ-новость Новости компаний

Microsoft официально объявила, когда станет доступна новая версия самой популярной десктопной ОС. Обновиться с Windows 10 до Windows 11 можно будет уже 5 октября 2021 года.

09.09.2021    8618    user1015646    0       

В Google научились увеличивать изображения в 16 раз с восстановлением деталей

Новость Искусственный интеллект ИТ-новость

Раньше увеличить видео с камер наблюдения в десятки раз получалось только у героев фильмов. Но теперь такая возможность существует и в реальной жизни – инженеры Google разработали прорывную технологию масштабирования изображений.

09.09.2021    4209    user1015646    3       

Эксперты подготовили рекомендации по использованию кириллицы в доменах и почте

Новость Интернет ИТ-новость

Рабочая группа представила стандарты внедрения, обработки, хранения, валидации и адаптации кириллических символов для программ, поддерживающих доменные имена и email-адреса.

07.09.2021    2842    VKuser24342747    0       

Госструктуры перейдут на российские системы видеоконференций

Новость Импортозамещение ИТ-новость Облачные технологии

Российских чиновников переводят на использование отечественного сервиса видеоконференций. Будут внедрять систему TrueConf на базе ОС Astra Linux и процессоров Baikal-M от «Байкал Электроникс».

03.09.2021    3191    user1015646    0       

Минэкономики раскритиковало требования к обновлению оборудования для суверенного Рунета

Новость Импортозамещение Интернет ИТ-новость Телекоммуникации

Минэкономики пришло к выводу, что требования Минцифры затормозят развитие связи в России. По мнению специалистов ведомства, возможным последствием может стать ухудшение интернет-услуг провайдеров.

03.09.2021    2602    VKuser24342747    0       

Разработчики назвали любимые языки программирования

Новость ИТ-новость Языки программирования

Крупнейший форум для разработчиков Stack Overflow составил рейтинг любимых языков программирования. Первую строчку списка занял молодой, но перспективный Rust.

02.09.2021    5230    user1015646    3       

Петербургские ученые обучили нейросеть находить вредоносных ботов в соцсетях

Новость Безопасность Искусственный интеллект ИТ-новость Соцсети

Сотрудники Санкт-Петербургского федерального исследовательского центра Российской академии наук (СПб ФИЦ РАН) создали решение для поиска ботов, размещающих спам и дезинформацию на любом языке.

02.09.2021    2216    VKuser24342747    1       

Windows Server исключается из эксперимента по поставке обновлений Microsoft WaaS

Новость Windows ИТ-новость Новости компаний Облачные технологии

По результатам четырехлетнего эксперимента Windows as a Service Microsoft решила, что больше не будет обновлять Windows Server несколько раз в год. Для серверной ОС было решено вернуться к практике обновления каждые 2-3 года.

01.09.2021    5374    SKravchenko    0       

Microsoft добавила в Power BI инструменты аналитики для Angular-приложений

Новость Аналитика ИТ-новость

Microsoft представила новый компонент для создания веб-сервисов аналитики данных. Он позволит интегрировать функции Power BI в Angular-приложения.

31.08.2021    3261    user1015646    0       

Windows 11 лишится нескольких функций предыдущей версии системы

Новость Windows ИТ-новость

Microsoft в бета-версии Windows 11 изменила привычные функции. Из ОС исчезло отображение секунд на часах и возможность быстро добавлять события в календарь, а кнопка «Пуск» переместилась в центр панели задач.

31.08.2021    4942    VKuser24342747    6       

GitHub в версии утилиты CLI 2.0 добавил поддержку расширений

Новость GitHub ИТ-новость Новости компаний

Разработчики GitHub представили вторую версию утилиты для управления проектами при помощи командной строки CLI. Приложение поддерживает несколько стандартных расширений и создание собственных.

27.08.2021    6478    VKuser24342747    0       

Круглая дата: ядру Linux исполнилось 30 лет

Новость Linux ИТ-новость Новости компаний

Ядро Linux отмечает юбилей. О создании новой ОС 21-летний Линус Торвальдс объявил 25 августа 1991 года.

27.08.2021    4665    user1015646    2       

Искусственный интеллект научился распознавать изображения лучше человека

Новость Искусственный интеллект ИТ-новость

Алгоритм компьютерного зрения впервые превзошел человека. В экспериментах людям и системе искусственного интеллекта предлагали определить, что изображено на фото, и ответить на вопросы. Результат ИИ оказался выше, чем у человека.

26.08.2021    3681    user1015646    5       

Facebook представил криптобиблиотеку для разработчиков – Winterfell

Новость ИТ-новость Новости компаний

Специалисты Facebook выпустили новую библиотеку Winterfell. Проект с открытым исходным кодом может генерировать доказательство вычислительной целостности STARK.

24.08.2021    4675    user1015646    3       

В GitHub добавлена поддержка цитирования из репозиториев

Новость GitHub ИТ-новость

GitHub позволил использовать файл CITATION.cff, в котором можно указать, как правильно ссылаться на содержимое репозитория при написании академических публикаций.

24.08.2021    5045    VKuser24342747    0       

GitHub официально представил новую версию «Обсуждений»

Новость GitHub ИТ-новость

GitHub заявил о завершении бета-тестирования обновленной версии раздела Discussions. Релизный вариант площадки для обсуждений репозиториев разрабатывался почти год при активном участии сообщества.

23.08.2021    3299    VKuser24342747    0       

Разработчик создал браузерную версию OpenAI Codex для управления веб-страницами

Новость Интернет Искусственный интеллект ИТ-новость

Программист Эндрю Кантино рассказал, что сделал расширение для модификации страниц в Google Chrome, работающее на основе ИИ-ассистента для разработки OpenAI Codex.

23.08.2021    5841    VKuser24342747    0       

Российский разработчик создал эмулятор для запуска приложений iOS на M1 Mac

Новость Mac OS ИТ-новость Мобильные приложения

Программа PlayCover позволяет запускать на компьютерах с операционной системой MacOS любые мобильные приложения для iOS, в том числе игры с поддержкой мыши и клавиатуры.

20.08.2021    6376    VKuser24342747    0       

Вместо директора Nvidia на презентации выступил его цифровой клон

Новость Искусственный интеллект ИТ-новость Новости компаний

Во время презентации Nvidia выступила точная цифровая копия генерального директора компании Дженсена Хуанга. Виртуальный аватар предпринимателя создан при помощи ИИ-технологий.

20.08.2021    3754    VKuser24342747    1