«Яндекс» улучшил качество видеоряда старых мультфильмов с помощью нейросетей

28.09.2018     

В «Яндексе» придумали способ улучшить видеоряд старых фильмов или мультфильмов, доступных в сети только в плохом качестве, разработав для этого технологию DeepHD.

В блоге компании заявили, что отыскать в архивах нужную пленку и отсканировать ее заново не всегда возможно. Более реальный вариант в этом случае – увеличить изображение, используя технологии компьютерного зрения. Нейронные сети, улучшающие качество изображений и фотографий, уже существуют и обозначаются термином super-resolution. В «Яндексе» эту технологию интерпретировали по-своему. 

 

Принцип работы DeepHD

 

Как это работает

Отличительная особенность технологии DeepHD в том, что она умеет обрабатывать как картинки, так и видео.

Обработка осуществляется в два этапа, на каждый из которых приходится своя нейронная сеть. На первом этапе картинка готовится к обработке и «избавляется» от помех. Далее она поступает к другой нейронной сети – генератору, выполняющему основную работу и выдающему большую картинку в хорошем качестве вместо маленькой.

Нейросеть-генератор в качестве образцов использует картинки, уже доступные в высоком разрешении. Их уменьшают и пропускают через генератор, чтобы получить пару больших изображений: настоящее и искусственное.

Обучение генератора контролируют еще две нейронные сети: классификатор и дискриминатор. Первая следит за тем, чтобы генератор не добавил в картинку лишних деталей, а вторая отвечает на вопрос «Настоящая ли картинка?». Если дискриминатор путает искусственную картинку с настоящей, то генератор хорошо справился со своей задачей.

Где применяется

Технология DeepHD помогает «Яндексу» улучшать разрешение кинофильмов и мультипликации не только на главной странице, но и в результатах поиска. Технология работы с видеорядом такая же, как со статичным изображением, когда вместо полученной маленькой картинки нейросеть выдает большую.

 

 

 

Напомним, что ранее ученые технологического университета Карнеги-Меллона научили нейросеть оперативно и реалистично передавать мимику и действия персонажа из одного видео в другое. Происходит это с помощью неконтролируемых алгоритмов машинного обучения, называемых генеративными состязательными сетями (GAN). Технология часто используется при подделке фотографий.


Автор:
Дарья Расина Редактор


Комментарии
Избранное Подписка Сортировка: Древо развёрнутое
Свернуть все
1. roman77 142 28.09.18 10:14 Сейчас в теме
Молодцы. Но тех, кто про..ли исходные плёнки надо наказать построже.
3. Timur.V 67 28.09.18 10:47 Сейчас в теме
(1)
Так, кажется, не было технологии сохранения пленок.
Кажется около года назад Путин вручал государственную награду кому-то из Госфильмофонда за то, что разработали технологию
сохранения или восстановление старых пленок.
6. roman77 142 28.09.18 11:29 Сейчас в теме
(3) С плёнками всё в порядке, если их хранить в хранилище. А если их выбросить на помойку, как у нас делалось, тогда, конечно, нужны супер технологии. Фильм такой был культовый "Через тернии к звёздам". Ни осталось ни одной исходной копии. Только несколько заезженных и порванных плёнок из тех, что побывали в прокате в кинотеатрах.
2. Student1C 43 28.09.18 10:42 Сейчас в теме
А можно как то попробовать свое фото/видео конвертировать?
4. Неопределено 71 28.09.18 10:54 Сейчас в теме
(2) В своей статье на Хабре Яндекс написал, что пока нельзя.
vrednyi_glavred; Student1C; +2 Ответить
5. dimisa 118 28.09.18 11:21 Сейчас в теме
Яндекс, многих пользователей интернета интересует вопрос : "Когда нейросети доберуться до порнохаба, там слишком много контента в плохом качестве но с интересным сюжетом ?"
shard; CyberCerber; товарищ Ын; +3 Ответить
7. buganov 150 28.09.18 11:44 Сейчас в теме
Вспомнился мем про увеличение изображения в записи, когда в болте крепления номера автомобиля виден преступник=)
АлександрЯрославичъ; CyberCerber; mavom; TreeDogNight; +4 Ответить
8. agent00mouse 205 28.09.18 12:20 Сейчас в теме
Полную статью читайте на хабре.
9. PerlAmutor 104 28.09.18 17:39 Сейчас в теме
2030 год, при просмотре фильма тот внезапно становится на паузу, главные персонажи разворачивается к зрителю и начинают рекламировать сайт казино...
Оставьте свое сообщение

См. также

Создан дистрибутив Linux с рекордно быстрой загрузкой

Новость ОС Linux ИТ-новость

Тем, что современные компьютеры с мощными процессорами и SSD-дисками загружают операционную систему за несколько секунд, сегодня никого не удивишь. Разработчик Эрик Моквист пошел дальше и представил Monolinux – дистрибутив Linux со скоростью загрузки в 0,37 с. на одноплатных ПК размером с кредитку.

сегодня в 13:33    87    user1015646    0       

AMD объявила о поддержке аппаратного ускорения машинного обучения в Windows 10

Новость Windows Infostart Software Partners Искусственный интеллект Маркет Микроэлектроника

17 июня AMD объявила о поддержке проекта машинного обучения с ускорением на GPU в Windows 10. Это позволит пользователям и разработчикам с аппаратным обеспечением AMD получить доступ к процессам обучения ML и оттачивать свои навыки на компьютерах, которые они используют для повседневной работы.

сегодня в 11:41    182    SKravchenko    0       

Путин рассказал о грядущих проектах в ИТ-отрасли

Новость ИТ-новость

Владимир Путин поручил Госдуме рассмотреть возможность принятия законопроекта об экспериментальных правовых режимах, а правительству – предоставить ЦОДам льготные тарифы на электроэнергию. 

09.07.2020    429    VKuser24342747    1       

Mail.ru и Amazon совместно запустят облачный сервис в РФ

Новость ИТ-новость Новости компаний Облачные технологии

Один из крупнейших облачных провайдеров Amazon Web Services (AWS) полноценно выходит на российский рынок. Новый облачный сервис компания запустит в РФ совместно с Mail.ru Group.

08.07.2020    500    user1015646    0       

Черный список слов: Linux может избавиться от терминов «slave» и «blacklist»

Новость ИТ-новость Языки программирования

Разработчики ядра Linux усмотрели расизм в некоторых устоявшихся терминах системы. Они предлагают заменить их на нейтральные, чтобы соответствовать текущим глобальным веяниям и изменениям.

07.07.2020    438    VKuser24342747    2       

Ученые выяснили, как работает мозг программистов при работе с кодом

Новость ИТ-новость Наука

Исследовательская группа Хемницкого технологического университета в Германии впервые проанализировала, как работает мозг человека при работе над программным кодом.  

03.07.2020    1145    SKravchenko    18       

Apple разрешила разработчикам оспаривать нарушение правил App Store 

Новость ИТ-новость Мобильные приложения Новости компаний

Apple пересмотрит процесс взаимодействия с разработчиками, нарушившими правила App Store. Авторы приложений смогут обжаловать решение компании и загружать обновления в магазин, пока идет спор. 

30.06.2020    515    VKuser24342747    0       

Ползет вперёд: Python обогнал Java в рейтинге языков программирования

Новость ИТ-новость Языки программирования

JetBrains, крупный разработчик сред для создания кода, представил ежегодный отчет о популярных языках программирования. В рейтинге Developer Ecosystem Survey 2020 язык Python впервые обогнал Java. 

26.06.2020    893    user1015646    3       

Швейцарские ученые создали первый интуитивно понятный язык для квантовых компьютеров

Новость Инновации ИТ-новость Языки программирования

Ученые из Высшей технической школы Цюриха (ETH Zurich) разработали язык программирования, который можно использовать для квантовых компьютеров так же легко, надежно и безошибочно, как классические. 

26.06.2020    894    SKravchenko    0       

ABBYY опубликовала исходный код своей библиотеки машинного обучения

Новость Infostart Software Partners Маркет Новости компаний

Компания ABBYY выложила на GitHub исходники своей нейросети, используемой для распознания текста. Программный код открыт под свободной лицензией Apache 2.0.

23.06.2020    1683    VKuser24342747    5       

Лучше поздно… Роскомнадзор прекращает блокировку Telegram

Новость Мессенджеры Роскомнадзор

Новость об отмене блокировки мессенджера появилась на официальном сайте ведомства.

22.06.2020    1510    Senator_I    18       

SpaceX использовал Linux и C, для вывода астронавтов на орбиту

Новость ИТ-новость

Ракета Илона Маска Falcon 9, с помощью которой корабль Crew Dragon доставил астронавтов НАСА на Международную космическую станцию, работает на жидком кислороде, ракетном керосине, Linux и C/C++.

19.06.2020    1093    SKravchenko    4       

Google избавляется от «расизма» в коде Chrome

Новость ИТ-новость Новости компаний

Команда Google Chrome исключает из кода термины «черный список» и «белый список», чтобы сделать их более инклюзивными.

18.06.2020    953    SKravchenko    15       

Представлено ядро Linux 5.7: что нового

Новость Linux ИТ-новость

В релиз включили обновленную реализацию файловой системы exFAT, переработанные средства аутентификации и инструменты для создания UDP-туннелей, а также сняли ограничение на длину строки кода в 80 символов.

18.06.2020    834    user1015646    0       

Разработчики получили доступ к созданию навыков для «Маруси»

Новость ИТ-новость Новости компаний

Mail.ru Group предоставила возможность сторонним разработчикам создавать собственные голосовые команды для виртуального помощника «Маруся».

17.06.2020    953    VKuser24342747    1       

Microsoft представила бесплатные инструменты для создания ботов

Новость ИТ-новость Новости компаний

Компания Microsoft обновила инструменты для создания ботов: Virtual Assistant Accelerator и Bot Framework Composer.

16.06.2020    1062    user1015646    0       

Сайт Stack Overflow назвал «самые страшные» и «самые любимые» языки программирования

Новость ИТ-новость Языки программирования

2020 год показал, что Rust – «самый любимый», Python – «самый востребованный», а Perl, Scala и Go – «самые высокооплачиваемые» языки программирования.

15.06.2020    1089    SKravchenko    3       

Разработчики «Эльбруса» выложили в открытый доступ систему команд процессора

Новость Микроэлектроника

МЦСТ, создающая отечественные «Эльбрус», предоставила всем желающим доступ к набору микропроцессорных команд. Документация распространяется по открытой лицензии. 

08.06.2020    1098    VKuser24342747    4       

Создатель Linux высказался за увеличение длины строк кода

Новость Linux ИТ-новость

Золотым стандартом для кода ядра Linux считаются 80-символьные строки. Но Торвальдс предлагает увеличить значение до 100 символов.

05.06.2020    2168    user1015646    18       

«Ростех» внедрит в вузах России учебного промышленного робота с исходниками на GitHub

Новость GitHub Робототехника

Госкорпорация «Ростех» создала компактного робота для обучения студентов вузов и колледжей. Исходный код для управления устройством выложен на GitHub, учебные заведения могут дорабатывать его под свои нужды. 

05.06.2020    1575    VKuser24342747    1       

Microsoft призвала пользоваться PowerShell вместо CMD

Новость Infostart Software Partners ИТ-новость Маркет Новости компаний

Microsoft порекомендовала пользоваться инструментом PowerShell вместо классического интерпретатора CMD (cmd.exe). Разработчики не будут заниматься доработкой CMD, но оставят его в системе для обеспечения совместимости. 

04.06.2020    2490    user1015646    39       

Из реестра российского ПО могут удалить ОС на ядре Linux

Новость Linux ИТ-новость Минкомсвязь

Правила, которыми руководствуется Минкомсвязь, запрещают добавлять в реестр ПО с компонентами, которые распространяются по свободным лицензиям GPL и MPL.

02.06.2020    1331    user1015646    10       

Опубликован релиз платформы Electron 9.0.0 для создания приложений на базе движка Chromium

Новость Linux ИТ-новость

Создатели обновления повысили эффективность обработчика событий окна в Linux, улучшили просмотрщик PDF и многое другое.

01.06.2020    1296    SKravchenko    0       

Microsoft планирует объединить UWP и Win32-приложения при помощи проекта Reunion

Новость ИТ-новость Новости компаний

Reunion призван объединить платформу разработчиков Windows, которая в настоящее время разбита между Win32 и универсальной платформой Windows (UWP).

29.05.2020    1246    SKravchenko    0       

«Яндекс» запустил бесплатную облачную платформу для разработки нейросетей

Новость Искусственный интеллект ИТ-новость Облачные технологии

«Яндекс» запустил новый сервис DataSphere, позволяющий проводить в облаке ресурсоемкие вычисления для машинного обучения. Во время тестирования услуга полностью бесплатна для разработчиков. 

29.05.2020    1618    VKuser24342747    1