«Яндекс» улучшил качество видеоряда старых мультфильмов с помощью нейросетей

28.09.2018     

В «Яндексе» придумали способ улучшить видеоряд старых фильмов или мультфильмов, доступных в сети только в плохом качестве, разработав для этого технологию DeepHD.

В блоге компании заявили, что отыскать в архивах нужную пленку и отсканировать ее заново не всегда возможно. Более реальный вариант в этом случае – увеличить изображение, используя технологии компьютерного зрения. Нейронные сети, улучшающие качество изображений и фотографий, уже существуют и обозначаются термином super-resolution. В «Яндексе» эту технологию интерпретировали по-своему. 

 

Принцип работы DeepHD

 

Как это работает

Отличительная особенность технологии DeepHD в том, что она умеет обрабатывать как картинки, так и видео.

Обработка осуществляется в два этапа, на каждый из которых приходится своя нейронная сеть. На первом этапе картинка готовится к обработке и «избавляется» от помех. Далее она поступает к другой нейронной сети – генератору, выполняющему основную работу и выдающему большую картинку в хорошем качестве вместо маленькой.

Нейросеть-генератор в качестве образцов использует картинки, уже доступные в высоком разрешении. Их уменьшают и пропускают через генератор, чтобы получить пару больших изображений: настоящее и искусственное.

Обучение генератора контролируют еще две нейронные сети: классификатор и дискриминатор. Первая следит за тем, чтобы генератор не добавил в картинку лишних деталей, а вторая отвечает на вопрос «Настоящая ли картинка?». Если дискриминатор путает искусственную картинку с настоящей, то генератор хорошо справился со своей задачей.

Где применяется

Технология DeepHD помогает «Яндексу» улучшать разрешение кинофильмов и мультипликации не только на главной странице, но и в результатах поиска. Технология работы с видеорядом такая же, как со статичным изображением, когда вместо полученной маленькой картинки нейросеть выдает большую.

 

 

 

Напомним, что ранее ученые технологического университета Карнеги-Меллона научили нейросеть оперативно и реалистично передавать мимику и действия персонажа из одного видео в другое. Происходит это с помощью неконтролируемых алгоритмов машинного обучения, называемых генеративными состязательными сетями (GAN). Технология часто используется при подделке фотографий.


Автор:
Дарья Расина Редактор


Комментарии
В избранное Подписаться на ответы Сортировка: Древо развёрнутое
Свернуть все
1. roman77 146 28.09.18 10:14 Сейчас в теме
Молодцы. Но тех, кто про..ли исходные плёнки надо наказать построже.
3. Timur.V 67 28.09.18 10:47 Сейчас в теме
(1)
Так, кажется, не было технологии сохранения пленок.
Кажется около года назад Путин вручал государственную награду кому-то из Госфильмофонда за то, что разработали технологию
сохранения или восстановление старых пленок.
6. roman77 146 28.09.18 11:29 Сейчас в теме
(3) С плёнками всё в порядке, если их хранить в хранилище. А если их выбросить на помойку, как у нас делалось, тогда, конечно, нужны супер технологии. Фильм такой был культовый "Через тернии к звёздам". Ни осталось ни одной исходной копии. Только несколько заезженных и порванных плёнок из тех, что побывали в прокате в кинотеатрах.
2. Student1C 43 28.09.18 10:42 Сейчас в теме
А можно как то попробовать свое фото/видео конвертировать?
4. Неопределено 73 28.09.18 10:54 Сейчас в теме
(2) В своей статье на Хабре Яндекс написал, что пока нельзя.
vrednyi_glavred; Student1C; +2 Ответить
5. dimisa 120 28.09.18 11:21 Сейчас в теме
Яндекс, многих пользователей интернета интересует вопрос : "Когда нейросети доберуться до порнохаба, там слишком много контента в плохом качестве но с интересным сюжетом ?"
shard; CyberCerber; товарищ Ын; +3 Ответить
7. buganov 153 28.09.18 11:44 Сейчас в теме
Вспомнился мем про увеличение изображения в записи, когда в болте крепления номера автомобиля виден преступник=)
АлександрЯрославичъ; CyberCerber; mavom; TreeDogNight; +4 Ответить
8. agent00mouse 208 28.09.18 12:20 Сейчас в теме
Полную статью читайте на хабре.
9. PerlAmutor 107 28.09.18 17:39 Сейчас в теме
2030 год, при просмотре фильма тот внезапно становится на паузу, главные персонажи разворачивается к зрителю и начинают рекламировать сайт казино...
Оставьте свое сообщение

См. также

Microsoft представила Project OneFuzz – фреймворк для поиска уязвимостей в ПО

Новость GitHub Безопасность Искусственный интеллект ИТ-новость Новости компаний

Компания Microsoft официально анонсировала фреймворк Project OneFuzz. Он поможет разработчикам находить уязвимости в коде и оперативно устранять их.

сегодня в 13:45    1545    user1015646    0       

Mozilla «затягивает пояс» и сворачивает два сервиса Firefox

Новость Интернет ИТ-новость Новости компаний

Спустя полтора года после запуска бесплатного файлообменника Firefox Send, Mozilla отказалась от сервиса. Firefox Notes, который начал работу в рамках программы Test Pilot, также пошел под нож.

23.09.2020    2808    SKravchenko    0       

GitHub разрешил выбирать имя основной ветки для новых репозиториев

Новость GitHub ИТ-новость

Крупнейший сервис хранения репозиториев кода GitHub продолжает внедрение масштабных изменений. На этот раз разработчики отредактировали политику создания новых репозиториев кода.

23.09.2020    1901    user1015646    7       

Nvidia купит производителя чипов ARM

Новость ИТ-новость

Производитель графических карт Nvidia заключил соглашение с японским холдингом Softbank. Цель – покупка разработчика процессоров ARM за 40 млрд долларов США.

22.09.2020    1944    user1015646    0       

Рассекречены характеристики процессоров Intel, которые сменят Atom

Новость ИТ-новость Микроэлектроника

Процессоры Intel Atom стали основой тысяч моделей бюджетных ноутбуков с пассивным охлаждением. Инсайдеры рассказали о характеристиках новых чипов, которые сменят Atom на рынке и обеспечат достойную производительность при достаточно низкой цене.

21.09.2020    2478    user1015646    0       

Деньги на ветер: Google опубликовала на Github исходники проекта Makani

Новость GitHub Google ИТ-новость

Google выложила исходный код программного обеспечения для управления системой ветрогенераторов. Проект, для которого разработаны исходники, уже закрыт, но они почти целиком стали доступны как open source.

21.09.2020    2773    VKuser24342747    0       

Microsoft подвела итоги эксперимента по размещению своих дата-центров под водой

Новость Дата-центры ИТ-новость Новости компаний

Проект «Natick», в рамках которого сервера в герметичном контейнере разместили в океане недалеко от Шотландии, длился 5 лет. Недавно состоялся подъем контейнера и подведение итогов исследования.

18.09.2020    3182    ЕленаЧерепнева    0       

Прощай, браузер: Google разработает замену для Chrome OS

Новость ОС Google ИТ-новость

Google работает над созданием новой операционной системы под внутренним названием LaCrOs. Разработка должна заменить Chrome OS. Ключевое отличие – отказ от встроенного в ОС браузера.

18.09.2020    3979    VKuser24342747    0       

Android 11 представлен официально

Новость Android ИТ-новость Мобильные приложения

Компания Google выпустила новую версию самой популярной в мире мобильной операционной системы. Android 11 – Red Velvet Cake – названа в честь торта «Красный бархат», получила новые настройки приватности, поддержку 5G, встроенную функцию записи экрана и опцию подтвержденных звонков от компаний.

18.09.2020    5713    user1015646    0       

Google объединила разработку no-code, управление API и бессерверные вычисления

Новость Google ИТ-новость Новости компаний

Google Cloud объявила о запуске своей новой платформы бизнес-приложений, которая сочетает в себе управление через API с разработкой приложений без кода, а также с возможностями автоматизации и анализа данных.

18.09.2020    2604    SKravchenko    1       

Microsoft раскрыла исходники библиотеки для редактирования документов в облаке

Новость ИТ-новость Новости компаний Облачные технологии

Microsoft опубликовала исходный код собственного фреймворка Fluid. Компания использует его в Office 365 для создания облачных документов для совместного редактирования.

17.09.2020    1885    VKuser24342747    0       

Microsoft и VMware запустили облачный сервис Azure Spring для Java-разработчиков

Новость ИТ-новость Новости компаний Облачные технологии

Компания Microsoft совместно с VMware запустила сервис для облачной разработки – Azure Spring Cloud. Это комфортная среда для создания Java-приложений на платформе Microsoft Azure с использованием популярного фреймворка Spring Boot.

17.09.2020    1693    user1015646    0       

Приближается конец Adobe Flash Player

Новость Интернет ИТ-новость

В июле 2017 года Microsoft вместе с Adobe объявили, что Adobe Flash Player больше не будет поддерживаться системой после декабря 2020. В соответствии с этим планом Microsoft прекратит и использование Flash Player в Edge и IE 11.

16.09.2020    2543    SKravchenko    1       

Утверждено крупное обновление языка С++

Новость ИТ-новость Языки программирования

Выхода С++ 20 осталось ждать совсем недолго. Новый стандарт утвердила группа международной организации по стандартизации ISO – Working Group 21 (WG21).

15.09.2020    2646    user1015646    6       

GitHub победил: Microsoft закроет IDE Visual Studio Codespace

Новость GitHub ИТ-новость

Microsoft в этом году запретит создавать новые проекты в облачной среде разработки Visual Studio Codespace. Вместо нее компания будет продвигать одноименный инструмент GitHub.

14.09.2020    2922    VKuser24342747    3       

Mozillа: история самой недооцененной технологической компании

Новость Интернет ИТ-новость Новости компаний Языки программирования

В августе Mozilla запустила второй раунд увольнений за год. Хотя официальной причиной называют COVID-19, это свидетельствует о глубоком кризисе компании с долгой историей, которая приложила руку к созданию многих ИТ-стандартов и технологий.

11.09.2020    3135    SKravchenko    1       

Microsoft изучают LTO + PGO для ядра Linux

Новость Linux ИТ-новость

Ян Бирман – менеджер по разработке программного обеспечения в Microsoft – представил на конференции Linux Plumbers Conference доклад об исследовании профильной оптимизации ядра Linux.

10.09.2020    3047    SKravchenko    2       

Microsoft выпустила официальные ISO-образы Windows 10 20H2 для инсайдеров

Новость Windows ИТ-новость

Microsoft активно работает над следующей версией Windows 10, известной как 20H2. Она будет выпущена в конце 2020 года. И недавно 20H2 стала доступна в виде ISO-образов для коммерческих клиентов в бета-канале.

09.09.2020    1194    SKravchenko    2       

Устройства Huawei больше не будут получать патчи безопасности Android

Новость Android ИТ-новость Мобильные приложения

Компания Google прекратила предоставление патчей безопасности для смартфонов и планшетов Huawei, которые работают под управлением Android. Это следствие политики американского правительства, которое ограничивает работу с китайскими партнерами.

09.09.2020    1237    user1015646    3       

Google представила новый инструмент для Android-разработки Jetpack Compose

Новость Android Google ИТ-новость Мобильные приложения

Компания Google запустила альфа-тест UI-фреймворка Jetpack Compose, предназначенного для создания приложений под Android. Инструментарий решения уже доступен в Android Studio 4.2.

09.09.2020    784    VKuser24342747    2       

Российские разработчики бесплатно передали Linux поддержку NTFS

Новость Linux ИТ-новость

Сообщество Linux получило драйвер для файловой системы NTFS, которая используется в Windows. Код решения бесплатно передали разработчики российской компании Paragon Software.

08.09.2020    2296    user1015646    0       

Google запустил портал для разработчиков Chrome OS

Новость ОС Google ИТ-новость

Компания Google представила новый портал ChromeOS.dev. Это ресурс, предназначенный для общения и предоставления информации всем разработчикам системы Chrome OS и приложений для нее.

07.09.2020    804    user1015646    0       

Facebook ждёт обрушения доходов от рекламы из-за повышенной конфиденциальности в iOS 14

Новость iOS ИТ-новость Мобильные приложения Соцсети

26 августа Facebook предупредил рекламодателей, что новые инструменты Apple для борьбы с отслеживанием активности пользователей могут привести к падению доходов издателей более чем на 50 процентов.

04.09.2020    1036    SKravchenko    2       

Энтузиасты демонстрируют Windows 10 для ARM с функцией, аналогичной Continuum

Новость Windows ИТ-новость Мобильные приложения

Недавние выпуски Windows 10 на ARM позволили энтузиастам включить поддержку двойного экрана. Некоторым разработчикам даже удалось воссоздать возможности Windows Phone Continuum.

03.09.2020    906    SKravchenko    0       

Программист из США попросил суд выдать ИИ патент на изобретение

Новость Инновации Искусственный интеллект ИТ-новость

Американский разработчик настаивает, что созданная им нейросеть стала автором двух изобретений. Патентное ведомство США отказалось признать ИИ владельцем интеллектуальных прав на устройства.

03.09.2020    1079    VKuser24342747    30