Искусственный интеллект научился улучшать качество фотографий

03.11.2017      18691
Исследователи из Института интеллектуальных систем Макса Планка в Германии разработали систему EnhanceNet-PAT, которая способна улучшать качество снимков, имеющих низкое разрешение. Об этом сообщает издание The Next Web.

Используемые в настоящее время программы для редактирования изображений при редактировании расплывчатых изображений пытаются реконструировать изображение за счет выстраивания вокруг одного пикселя других схожих элементов, однако это не устраняет проблему расплывчатости изображения. 

Созданный же искусственный интеллект работает на основе машинного обучения и нацелен на точный синтез новых структур. Для его обучения инженеры используют базу с несколькими миллионами изображений с низким разрешением. Система работает над улучшением снимка, представляя как должен выглядеть исходный материал, а затем в нее загружают оригинальный снимок с высоким разрешением. Алгоритм учится на своих ошибках путем сравнения результатов своей работы с оригиналом. 


Хотя пока система не научилась полностью восстанавливать утерянное качество оригинального изображения, ее результаты уже выглядят многообещающе.





Комментарии
В избранное Подписаться на ответы Сортировка: Древо развёрнутое
Свернуть все
1. KroVladS 33 03.11.17 13:34 Сейчас в теме
Можно будет автоматом делать HD-текстуры к старым играм :)
Как применить в 1с непонятно.
TreeDogNight; Rezident495; madonov; rpgshnik; CyberCerber; корум; +6 Ответить
3. nomadon 359 03.11.17 14:26 Сейчас в теме
(1) ну как - как, битые ссылки восстанавливать с помощью ИИ, ну и как писалось ранее - РАУЗ )))
TreeDogNight; Ziggurat; madonov; kraynev-navi; +4 Ответить
2. s22 19 03.11.17 13:51 Сейчас в теме
Суперрезолюшен давно сделан на нейронных сетях.
Текстуры лучше не сделаешь так как с высокой вероятностью он тренирован на фотографиях и соотвественно не способен нормально работать на рисованных изображениях.
4. MaxS 2649 03.11.17 14:42 Сейчас в теме
Процесс фотосъёмки смартфоном можно будет усовершенствовать. Снимаем видео, слегка перемещаясь вправо и влево, выдержки автоматически меняются для охвата теней и света, информация отправляется в облако, обрабатывается, фото с проработкой всех деталей сохраняется.
5. protexprotex 122 03.11.17 14:48 Сейчас в теме
Скорее всего тут используется особенная структура нейросети - называется автоэнкодер - трехслойная - первый и третий слои равны по размеру друг другу - средний слой меньше по размеру (или больше для разреженных автоэнкодеров). Это давно уже все есть. В интернете куча публикаций на эту тему.
6. s22 19 03.11.17 15:11 Сейчас в теме
(5) более вероятно U-net, во всяком случае ее раньше часто применяли для этого
автоэнкодер тут не поможет
7. protexprotex 122 03.11.17 16:02 Сейчас в теме
(6)
U-net

Что такое U-net и почему автоэнкодер не поможет? Объясните, пжл. У меня автоэнкодер применительно к данным задачам, во всяком случае, всегда помогал - и работает очень хорошо. А почему тут не пойдет - не понял Вашу мысль...
8. s22 19 03.11.17 17:26 Сейчас в теме
Автоэнкодер сжимает данные во внутреннем слое расширяя в 3й. Т.е. качество теряется, но остаются важные элементы, изображение станет более смазанным.

Вообще для изображений применяют CNN покрайней мере на большей части сети.
9. protexprotex 122 03.11.17 18:20 Сейчас в теме
(8)
1) Я же написал в посте - РАЗРЕЖЕННЫЙ автоэнкодер.
2) Если Вы обучите автоэнкодер на достаточно большой выборке, то при предъявлении смазанного изображения получите уже более четкое. Обучающая выборка должна состоять из пар - смазанное - четкое. И таких пар возьмите около миллиона - и получите "чудо" - сеть картинки смазанные которых не было в обучающей выборке станут после предъявления сети уже не смазанные.
10. s22 19 03.11.17 19:30 Сейчас в теме
(9) он просто запомнит комбинации, такова особенность разреженного энкодера.
давайте конкретные параметры вашей сети.
11. PerlAmutor 129 05.11.17 10:49 Сейчас в теме
Возможно ли применить подобные технологии для восстановления качества звука при передаче голоса, скажем, по рации? Т.е. обучить НС на основе многих тысяч часов аудио записей разговоров по телефону или радиостанций. Правда неясно откуда взять оригинальные записи с микрофонов. С другой стороны можно взять записи речевых радио, теле эфиров, сериалов, прогнать через конкретные модели каналов связи, чтобы получить искаженные их варианты, а затем скормить нейронной сети.

Другой вариант использования технологии - оцифровка старых книг, видео хроник. Еще интересно, возможно ли обучить нейронную сеть восстанавливать цвета изображений обучая её на паре кадров - цветное/черно-белое?
12. s22 19 05.11.17 12:41 Сейчас в теме
(11)
Возможно ли применить подобные технологии для восстановления качества звука при передаче голоса, скажем, по рации? Т.е. обучить НС на основе многих тысяч часов аудио записей разговоров по телефону или радиостанций. Правда неясно откуда взять оригинальные записи с микрофонов. С другой стороны можно взять записи речевых радио, теле эфиров, сериалов, прогнать через конкретные модели каналов связи, чтобы получить искаженные их варианты, а затем скормить нейронной сети.

Другой вариант использования технологии - оцифровка старых книг, видео хроник. Еще интересно, возможно ли обучить нейронную сеть восстанавливать цвета изображений обучая её на паре кадров - цветное/черно-белое?


цветное/черно-белое - добавили цыет в 17 мгновений весны. Уже года 2 как пройденая задача.
GAN способен восстанавливать звук по примерам.
13. PerlAmutor 129 05.11.17 13:30 Сейчас в теме
(12)
цветное/черно-белое - добавили цыет в 17 мгновений весны. Уже года 2 как пройденая задача.

"Несмотря на технические достижения, огромную часть работы по колоризации картины пришлось делать вручную"

Нигде не нашел информации о том, что фильм нейросети раскрашивали. Ну да не суть.
14. s22 19 07.11.17 14:45 Сейчас в теме
(13)
цветное/черно-белое - добавили цыет в 17 мгновений весны. Уже года 2 как пройденая задача.

"Несмотря на технические достижения, огромную часть работы по колоризации картины пришлось делать вручную"

Нигде не нашел информации о том, что фильм нейросети раскрашивали. Ну да не суть.


Там была проблема что поэкранно все нормально, но на одном кадре машина синяя, а на соседнем красная.
Как я понял с этим много возились.
15. roman77 263 07.11.17 15:34 Сейчас в теме
(11)
Возможно ли применить подобные технологии для восстановления качества звука при передаче голоса, скажем, по рации?


Невозможно так как это не "восстановление" и не "реставрация", а "домысливание". Одно дело картинку для выкладывания в соцсеть дорисовать и совсем другое дело домысливать команду авиадиспечера. Цена ошибки несопоставимая.
Оставьте свое сообщение

См. также

За нарушение частичного запрета на использование иностранных мессенджеров будут штрафовать

Новость Законодательство ИТ-новость Мессенджеры

Государственные и финансовые организации могут получить штраф до 700 тыс. руб. за использование иностранных мессенджеров, использование которых частично запрещено.

16.05.2023    5093    user1915669    1       

1

GitHub тестирует систему создания правил для защиты веток в репозиториях

Новость GitHub ИТ-новость

GitHub запустил публичный бета-тест функции, которая позволяет владельцам репозиториев создавать наборы правил для защиты своих проектов от изменений и поддержания порядка в ветках.

20.04.2023    10482    VKuser24342747    1       

1

Техника на отечественных процессорах получит приоритет при госзакупках

Новость Импортозамещение ИТ-новость

Правительство подготовило постановление, которое даст электронике с российскими процессорами наивысший приоритет при госзакупках. Документ вступает в силу с 20 апреля 2023 года.

04.04.2023    5840    VKuser24342747    0       

1

ФНС заявила, что приложение «Мой налог» готово к интеграции бесконтактной оплаты

Новость Мобильные приложения Налоги Самозанятые ФНС

Федеральная налоговая служба рассказала, что готова к интеграции в приложение «Мой налог» функции бесконтактной оплаты. С ее помощью самозанятые смогут принимать платежи через смартфон, как через банковский терминал.

29.03.2023    5711    VKuser24342747    0       

2

Центробанк назначил оператора единой автоматизированной системы страхования

Новость Страхование ИТ-новость

3 марта 2023 года Центробанк принял решение об учреждении АО «Национальная страховая информационная система».

20.03.2023    4557    user1915009    1       

1

GitHub открыл доступ к сервису для проверки безопасности репозиториев

Новость GitHub ИТ-новость

Бесплатный сервис GitHub для проверки безопасности репозиториев позволяет защитить публичные проекты от утечки конфиденциальных данных. Ранее эта услуга была доступна только владельцам лицензии на GitHub Advanced Security, работающие в облаке GitHub Enterprise Cloud.

07.03.2023    16096    VKuser24342747    1       

1

Минпромторг подготовил план перехода объектов КИИ на российское ПО

Новость Импортозамещение ИТ-новость

В проекте документа ведомство предлагает поэтапное внедрение отечественных разработок в госкомпаниях и промышленных предприятиях. Полный переход намечен на 2024 год.

20.02.2023    7401    VKuser24342747    0       

3

Магазин приложений RuStore объявил о завершении бета-теста

Новость Импортозамещение ИТ-новость Минцифры

В релизной версии маркетплейса стала доступна консоль разработчика на английском языке. Загружать приложения в магазин станет проще для иностранных издателей.

16.02.2023    6602    VKuser24342747    3       

1

СУБД Postgres Pro Enterprise начала поддерживать быструю миграцию с Oracle

Новость ИТ-новость Разработка

Релиз российской системы включает все возможности открытой PostgreSQL 15 и облегченной версии СУБД компании — Postgres Pro Standard 15, а также функцию маскировки данных для их конфиденциальной передачи и улучшенное резервное копирование.

10.02.2023    8587    VKuser24342747    2       

1

«Сбер» начнет использовать российские TLS-сертификаты для платежного шлюза

Новость Безопасность ИТ-новость Минцифры

Банк запланировал переход на сертификаты, выпущенные Национальным удостоверяющим центром (НУЦ) Минцифры, на 30 января 2023 года. Клиентам необходимо добавить на свои серверы корневой сертификат ведомства.

30.01.2023    7219    VKuser24342747    1       

2

Минцифры подготовило правила отказа от передачи биометрических данных

Новость ИТ-новость Минцифры

Гражданин имеет право отказаться от сбора и распространения своих биометрических данных. Отказ можно оформить в МФЦ только при личном присутствии.

24.01.2023    6735    VKuser24342747    0       

1

Банки смогут получить право на передоверие полномочий по электронной подписи

Новость ИТ-новость Цифровая подпись Цифровая экономика

Комитет Госдумы рекомендует принять соответствующий законопроект. Документ позволит компаниям финансового сектора использовать электронную подпись наравне с другими организациями.

20.01.2023    5030    VKuser24342747    0       

1

«ВКонтакте» начал поддерживать получение уведомлений от Госуслуг

Новость Госуслуги ИТ-новость Мессенджеры Налоги

Оповещения с Единого портала госуслуг будут отображаться в Вконтакте и приложении «VK Мессенджер». Кроме того, стала доступна оплата штрафов ГИБДД прямо в VK.

19.01.2023    5888    VKuser24342747    0       

1

Минцифры подготовило правила аккредитации госорганов на владение информсистемами для биометрии

Новость Законодательство ИТ-новость Минцифры

Проект постановления содержит требования к Цетробанку и госорганам, а также к сторонним организациям, которые будут привлекаться ведомствами в качестве операторов. Требования согласованы с ФСБ.

19.01.2023    5600    VKuser24342747    0       

1

Утвержден профстандарт специалиста по информационной безопасности

Новость Безопасность ИТ-новость

Новый профстандарт вступит в силу 1 сентября 2023 года. А пока у работодателей в кредитно-финансовой сфере есть время проанализировать трудовой функционал специалистов по ИБ и при необходимости уточнить его.

17.01.2023    7934    user1816563    0       

2

Национальная система пространственных данных начала работу в России

Новость ИТ-новость Цифровая экономика

Пилотный проект по запуску цифровой платформы стартовал в четырех регионах РФ. При помощи системы можно получать актуальные данные о земле и недвижимости, пользоваться электронными сервисами.

12.01.2023    7946    VKuser24342747    0       

3

Госдума рассмотрит законопроект о цифровом рубле

Новость Законодательство ИТ-новость Цифровая экономика

Документ определяет выпуск и обращение цифрового рубля на территории России, назначает оператора нового платежного средства и его полномочия и обязанности по сохранности денег пользователей.

11.01.2023    8662    VKuser24342747    2       

2

Оператором Единой биометрической системы стал «Центр Биометрических Технологий»

Новость ИТ-новость

Ранее за работу платформы отвечал «Ростелеком». На «Центр Биометрических Технологий» возложены задачи по развитию в России цифровых технологий идентификации и аутентификации, в том числе на основе биометрических персональных данных.

22.12.2022    6659    VKuser24342747    2       

1

GitHub бесплатно проверит репозитории на наличие секретных токенов

Новость GitHub Безопасность ИТ-новость

ИТ-хостинг запустил систему сканирования общедоступных репозиториев, чтобы предотвратить случайное раскрытие конфиденциальной информации, такой как учетные данные и токены аутентификации.

22.12.2022    7963    VKuser24342747    1       

1

GitHub к концу 2023 года введет обязательную двухфакторную аутентификацию

Новость GitHub Безопасность ИТ-новость

Веб-хостинг потребует от всех пользователей, загружающих код, включить двухфакторную аутентификацию (2FA) для дополнительной защиты своих аккаунтов.

21.12.2022    7436    VKuser24342747    0       

1

Госдума рассмотрит законопроект о провайдере для госсайтов

Новость Государственные, бюджетные структуры Законодательство ИТ-новость

Документ предусматривает запрет на размещение государственных информационных ресурсов на хостингах, не включенных в специальный реестр. Сейчас около 20% ресурсов госорганов размещены на иностранных площадках.

20.12.2022    6328    VKuser24342747    1       

1

«Яндекс» открыл доступ к фреймворку Yatagan для сборки Android-приложений

Новость ИТ-новость Яндекс Разработка

Инструмент свободно распространяется через GitHub. Перед публикацией в открытом доступе фреймворк долгое время применялся во внутренних проектах компании. Решение основано на API Dagger.

16.12.2022    8854    VKuser24342747    1       

3

В России появится национальная издательская система вместо иностранных аналогов

Новость Импортозамещение ИТ-новость

Программный комплекс будет создан на базе существующего отечественного решения Axiocat. Сейчас это приложение не внесено в Единый реестр российского ПО, хотя применяется некоторыми компаниями.

15.12.2022    6014    VKuser24342747    0       

1

Google рассказала о проблемах и преимуществах поддержки разработки на Rust в Android 13

Новость Google ИТ-новость Языки программирования

По итогам внедрения поддержки разработки на Rust снизилось число уязвимостей, связанных с управлением памятью. Инженеры считают, что основное внимание нужно уделить написанию нового кода, а не переписыванию старого.

14.12.2022    6608    VKuser24342747    0       

3

Банки обяжут принимать оплату по картам «Мир» с QR-кодом в смартфоне

Новость Банки ИТ-новость

Оператор платежной системы «Мир» разослал российским банкам документ с требованием обеспечить прием платежей по новой технологии. Первый этап внедрения завершится в апреле 2023 года.

14.12.2022    7280    VKuser24342747    1       

2