Фантомас разбушевался: нейросеть научили осуществлять реалистичную подмену лиц на видео

18.09.2018      13280

Исследователи из технологического университета Карнеги-Меллона (США) создали нейросеть, которая оперативно и реалистично передает мимику и действия персонажа из одного видео в другое.

Как это работает

Нейросеть использует класс неконтролируемых алгоритмов машинного обучения, называемых генеративными состязательными сетями (GAN), которые применяют стиль одного изображения к другому. Их часто используют для создания поддельных фотографий.

GAN алгоритмы используют две модели: одну – для создания изображений или видео в соответствии с определенным стилем, а другую – для определения различий между стилями изображений или видео. Два принципа «конкурируют», в результате чего GAN обучается более точно преобразовывать стиль контента.

Чтобы улучшить метод, исследователи Университета Карнеги-Меллона разработали новую технологию Recycle-GAN, которая включает временную, а также пространственную информацию для улучшения результатов. Поскольку этот метод не требует контроля, он способен быстро изменять большое количество видео.

Другими словами, контент, который переносится с одного видео на другое, зависит не только от сопоставления пространства, но и от порядка кадров. Степень синхронизации этих двух показателей позволяет сделать подмену максимально реалистичной.

Демонстрация подмены

Чтобы продемонстрировать свою работу, исследователи перенесли выражение лица комика Джона Оливера на видео с персонажем мультфильма о лягушке. Руководитель проекта Ааюш Бансал рассказал, что главной его мотивацией в разработке технологии стала возможность создания эффективных инструментов для кинематографа. «Это инструмент для художников, который дает им возможность улучшить исходную модель», – сказал он.

 

 

Исследователи также продемонстрировали возможности технологии Recycle-GAN, передав выражения лица и движения между двумя видеороликами. Например, мимику экс-президента США Барака Обамы «передали» действующему главе государства Дональду Трампу. 

 

 

Оказалось, что технологию Recycle-GAN можно применять не только к видео-изображениям людей. Например, в следующем видео нарцисс «заставили» цвести так же, как гибискус:

 

 

Сферы применения

Исследователи предполагают, что технологию можно использовать при переводе черно-белых фильмов в цветное изображение или в процессе создания контента для приложений виртуальной реальности (VR). Ааюш Бансал говорит, что алгоритм может быть полезен для беспилотных автомобилей: например, тренировочные кадры для вождения в ночное время станут более реалистичными. Но существует опасность, что эта технология может быть использована и для «deepfakes»: этот механизм подменяет изображения людей в фото- и видео-контенте и нередко используется в неблаговидных целях.  

Безликая опасность

Порнографические «deepfakes» недавно были запрещены на Reddit и других интернет-платформах, которые поддерживают пользовательский контент. В конце 2017 года на Reddit появилось несколько роликов порнографического содержания, в которых лица актрис заменили на лица знаменитостей.

Американские конгрессмены уже попросили директора национальной разведки США оценить угрозу технологии «deepfakes» для национальной безопасности. Представители правительства и конгресса обеспокоены возможностью использования подобных технологий для ведения информационной войны и провокаций против Соединенных Штатов.

Сможет ли российская система распознавания лиц FindFace Security от «Ростех», которую внедрили во время ЧМ-2018 в России, выявить подделку, созданную американским алгоритмом? И что будет, если в конечном итоге эти две технологии начнут конкурировать?


Автор:
Обозреватель


Комментарии
В избранное Подписаться на ответы Сортировка: Древо развёрнутое
Свернуть все
1. Brawler 438 18.09.18 19:27 Сейчас в теме
Скоро во всех судах страны смотрите фильм как вы воруете цветы с грядки царя.
fxmike; george_nail; +2 Ответить
2. vipetrov2 19.09.18 05:09 Сейчас в теме
Молодцы! Сначала создают технологии распознавания лиц, а потом для подмены. А когда эти технологии пойдут в широкие массы, то они уже не знают, что с этим делать.
citicat; george_nail; +2 Ответить
3. Somebody1 68 19.09.18 08:16 Сейчас в теме
(2) К счастью, или нет - технический прогресс не остановить. А любой инструмент можно использовать как во благо, так и нет. Молоток, он тоже тяжёлый и металлический.
Irwin; Kochergov; george_nail; +3 Ответить
4. PerlAmutor 129 19.09.18 08:41 Сейчас в теме
Думаю сайты для взрослых заинтересуются разработкой. Теперь не нужно взламывать смартфоны знаменитостей.
Irwin; Kochergov; vrednyi_glavred; george_nail; +4 Ответить
5. DoctorRoza 19.09.18 09:08 Сейчас в теме
Лайк, если ты клацнул по гиперссылке "появилось"! )))
Lengros; SKravchenko; Kochergov; george_nail; vrednyi_glavred; +5 Ответить
Оставьте свое сообщение

См. также

Госдума рассмотрит законопроект о создании Национального удостоверяющего центра

Новость Законодательство Интернет ИТ-новость

Информационная система позволит российским сайтам получать сертификаты безопасности без участия иностранных организаций. Для их выдачи будет применяться отечественная криптография.

вчера в 15:00    616    VKuser24342747    0       

Госдума планирует отложить срок обязательного перехода на машиночитаемые доверенности

Новость Госдума Законодательство ИТ-новость

Госдума в первом чтении одобрила законопроект, который продлевает переходный период для машиночитаемых доверенностей. Еще полгода организации смогут не применять МЧД при использовании электронных подписей.

08.12.2022    704    VKuser24342747    0       

GitHub опубликовал статистику по языкам и проектам за 2022 год

Новость ИТ-новость Языки программирования Разработка

В статистическом отчете репозитория названы самые популярные языки программирования среди пользователей платформы, а также данные об активности аудитории сервиса.

01.12.2022    1382    VKuser24342747    11       

Инспекторы смогут проводить дистанционные проверки через смартфон

Новость ИТ-новость Мобильные приложения

Минэкономразвития представило мобильное приложение, которое позволит осуществлять надзорные мероприятия бизнеса без посещения офиса. Программа работает через Госуслуги.

28.11.2022    1257    VKuser24342747    0       

«Яндекс» представил бесплатный сервис для быстрого поиска в облаке

Новость ИТ-новость Облачные технологии

Сервис Managed Service for OpenSearch от платформы Yandex Cloud предназначен для оптимизации поисковых систем и проверки стабильности и безопасности работы приложений. Услуга доступа в режиме Public Preview.

24.11.2022    1581    VKuser24342747    1       

В декабре начнут действовать новые правила регистрации доменов .RU и .РФ

Новость ИТ-новость Роскомнадзор

С 12 декабря Роскомнадзор получит право прекращать делегирование домена, если он оформлен нелегально, или на сайте содержится запрещенная в России информация.

23.11.2022    1305    VKuser24342747    1       

Stack Overflow запустил проект для оффлайн-доступа к форуму

Новость ИТ-новость Разработка

Проект под названием Overflow Offline позволяет скачать актуальную версию архива вопросов и ответов по разработке ПО. По объему данных база форума уступает только «Википедии».

02.11.2022    1234    VKuser24342747    1       

Минцифры запустило магазин российского ПО из реестра ИТ-решений

Новость Импортозамещение ИТ-новость

Маркетплейс «Руссофт» стал доступен для всех пользователей. С его помощью можно подобрать программы от отечественных разработчиков для решения корпоративных задач бизнеса.

21.10.2022    1682    VKuser24342747    4       

В ноябре начнется создание российского государственного аналога GitHub

Новость ИТ-новость

Правительство озвучило дату запуска эксперимента по разработке отечественного репозитория ПО. Исходники программ, в том числе разработанных для госорганов, будут публиковаться в нем под открытой лицензией.

19.10.2022    2431    VKuser24342747    14       

OpenAI опубликовала код системы распознавания речи Whisper

Новость Искусственный интеллект ИТ-новость

OpenAI открыла исходный код эталонной реализации на базе фреймворка PyTorch и набор уже обученных моделей для использования под лицензией MIT. Нейросеть используется для перевода речи в текст.

28.09.2022    2788    VKuser24342747    0       

Вторая версия среды разработки для плат Arduino вышла из бета-теста

Новость ИТ-новость Микроэлектроника

Arduino IDE 2.0 получила стабильную версию, в которой появилась поддержка автодополнения кода и темная тема. Разработка заняла несколько лет. Программа распространяется бесплатно.

23.09.2022    2735    VKuser24342747    0       

Основатель движения свободного ПО выпустил руководство по языку C

Новость Linux ИТ-новость Языки программирования

Ричард Мэттью Столлман, основатель Фонда свободного программного обеспечения, представил руководство по языку C и расширениям GNU. Пособие доступно всем желающим и предназначено как для опытных, так и начинающих программистов.

19.09.2022    2315    VKuser24342747    0       

«Ростелеком» предложил создать национальную экосистему на базе «Авроры»

Новость Импортозамещение ИТ-новость Мобильные приложения

Провайдер считает, что государственная мобильная экосистема поможет обеспечить технологическую независимость и экономический подъем страны. А ОС «Аврора» наиболее перспективная разработка для достижения этих целей.

15.09.2022    2197    VKuser24342747    5       

Яндекс выложил в открытый доступ инструмент для разработки мобильных приложений

Новость ИТ-новость Мобильные приложения Яндекс

Фреймворк DivKit от Яндекса стал доступен как open source решение. Инструмент позволяет менять интерфейс приложений без скачивания обновлений и значительно ускоряет мобильную разработку.

02.09.2022    1910    VKuser24342747    0       

Группа компаний «Астра» представила собственную мобильную ОС

Новость Linux ИТ-новость Мобильные приложения

Доработанная ОС Astra Linux Special Edition может быть запущена на большом числе мобильных устройств, в том числе на планшетах и смартфонах с процессорами на архитектурах ARM, «Эльбрус» и x86-64.

25.08.2022    1574    VKuser24342747    1       

В России разработаны меры для решения проблемы нехватки ИТ-специалистов

Новость ИТ-новость

Вице-премьер Дмитрий Чернышенко сообщил, что сейчас экономике страны не хватает 1 млн ИТ-специалистов. Способы преодоления дефицита закреплены в программе нацпроекта «Цифровая экономика»

05.08.2022    1709    VKuser24342747    11       

Яндекс открыл доступ к фреймворку для создания приложений с микросервисной архитектурой

Новость GitHub ИТ-новость Яндекс

Инструмент Userver опубликован как бесплатное open source решение. Яндекс уже несколько лет эффективно его использует в своих приложениях Go, «Еда», «Лавка», «Доставка» и другие. Фреймворк находится в стадии бета – переезда на открытую разработку.

02.08.2022    2562    VKuser24342747    19       

Бизнес сможет использовать повышающий коэффициент для расходов на покупку ПО

Новость ИТ-новость

Принят закон, который позволяет компаниям учитывать расходы на отечественные программы и радиоэлектронное оборудование с коэффициентом 1,5. Решения должны быть включены в соответствующие реестры и относиться к ИИ.

26.07.2022    2318    VKuser24342747    0       

Минэкономразвития тестирует миграцию с Windows 10 на Astra Linux

Новость ИТ-новость

Министерство проводит эксперимент, в ходе которого сотрудники используют российскую ОС Astra Linux вместо Windows 10. По словам главы департамента, эксперимент проходит успешно.

11.07.2022    1868    VKuser24342747    0       

Вышла версия открытого текстового редактора Vim 9.0

Новость ИТ-новость

В приложение добавлен скриптовый язык с поддержкой компилируемых функций для создания плагинов, улучшена проверка правописания и автодополнения, предоставлен выбор цветовых схем.

07.07.2022    2043    VKuser24342747    0       

 «Яндекс» открыл доступ к SmartCaptcha и нейросети по генерации текстов 

Новость ИТ-новость Яндекс

Компания открыла доступ к алгоритму SmartCaptcha, который защищает сайт от спама и DDoS-атак, а также к проекту YaLM 100B, способному писать тексты на английском и русском языках. 

29.06.2022    2367    VKuser24342747    0       

«Яндекс» предложил разработчикам пройти диагностику технических навыков

Новость Кадровые агентства, подбор персонала ИТ-новость Яндекс

Компания запустила сервис, при помощи которого можно получить оценку своих технических навыков от специалистов «Яндекса». Тестирование включает онлайн-интервью и решение задач с реальных собеседований. 

27.06.2022    2229    VKuser24342747    1       

GitHub открыл доступ всем разработчикам к ИИ-помощнику Copilot по подписке

Новость GitHub Искусственный интеллект ИТ-новость

Github Copilot стал общедоступным, но для его использования пользователю репозитория нужно приобрести подписку. Хотя некоторые разработчики могут пользоваться инструментом бесплатно.

24.06.2022    3950    VKuser24342747    1       

В России планируют учредить Федерацию спортивного программирования

Новость ИТ-новость

Минцифры и Минспорта подписали меморандум, в котором закреплено сотрудничество ведомств по развитию в стране спортивного программирования и проведение первого официального чемпионата.

21.06.2022    2801    VKuser24342747    6       

Microsoft окончательно прекратила поддержку Internet Explorer

Новость Интернет ИТ-новость

Microsoft прекратила выпуск обновлений для своего браузера Internet Explorer, а с августа начнет удалять приложение из актуальных версий Windows. Эксперты полагают, что из-за этого пострадает много бизнес-пользователей.

17.06.2022    3307    VKuser24342747    4