Фантомас разбушевался: нейросеть научили осуществлять реалистичную подмену лиц на видео

18.09.2018     

Исследователи из технологического университета Карнеги-Меллона (США) создали нейросеть, которая оперативно и реалистично передает мимику и действия персонажа из одного видео в другое.

Как это работает

Нейросеть использует класс неконтролируемых алгоритмов машинного обучения, называемых генеративными состязательными сетями (GAN), которые применяют стиль одного изображения к другому. Их часто используют для создания поддельных фотографий.

GAN алгоритмы используют две модели: одну – для создания изображений или видео в соответствии с определенным стилем, а другую – для определения различий между стилями изображений или видео. Два принципа «конкурируют», в результате чего GAN обучается более точно преобразовывать стиль контента.

Чтобы улучшить метод, исследователи Университета Карнеги-Меллона разработали новую технологию Recycle-GAN, которая включает временную, а также пространственную информацию для улучшения результатов. Поскольку этот метод не требует контроля, он способен быстро изменять большое количество видео.

Другими словами, контент, который переносится с одного видео на другое, зависит не только от сопоставления пространства, но и от порядка кадров. Степень синхронизации этих двух показателей позволяет сделать подмену максимально реалистичной.

Демонстрация подмены

Чтобы продемонстрировать свою работу, исследователи перенесли выражение лица комика Джона Оливера на видео с персонажем мультфильма о лягушке. Руководитель проекта Ааюш Бансал рассказал, что главной его мотивацией в разработке технологии стала возможность создания эффективных инструментов для кинематографа. «Это инструмент для художников, который дает им возможность улучшить исходную модель», – сказал он.

 

 

Исследователи также продемонстрировали возможности технологии Recycle-GAN, передав выражения лица и движения между двумя видеороликами. Например, мимику экс-президента США Барака Обамы «передали» действующему главе государства Дональду Трампу. 

 

 

Оказалось, что технологию Recycle-GAN можно применять не только к видео-изображениям людей. Например, в следующем видео нарцисс «заставили» цвести так же, как гибискус:

 

 

Сферы применения

Исследователи предполагают, что технологию можно использовать при переводе черно-белых фильмов в цветное изображение или в процессе создания контента для приложений виртуальной реальности (VR). Ааюш Бансал говорит, что алгоритм может быть полезен для беспилотных автомобилей: например, тренировочные кадры для вождения в ночное время станут более реалистичными. Но существует опасность, что эта технология может быть использована и для «deepfakes»: этот механизм подменяет изображения людей в фото- и видео-контенте и нередко используется в неблаговидных целях.  

Безликая опасность

Порнографические «deepfakes» недавно были запрещены на Reddit и других интернет-платформах, которые поддерживают пользовательский контент. В конце 2017 года на Reddit появилось несколько роликов порнографического содержания, в которых лица актрис заменили на лица знаменитостей.

Американские конгрессмены уже попросили директора национальной разведки США оценить угрозу технологии «deepfakes» для национальной безопасности. Представители правительства и конгресса обеспокоены возможностью использования подобных технологий для ведения информационной войны и провокаций против Соединенных Штатов.

Сможет ли российская система распознавания лиц FindFace Security от «Ростех», которую внедрили во время ЧМ-2018 в России, выявить подделку, созданную американским алгоритмом? И что будет, если в конечном итоге эти две технологии начнут конкурировать?


Автор:
Сергей Кравченко Обозреватель


Комментарии
В избранное Подписаться на ответы Сортировка: Древо развёрнутое
Свернуть все
1. Brawler 481 18.09.18 19:27 Сейчас в теме
Скоро во всех судах страны смотрите фильм как вы воруете цветы с грядки царя.
fxmike; george_nail; +2 Ответить
2. vipetrov2 19.09.18 05:09 Сейчас в теме
Молодцы! Сначала создают технологии распознавания лиц, а потом для подмены. А когда эти технологии пойдут в широкие массы, то они уже не знают, что с этим делать.
citicat; george_nail; +2 Ответить
3. Somebody1 67 19.09.18 08:16 Сейчас в теме
(2) К счастью, или нет - технический прогресс не остановить. А любой инструмент можно использовать как во благо, так и нет. Молоток, он тоже тяжёлый и металлический.
Irwin; Kochergov; george_nail; +3 Ответить
4. PerlAmutor 124 19.09.18 08:41 Сейчас в теме
Думаю сайты для взрослых заинтересуются разработкой. Теперь не нужно взламывать смартфоны знаменитостей.
Irwin; Kochergov; vrednyi_glavred; george_nail; +4 Ответить
5. DoctorRoza 19.09.18 09:08 Сейчас в теме
Лайк, если ты клацнул по гиперссылке "появилось"! )))
Lengros; SKravchenko; Kochergov; george_nail; vrednyi_glavred; +5 Ответить
Оставьте свое сообщение

См. также

Нейросеть научили писать код на С и С++

Новость Искусственный интеллект ИТ-новость

Популярной нейросети GPT-2 нашли новое применение. Ее научили генерировать фрагменты кода на С и С++, и даже опытный разработчик не всегда отличит эти листинги от реальных.

05.03.2021    1479    user1015646    2       

Самые медленные языки программирования с динамической типизацией

Новость ИТ-новость Языки программирования

Скорость выполнения программы зависит не только от аппаратной части, но и от языка, на котором она написана. Однако, не все языки программирования могут похвастаться высокой скоростью выполнения кода. Расскажем о некоторых подробнее.

03.03.2021    1674    SKravchenko    3       

Мэрия Москвы разработала мессенджер для замены Telegram и Skype

Новость Импортозамещение ИТ-новость Мессенджеры

Российская компания ID Partner совместно с правительством Москвы создала приложение TDM Messenger. Согласно описанию, оно позволяет полностью заменить другие мессенджеры, в том числе Telegram и Skype.

02.03.2021    2532    VKuser24342747    8       

Совсем взрослый стал: Python исполнилось 30 лет

Новость ИТ-новость Языки программирования

Python является самым молодым из наиболее популярных языков программирования. Впрочем, все относительно: на днях Python исполнилось 30 лет.

02.03.2021    1178    user1015646    1       

Энтузиасты создали для популярного эмулятора патч с поддержкой процессоров «Эльбрус»

Новость ИТ-новость Микроэлектроника Новости компаний

Свободный эмулятор QEMU получил неофициальную поддержку отечественной архитектуры процессоров «Эльбрус». В разработке реализовано около 80% набора инструкций «Эльбрус-8С».

01.03.2021    2041    VKuser24342747    0       

Российский разработчик создал неофициальную версию Clubhouse для Android

Новость Android ИТ-новость Мессенджеры Мобильные приложения

Бывший разработчик из «ВКонтакте» Григорий Клюшников выпустил приложение для Android, предоставляющее доступ к большинству функций Clubhouse. Официально соцсеть доступна только пользователям iOS.

26.02.2021    2303    VKuser24342747    0       

Масштабное обновление Trello: пять новых видов досок и интеграция с Google Docs

Новость ИТ-новость Новости компаний

Компания Atlassian выпустила масштабное обновление сервиса управления проектами Trello. Разработчики изменили дизайн, добавили пять новых видов досок и реализовали для карточек возможность отображать информацию из сторонних сервисов.

25.02.2021    4262    user1015646    0       

Видеоигра на базе нейросетевого генератора текстов стала бизнес-консультантом

Новость Видеоигры Искусственный интеллект ИТ-новость

Энтузиаст использовал возможности текстового квеста, генерирующего разнообразные миры при помощи нейросети GPT-3, чтобы получать советы по ведению бизнеса. Часть идей ИИ оказалась пригодной для использования.

25.02.2021    2641    VKuser24342747    1       

В ближайшие годы возрастет потребность в персонале центров обработки данных

Новость Дата-центры ИТ-новость Цифровая экономика

Согласно отчету Uptime Institute, количество сотрудников, необходимых для обеспечения работы ЦОД, вырастет с 2 млн. в 2019 году до 2,3 млн. в 2025 году.

24.02.2021    2237    SKravchenko    0       

Google кардинально изменит дизайн Android 12

Новость Android Google ИТ-новость Мобильные приложения Новости компаний

Компания Google анонсировала глобальное обновление популярной операционной системы Android. Новая версия выйдет под номером 12. Говорят, что Android 12 назовут «Snow cone» – летний десерт из сладкого колотого льда.

24.02.2021    2699    mouse187    0       

Google представила новый сервис для поиска уязвимостей в открытом ПО

Новость Google Безопасность ИТ-новость

Компания Google запустила платформу с открытым исходным кодом OSV (Open Source Vulnerabilities). Она создана для поиска и закрытия уязвимостей в свободном ПО.

18.02.2021    1450    user1015646    0       

Отечественная компания представила сервер приложений Java EE

Новость ИТ-новость Новости компаний Языки программирования

Российская компания Bellsoft представила отечественный аналог сервера Oracle и IBM для JavaEE. Раньше продукт на базе открытого кода был доступен только для некоторых клиентов организации.

17.02.2021    2453    VKuser24342747    4       

Rustоманы из Долины: Google, Microsoft, Huawei, Mozilla и AWS основали фонд поддержки языка программирования

Новость Google ИТ-новость Новости компаний Языки программирования

Rust – перспективный язык, который широко применяется в разработке операционных систем и высоконагруженных веб-сервисов. Rust Foundation будет заниматься поддержкой и развитием языка.

16.02.2021    1682    user1015646    0       

В Microsoft Teams появилась платформа для общения и обучения

Новость Интернет ИТ-новость Мессенджеры Новости компаний

Microsoft добавила новые функции в корпоративный мессенджер Teams. В подключенной к нему платформе Viva можно пройти обучение, пообщаться с коллегами или улучшить организацию работы.

15.02.2021    3248    user1015646    0       

Google рассказала, как защищает Android от взломов

Новость Android Google Безопасность ИТ-новость

Google опубликовала информацию о том, как компания пытается улучшить безопасность Android, и какие шаги предпринимаются для борьбы с распространенными угрозами. Отчеты об уязвимостях играют в этом значительную роль.

12.02.2021    1993    SKravchenko    0       

Для регионов разработают приложение онлайн-записи на прием к врачам

Новость ИТ-новость Медицина Минкомсвязь Цифровая экономика

О возможностях приложения рассказали в Минздраве и Минцифре.

10.02.2021    1997    Senator_I    2       

Google разработает новую мобильную ОС

Новость MobileOS Google ИТ-новость Мобильные приложения

Корпорация Google создаст мобильную операционную систему для повышения безопасности использования устройств. Проект запущен под рабочим названием microdroid.

09.02.2021    2265    user1015646    0       

Google закрывает собственную игровую студию Stadia

Новость Google Видеоигры ИТ-новость Новости компаний

1 февраля Google официально закрыл собственную студию разработки игр для проекта Stadia, чтобы сосредоточить внимание на технологиях, лежащих в основе платформы.

09.02.2021    1607    SKravchenko    0       

Google представила технологию для замены cookies

Новость Google Интернет ИТ-новость

Методы сбора файлов cookies для повышения точности подбора рекламы не раз упрекали в нарушении личного пространства пользователей. Компания Google представила технологию, которая позволит отказаться от cookies и повысить уровень конфиденциальности.

09.02.2021    1347    user1015646    0       

Украинская команда FireWay одержала победу в хакатоне NASA Space Apps Challenge 2020

Новость ИТ-новость Стартапы

Украинская команда FireWay из Днепра стала победителем международного хакатона NASA Space Apps Challenge. Их изобретение было описано как «решение, которое демонстрирует наиболее инновационное использование технологии».

05.02.2021    2078    SKravchenko    2       

Китайцы разработали целых две альтернативы Flash

Новость Интернет ИТ-новость

Китайцам пришлось разработать собственную технологию ReFla взамен Flash для предотвращения сбоев в работе систем. Также они выпустили доработанную версию Flash Player с кодом 34.0.0.92.

04.02.2021    2242    mouse187    4       

Популярные дистрибутивы Linux могут лишиться поддержки Chromium

Новость Linux Google Интернет ИТ-новость

Из дистрибутивов Arch Linux, Fedora, Debian, Slackware и openSUSE может исчезнуть поддержка браузеров на движке Chromium. Причина – жесткие правила Google, из-за которых возникли проблемы с синхронизацией данных.

03.02.2021    2538    user1015646    3       

Microsoft участвует в разработке цифрового паспорта вакцинации от Covid-19

Новость ИТ-новость Медицина

Крупнейшие корпорации из сектора здравоохранения и ИТ-гиганты, такие как Microsoft, Salesforce и другие, объединились для создания цифровых идентификационных карт, которые подтверждают статус вакцинации против Covid-19.

02.02.2021    1899    capitan    3       

Что нового в Chrome 88: проверка надежности паролей и поддержка профилей

Новость Google Интернет ИТ-новость

Компания Google представила новый релиз браузера Chrome и обновила движок Chromium. Теперь ПО будет предупреждать о небезопасных паролях, а пользователь сможет создать привязанный к учетной записи профиль для персонализации работы в сети.

01.02.2021    2365    user1015646    0       

280 символов для науки: Twitter откроет доступ ученым к архиву твитов

Новость ИТ-новость Соцсети

Twitter предоставит академическим исследователям социальных сетей бесплатный доступ почти ко всем твитам. Исключение площадка сделает только для заблокированных аккаунтов.

29.01.2021    1596    VKuser24342747    1