Фантомас разбушевался: нейросеть научили осуществлять реалистичную подмену лиц на видео

18.09.2018     

Исследователи из технологического университета Карнеги-Меллона (США) создали нейросеть, которая оперативно и реалистично передает мимику и действия персонажа из одного видео в другое.

Как это работает

Нейросеть использует класс неконтролируемых алгоритмов машинного обучения, называемых генеративными состязательными сетями (GAN), которые применяют стиль одного изображения к другому. Их часто используют для создания поддельных фотографий.

GAN алгоритмы используют две модели: одну – для создания изображений или видео в соответствии с определенным стилем, а другую – для определения различий между стилями изображений или видео. Два принципа «конкурируют», в результате чего GAN обучается более точно преобразовывать стиль контента.

Чтобы улучшить метод, исследователи Университета Карнеги-Меллона разработали новую технологию Recycle-GAN, которая включает временную, а также пространственную информацию для улучшения результатов. Поскольку этот метод не требует контроля, он способен быстро изменять большое количество видео.

Другими словами, контент, который переносится с одного видео на другое, зависит не только от сопоставления пространства, но и от порядка кадров. Степень синхронизации этих двух показателей позволяет сделать подмену максимально реалистичной.

Демонстрация подмены

Чтобы продемонстрировать свою работу, исследователи перенесли выражение лица комика Джона Оливера на видео с персонажем мультфильма о лягушке. Руководитель проекта Ааюш Бансал рассказал, что главной его мотивацией в разработке технологии стала возможность создания эффективных инструментов для кинематографа. «Это инструмент для художников, который дает им возможность улучшить исходную модель», – сказал он.

 

 

Исследователи также продемонстрировали возможности технологии Recycle-GAN, передав выражения лица и движения между двумя видеороликами. Например, мимику экс-президента США Барака Обамы «передали» действующему главе государства Дональду Трампу. 

 

 

Оказалось, что технологию Recycle-GAN можно применять не только к видео-изображениям людей. Например, в следующем видео нарцисс «заставили» цвести так же, как гибискус:

 

 

Сферы применения

Исследователи предполагают, что технологию можно использовать при переводе черно-белых фильмов в цветное изображение или в процессе создания контента для приложений виртуальной реальности (VR). Ааюш Бансал говорит, что алгоритм может быть полезен для беспилотных автомобилей: например, тренировочные кадры для вождения в ночное время станут более реалистичными. Но существует опасность, что эта технология может быть использована и для «deepfakes»: этот механизм подменяет изображения людей в фото- и видео-контенте и нередко используется в неблаговидных целях.  

Безликая опасность

Порнографические «deepfakes» недавно были запрещены на Reddit и других интернет-платформах, которые поддерживают пользовательский контент. В конце 2017 года на Reddit появилось несколько роликов порнографического содержания, в которых лица актрис заменили на лица знаменитостей.

Американские конгрессмены уже попросили директора национальной разведки США оценить угрозу технологии «deepfakes» для национальной безопасности. Представители правительства и конгресса обеспокоены возможностью использования подобных технологий для ведения информационной войны и провокаций против Соединенных Штатов.

Сможет ли российская система распознавания лиц FindFace Security от «Ростех», которую внедрили во время ЧМ-2018 в России, выявить подделку, созданную американским алгоритмом? И что будет, если в конечном итоге эти две технологии начнут конкурировать?


Автор:
Сергей Кравченко Обозреватель


Комментарии
В избранное Подписаться на ответы Сортировка: Древо развёрнутое
Свернуть все
1. Brawler 483 18.09.18 19:27 Сейчас в теме
Скоро во всех судах страны смотрите фильм как вы воруете цветы с грядки царя.
fxmike; george_nail; +2 Ответить
2. vipetrov2 19.09.18 05:09 Сейчас в теме
Молодцы! Сначала создают технологии распознавания лиц, а потом для подмены. А когда эти технологии пойдут в широкие массы, то они уже не знают, что с этим делать.
citicat; george_nail; +2 Ответить
3. Somebody1 67 19.09.18 08:16 Сейчас в теме
(2) К счастью, или нет - технический прогресс не остановить. А любой инструмент можно использовать как во благо, так и нет. Молоток, он тоже тяжёлый и металлический.
Irwin; Kochergov; george_nail; +3 Ответить
4. PerlAmutor 124 19.09.18 08:41 Сейчас в теме
Думаю сайты для взрослых заинтересуются разработкой. Теперь не нужно взламывать смартфоны знаменитостей.
Irwin; Kochergov; vrednyi_glavred; george_nail; +4 Ответить
5. DoctorRoza 19.09.18 09:08 Сейчас в теме
Лайк, если ты клацнул по гиперссылке "появилось"! )))
Lengros; SKravchenko; Kochergov; george_nail; vrednyi_glavred; +5 Ответить
Оставьте свое сообщение

См. также

Правительство утвердило разработку российского аналога GitHub

Новость ИТ-новость Цифровая экономика

Премьер-министр Михаил Мишустин на форуме Kazan Digital Week анонсировал создание отечественного репозитория, аналогичного GitHub. Проект реализуется в рамках второго пакета поддержки ИТ.

22.09.2021    5971    VKuser24342747    10       

Microsoft присоединилась к Open Infrastructure Foundation для развития облаков

Новость ИТ-новость Новости компаний Облачные технологии

Microsoft стала платиновым членом организации Open Infrastructure Foundation. Компания будет представлять интересы своих телекоммуникационных клиентов в OpenStack.

15.09.2021    3666    VKuser24342747    0       

Microsoft разрешит устанавливать Windows 11 на старые компьютеры

Новость Windows ИТ-новость Новости компаний

Microsoft пересмотрела правила установки Windows 11, которые не позволяли использовать ОС на компьютерах, не соответствующих системным требованиям. Для инсталляции придется создать загрузочный диск.

14.09.2021    2839    VKuser24342747    0       

Оплата лицом заработает на всех станциях метро Москвы

Новость Искусственный интеллект ИТ-новость Цифровая экономика

В столичном метрополитене внедряют систему FacePay. С 15 октября оплатить проезд можно будет, не доставая смартфон, карту или жетоны из кармана.

14.09.2021    2393    user1015646    2       

«Яндекс» представил технологию автоматического перевода любых видео на русский язык

Новость ИТ-новость Яндекс

«Яндекс» сделал функцию автоматического закадрового перевода иностранных роликов доступной для почти любых видео в интернете. Функция встроена в фирменный браузер компании.

13.09.2021    2451    VKuser24342747    4       

Исследователи синтезировали выразительную устную речь

Новость Искусственный интеллект ИТ-новость

Синтетическое воспроизведение речи от голосовых помощников и автопереводчиков не передает эмоций и интонаций. Специалисты NVIDIA разработали систему искусственного интеллекта, которая решает эту проблему: ее речь сложно отличить от естественной.

10.09.2021    9051    user1015646    0       

GitHub выпустил веб-редактор кода: возможности, о которых вы могли не знать

Новость GitHub Автоматизация Интернет ИТ-новость

Начинающим программистам часто сложно настроить среду разработки и установить весь необходимый софт. Для них, а также для специалистов, которые работают в распределенных командах, GitHub запустил новый сервис github.dev.

10.09.2021    5272    user1015646    0       

Раскрыта дата релиза Windows 11

Новость Windows ИТ-новость Новости компаний

Microsoft официально объявила, когда станет доступна новая версия самой популярной десктопной ОС. Обновиться с Windows 10 до Windows 11 можно будет уже 5 октября 2021 года.

09.09.2021    8738    user1015646    0       

В Google научились увеличивать изображения в 16 раз с восстановлением деталей

Новость Искусственный интеллект ИТ-новость

Раньше увеличить видео с камер наблюдения в десятки раз получалось только у героев фильмов. Но теперь такая возможность существует и в реальной жизни – инженеры Google разработали прорывную технологию масштабирования изображений.

09.09.2021    4251    user1015646    3       

Эксперты подготовили рекомендации по использованию кириллицы в доменах и почте

Новость Интернет ИТ-новость

Рабочая группа представила стандарты внедрения, обработки, хранения, валидации и адаптации кириллических символов для программ, поддерживающих доменные имена и email-адреса.

07.09.2021    2855    VKuser24342747    0       

Госструктуры перейдут на российские системы видеоконференций

Новость Импортозамещение ИТ-новость Облачные технологии

Российских чиновников переводят на использование отечественного сервиса видеоконференций. Будут внедрять систему TrueConf на базе ОС Astra Linux и процессоров Baikal-M от «Байкал Электроникс».

03.09.2021    3213    user1015646    0       

Минэкономики раскритиковало требования к обновлению оборудования для суверенного Рунета

Новость Импортозамещение Интернет ИТ-новость Телекоммуникации

Минэкономики пришло к выводу, что требования Минцифры затормозят развитие связи в России. По мнению специалистов ведомства, возможным последствием может стать ухудшение интернет-услуг провайдеров.

03.09.2021    2615    VKuser24342747    0       

Разработчики назвали любимые языки программирования

Новость ИТ-новость Языки программирования

Крупнейший форум для разработчиков Stack Overflow составил рейтинг любимых языков программирования. Первую строчку списка занял молодой, но перспективный Rust.

02.09.2021    5247    user1015646    3       

Петербургские ученые обучили нейросеть находить вредоносных ботов в соцсетях

Новость Безопасность Искусственный интеллект ИТ-новость Соцсети

Сотрудники Санкт-Петербургского федерального исследовательского центра Российской академии наук (СПб ФИЦ РАН) создали решение для поиска ботов, размещающих спам и дезинформацию на любом языке.

02.09.2021    2307    VKuser24342747    1       

Windows Server исключается из эксперимента по поставке обновлений Microsoft WaaS

Новость Windows ИТ-новость Новости компаний Облачные технологии

По результатам четырехлетнего эксперимента Windows as a Service Microsoft решила, что больше не будет обновлять Windows Server несколько раз в год. Для серверной ОС было решено вернуться к практике обновления каждые 2-3 года.

01.09.2021    5404    SKravchenko    0       

Microsoft добавила в Power BI инструменты аналитики для Angular-приложений

Новость Аналитика ИТ-новость

Microsoft представила новый компонент для создания веб-сервисов аналитики данных. Он позволит интегрировать функции Power BI в Angular-приложения.

31.08.2021    3286    user1015646    0       

Windows 11 лишится нескольких функций предыдущей версии системы

Новость Windows ИТ-новость

Microsoft в бета-версии Windows 11 изменила привычные функции. Из ОС исчезло отображение секунд на часах и возможность быстро добавлять события в календарь, а кнопка «Пуск» переместилась в центр панели задач.

31.08.2021    4956    VKuser24342747    6       

GitHub в версии утилиты CLI 2.0 добавил поддержку расширений

Новость GitHub ИТ-новость Новости компаний

Разработчики GitHub представили вторую версию утилиты для управления проектами при помощи командной строки CLI. Приложение поддерживает несколько стандартных расширений и создание собственных.

27.08.2021    6495    VKuser24342747    0       

Круглая дата: ядру Linux исполнилось 30 лет

Новость Linux ИТ-новость Новости компаний

Ядро Linux отмечает юбилей. О создании новой ОС 21-летний Линус Торвальдс объявил 25 августа 1991 года.

27.08.2021    4685    user1015646    2       

Искусственный интеллект научился распознавать изображения лучше человека

Новость Искусственный интеллект ИТ-новость

Алгоритм компьютерного зрения впервые превзошел человека. В экспериментах людям и системе искусственного интеллекта предлагали определить, что изображено на фото, и ответить на вопросы. Результат ИИ оказался выше, чем у человека.

26.08.2021    3691    user1015646    5       

Facebook представил криптобиблиотеку для разработчиков – Winterfell

Новость ИТ-новость Новости компаний

Специалисты Facebook выпустили новую библиотеку Winterfell. Проект с открытым исходным кодом может генерировать доказательство вычислительной целостности STARK.

24.08.2021    4707    user1015646    3       

В GitHub добавлена поддержка цитирования из репозиториев

Новость GitHub ИТ-новость

GitHub позволил использовать файл CITATION.cff, в котором можно указать, как правильно ссылаться на содержимое репозитория при написании академических публикаций.

24.08.2021    5067    VKuser24342747    0       

GitHub официально представил новую версию «Обсуждений»

Новость GitHub ИТ-новость

GitHub заявил о завершении бета-тестирования обновленной версии раздела Discussions. Релизный вариант площадки для обсуждений репозиториев разрабатывался почти год при активном участии сообщества.

23.08.2021    3319    VKuser24342747    0       

Разработчик создал браузерную версию OpenAI Codex для управления веб-страницами

Новость Интернет Искусственный интеллект ИТ-новость

Программист Эндрю Кантино рассказал, что сделал расширение для модификации страниц в Google Chrome, работающее на основе ИИ-ассистента для разработки OpenAI Codex.

23.08.2021    5913    VKuser24342747    0       

Российский разработчик создал эмулятор для запуска приложений iOS на M1 Mac

Новость Mac OS ИТ-новость Мобильные приложения

Программа PlayCover позволяет запускать на компьютерах с операционной системой MacOS любые мобильные приложения для iOS, в том числе игры с поддержкой мыши и клавиатуры.

20.08.2021    6407    VKuser24342747    0