Исследователи из Тель-Авива разработали алгоритм для «оживления» фотографий

Чтобы создать подобную анимацию достаточно иметь одно изображение человека и видеозапись с мимикой для переноса.
Алгоритм исследователей будет представлен на конференции SIGGRAPH Asia 2017, которая пройдет в Бангкоке с 27 по 30 ноября. С анонсом предстоящего доклада можно ознакомиться на сайте университета.
В настоящее время существуют различные методы захвата движений, позволяющие собирать данные о движениях и мимике человека, оцифровывать их, а затем переносить на трехмерную модель другого человека или персонажа. Эти данные обычно собираются посредством специальных датчиков или множества маркеров для камер, зафиксированных на теле человека. Такой способ часто используют при создании фильмов с большим количеством компьютерной анимации.
Однако в последние годы появились и такие методы переноса мимики, которые не требуют дополнительного оборудования и позволяют при этом анимировать не трехмерную компьютерную модель, а реальные изображения других людей. Однако основной проблемой подобных технологий является то, что зачастую для них требуется большой объем исходных данных.
Разработчики из Тель-Авивского университета создали технологию, которой для переноса мимики достаточно одной фотографии или рисунка. В качестве исходных данных алгоритм использует видеозапись с движениями мышц лица и изображение для переноса. После этого алгоритм наносит на лицо с видеозаписи виртуальные маркеры и отслеживает с их помощью изменения мимики (например, искривления линии губ при улыбке). Для создания технологии исследователи воспользовались открытой библиотекой для машинного обучения Dlib-ml.
Для реалистичности анимации разработчики научили алгоритм наносить на целевое изображение недостающие детали – морщины при сильных изменениях выражения лица или зубы при открытии рта. Изменение мимики на целевом изображении происходит за счет искривления изображения, причем алгоритм автоматически исправляет лишние искажения фотографии.
См. также
«Сбер» начнет использовать российские TLS-сертификаты для платежного шлюза
вчера в 09:45 1306 VKuser24342747 0
Минцифры подготовило правила отказа от передачи биометрических данных
24.01.2023 1000 VKuser24342747 0
Банки смогут получить право на передоверие полномочий по электронной подписи
20.01.2023 879 VKuser24342747 0
Минцифры подготовило правила аккредитации госорганов на владение информсистемами для биометрии
19.01.2023 911 VKuser24342747 0
Национальная система пространственных данных начала работу в России
12.01.2023 1765 VKuser24342747 0
Оператором Единой биометрической системы стал «Центр Биометрических Технологий»
22.12.2022 2420 VKuser24342747 2
GitHub к концу 2023 года введет обязательную двухфакторную аутентификацию
21.12.2022 2066 VKuser24342747 0
«Яндекс» открыл доступ к фреймворку Yatagan для сборки Android-приложений
16.12.2022 2515 VKuser24342747 1
В России появится национальная издательская система вместо иностранных аналогов
15.12.2022 1733 VKuser24342747 0
Google рассказала о проблемах и преимуществах поддержки разработки на Rust в Android 13
14.12.2022 1809 VKuser24342747 0
Банки обяжут принимать оплату по картам «Мир» с QR-кодом в смартфоне
14.12.2022 2012 VKuser24342747 1
Госдума рассмотрит законопроект о создании Национального удостоверяющего центра
09.12.2022 1863 VKuser24342747 0
Госдума планирует отложить срок обязательного перехода на машиночитаемые доверенности
08.12.2022 1948 VKuser24342747 0
В декабре начнут действовать новые правила регистрации доменов .RU и .РФ
23.11.2022 2226 VKuser24342747 1
В ноябре начнется создание российского государственного аналога GitHub
19.10.2022 3393 VKuser24342747 14