Новая AI-технология: голливудские актеры с лицами ваших друзей

Геймдизайнер Тим Сорет в Twitter рассказал о таком явлении, как дипфейк:
«В интернете появилось нечто под названием Deepfakes, это самая киберпанковая хрень, которую только можно представить. Технология машинного обучения заменяет лица порноактеров лицами голливудских звезд. Очевидно, NFSW (жене это не покажешь)».

Да, это определенно из области киберпанка. В reddit появилось сообщество (сейчас его заблокировали): пользователи создают в приложение фейковое порновидео с участием селебрити. Разработка автора с ником «deepfakes» спровоцировала оживленную полемику на просторах сети. Медиа-ресурсы обсуждают законность такого контента, другие веб-сайты активно удаляют эти ролики, а общественность вновь задается вопросом о последствиях, которыми может обернуться повсеместное внедрение AI-технологий.
И пока обсуждается вопрос о том, хорошо это или плохо, можно подумать, как использовать «дипфейки» применительно к друзьям (не в порнографическом смысле, конечно).

Принцип работы

Алгоритм обучения воссоздает черты лица. Достаточно нескольких фотографий, чтобы получить расплывчатые дубликаты. Это не копии. Алгоритм изучает мимику, взгляд — и дальше лицо воссоздается только по этим данным.

Если упростить… вы смотрите на лицо человека 12 часов подряд, запоминаете различные его выражения. Затем он просит вас сделать на бумаге набросок — с улыбкой, со слезами и другими чертами, которые вы запомнили. И вы сразу же рисуете набросок фотографического качества. Фантастика!

Система совершенствуется. Но уже сейчас эти дипфейки выглядят очень даже впечатляюще.

В приложении FakeApp один энкодер используется для всех лиц, а декодер делает лица разными. Более того, если позволить алгоритму изучить лица нескольких человек, результат получится еще интереснее.

Вот как это работает. Энкодер получает изображение лица, обрабатывает его, а декодер выдает результат.

На примере выше — лицо актрисы Энн Хэтэуэй. Если к нему применить декодер, который генерировал другое лицо, получится…

То, чего прежде вообще не существовало. Мимика и выражение актрисы Хэтэуэй, но уже на лице другого человека.

Лица известных людей вместо лиц порноактеров — интересное применение этой разработки, но есть и другие. Друзей можно сделать героями популярных фильмов или телешоу.

Чтобы результат выглядел правдоподобнее, лучше выбрать актера или актрису с лицом похожей формы.

В данном случае понадобилось около тысячи фотографий Энн Хэтэуэй и примерно столько же снимков другого человека.

Использовать технологию можно по-разному. Интернет-пользователи часто обмениваются нелепыми гифками танцующих гномов с лицами своих друзей. Но теперь можно буквально помещать друзей в их любимые фильмы. Так, подруга может танцевать с Патриком Суэйзи, или сражаться с пришельцами. Все зависит от вашего воображения.

Не только забавы ради…

Судя по всему, эта разработка найдет множество коммерческих применений. Например, в индустрии моды (как я будут выглядеть с этой прической, в том или ином наряде…), фитнес (каким я буду, если сброшу пару-тройку лишних килограммов, пойдут ли мне мускулы…), путешествия (изображение человека на фоне пляжа будет смотреться достаточно реалистично).

Новая разработка, как это обычно случается в истории человечества, не обойдет стороной и рекламную отрасль. Маркетологам не понадобится рассказывать о том, что с покупкой товара жизнь клиента изменится к лучшему. Он сможет это показать.

P.S Жена автора публикации поклонница Стива Карелла. Энн Хэтэуэй снималась совместно с ним в фильме "Напряги извилины". Так что при помощи AI их всех удалось соединить.