МЕНЮ
Спецэффекты в кино добавляют зрелищности и в целом творят чудеса. Благодаря технологии дипфейк создатели «Форсажа» «воскресили» Пола Уокера. Клип на трек «See You Again» со сценой прощания пересмотрели более 5,5 миллиардов раз. А в октябре 2022 состоялась премьера первого российского дипфейк-сериала «ПМЖейсон». В нем Джейсон Стэтэм переезжает в русскую деревню на улицу Неудержимых перевозчиков, влюбляется в повариху и пробует оливье.
В статье рассмотрим технологию создания дипфейков и еще 3 визуальных эффекта, которые заставляют нас говорить «вау».
При помощи технологии дипфейк можно заменить лицо человека на другое. Это результат соревнования двух нейросетей. Генератор стремится создать максимально реалистичное изображение, а дискриминатор — отличить подделку. Если обман не удался, видео возвращается на доработку. На правдоподобность результата влияют размер и форма лица, пол и возраст, расположение глаз и бровей. Нейросеть оставляет человеку родной лоб, уши и волосы.
В кино дипфейк впервые использовал Джеймс Кэмерон. На фото со съемок «Аватара» мы видим на лице актеров зеленые точки. Они помогали генератору распознать мимику и воссоздать ее на цифровой модели.
Сейчас рисовать точки не требуется, и сама технология стала доступнее. В ролике Сбера Жорж Милославский играет в баскетбол и танцует в клубе, а в рекламе Мегафона Брюс Уиллис поет песню Юрия Антонова.
Алгоритмов множество, ИИ постоянно развивается. Пример «нестандартного» дипфейка — видео для организации Malaria Must Die. В нем Дэвид Бэкхем рассказывает об опасности малярии на 9 языках. Его озвучивали люди, победившие болезнь. Их отсняли, обработали видео отдельно. Затем нейросеть изучила мимику Дэвида, сделала цифровой слепок лица и синхронизировала движения губ.
Том Холланд и Роберт Дауни-младший попали во вселенную фильма «Назад в будущее» с помощью бесплатной программы DeepFaceLab. Что любопытно, ее написал российский разработчик iperov. Цветокоррекция и мимика на уровне. Ошибки заметны, если внимательно присмотреться: на 31 секунде док Браун появляется в кадре, и это все еще Кристофер Ллойд, он становится Дауни-младшим, когда проходит мимо Тома Холланда. Но сравнивать команду профессионалов с огромными бюджетами и обычных пользователей несправедливо.
Теоретически дипфейк подходит для создания игр. BabyZone опубликовал на YouTube кат-сцены из «Spider-Man», где вместо лица каноничного Питера Паркера
