Давно не было дипфейков в канале

Давно не было дипфейков в канале. А сейчас появилось очень много инструментов, которые вывели продакшн дипфейков на новый уровень. Вот например результат работы Stable Diffusion + ControlNet + EbSynth + Fusion по омолаживанию Харрисона Форда.

Инструкция со слов автора:

1. Отслеживал лицо и стабилизировал его в 800x800, экспортировал их как последовательности.
2. Каждый 30-й кадр помещал в SD с запросом, чтобы он выглядел моложе.
3. Поместил эти кадры вместе с полной последовательностью изображений в EbSynth.
4. Наложил рендер EbSynth обратно на оригинальное видео.
5. Отслеживал лицо на оригинальном видео и использовал его как инвертированную маску, чтобы показать омоложеную версию лица из SD.
6. Отслеживал глаза и рот на оригинальном видео и маскировал их, чтобы оставить их неизмененными.

Однако, пайплайн разваливается, когда у актера много волос, поэтому автор выбрал кадры, где Форд носит шапку. Также сложнее сделать фейк, когда много поворотов головы — придется брать больше ключевых кадров.

@ai_newz