简介:本文介绍的是image animation,给定一张源图片,给定一个驱动视频,生成一段视频,其中主角是源图片,动作是驱动视频中的动作。如下图所示,源图像通常包含一个主体,驱动视频包含一系列动作。
Wav2lip论文:A Lip Sync Expert Is All You Need for Speech to Lip Generation In The Wild
简介:本文主要介绍如何将任意说话的面部视频与任意语音进行唇形同步。
代码链接:https://github.com/PaddlePaddle/PaddleGAN/blob/develop/configs/wav2lip.yaml
参考资料[1] 一文看懂生成式对抗网络GANs:介绍指南及前景展望
[2] PaddleGAN GitHub项目
[3] 宋代诗人‘开口’念诗、蒙娜丽莎‘唱’rap-PaddleGAN唇形合成的应用
[6] 老北京城影像修复-PaddleGAN上色、超分、插帧的应用
[7] 一键生成多人版‘脸部动作迁移