AAAI2023|清华提出StyleTalk：说话风格可控的One-shot Talking Head Generation

[视频作者] AI算法与图像处理

[视频时长] 2:11

[视频类型] 计算机技术

https://arxiv.org/abs/2301.01081 不同的人用不同的个性化说话风格说话。尽管现有的One-shot Talking Head 方法在嘴唇同步、自然面部表情和稳定的头部运动方面取得了重大进展，但它们仍然无法在最终的Talking Head视频中产生不同的说话风格。为了解决这一问题，我们提出了一种单张图可控说话人脸生成框架。简而言之，我们的目标是从任意参考发言视频中获得一种发言风格，然后驱动One-shot人像以参考发言风格和另一段音频说话。具体来说，我们首先开发了一种风格编码