LivePortrait‌

‌LivePortrait‌是一个高效的肖像动画生成框架，主要用于将静态图像与输入参考视频结合，生成逼真的动态表情视频。该框架特别注重泛化能力、可控性和效率，通过引入隐式关键点、结合缝合模块和重定向模块，实现了低计算开销下的高效动画生成‌。

技术特点

• ‌隐式关键点‌：LivePortrait采用了基于隐式关键点的框架，通过隐式关键点来表示形状，结合视频和图像的训练策略，提高了生成质量和泛化能力‌。
• ‌训练数据‌：框架使用了约6900万个高质量帧的训练数据，采用混合图像-视频的训练策略，升级了网络架构，并设计了更好的运动转换和优化目标‌。
• ‌模块设计‌：包括贴合模块、眼部重定向模块和嘴部重定向模块。贴合模块用于避免反贴过程中出现像素错位，眼部和嘴部重定向模块分别解决跨身份驱动时眼睛和嘴部的闭合不完全问题‌。

应用场景

LivePortrait不仅可以用于人脸动画，还能扩展到动物肖像，提供了广泛的应用场景。用户可以通过驱动视频生成逼真的面部表情和头部动作，甚至可以将静态图像中的面部表情和动作“唤醒”，使照片中的脸动起来‌。

最新动态

LivePortrait的最新版本支持视频编辑功能，即v2v（视频到视频）功能，进一步扩展了其应用场景和功能‌。此外，该项目的安装配置相对简单，支持Windows和基于M系列的macOS系统，用户可以通过项目主页的命令行进行安装和配置‌。

LivePortrait – 高效的肖像动画生成框架