GitHub 项目:AniPortrait
仓库地址:https://github.com/Zejun-Yang/AniPortrait
星级:5019 | 作者:杨泽君
项目描述:AniPortrait:音频驱动的真实肖像动画合成
===================================================
自述文件内容:
# 动画肖像
**AniPortrait:音频驱动的真实肖像动画合成**
作者:魏华为、杨泽君、王志胜
机构:腾讯游戏知己、腾讯

在这里,我们提出了 AniPortrait,一个用于生成高质量动画的新颖框架,由
音频和参考肖像图像。您还可以提供视频来实现人脸重演。

## 管道

## 更新/待办事项列表
- ✅ [2024/03/27] 现在我们的论文可以在 arXiv 上找到。
- ✅ [2024/03/27] 更新代码生成用于头部姿势控制的pose_temp.npy。
- ✅ [2024/04/02] 更新 vid2vid 的新姿势重定位策略。现在我们支持 ref_image 和源视频之间的实质性姿势差异。
- ✅ [2024/04/03] 我们在 HuggingFace Spaces 上发布了 Gradio [demo](https://huggingface.co/spaces/ZJYang/AniPortrait_official)(感谢 HF 团队免费的 GPU 支持)!
- ✅ [2024/04/07] 更新帧插值模块以加速推理过程。现在,您可以在推理命令中添加 -acc 以获得更快的视频生成速度。
- ✅ [2024/04/21] 我们发布了audio2pose模型和audio2video的[预训练权重](https://huggingface.co/ZJYang/AniPortrait/tree/main)。请更新代码并下载权重文件体验。
## 各种生成的视频
### 自驱动
<表类=“中心”>
|
<视频控制自动播放循环 src="https://github.com/Zejun-Yang/AniPortrait/assets/21038147/82c0f0b0-9c7c-4aad-bf0e-27e6098ffbe1" muted="false">
|
<视频控制自动播放循环 src="https://github.com/Zejun-Yang/AniPortrait/assets/21038147/51a502d9-1ce2-48d2-afbe-767a0b9b9166" muted="false">
|
表>
### 脸部重演
<表类=“中心”>
|
<视频控制自动播放循环 src="https://github.com/Zejun-Yang/AniPortrait/assets/21038147/d4e0add6-20a2-4f4b-808c-530a6f4d3331" muted="false">
|
<视频控制自动播放循环 src="https://github.com/Zejun-Yang/AniPortrait/assets/21038147/849fce22-0db1-4257-a75f-a5dc655e6b9e" muted="false">
|
表>
视频来源:【来自bilibili的鹿火CAVY】(https://www.bilibili.com/video/BV1H4421F7dE/?spm_id_from=333.337.search-card.all.click)
### 音频驱动
<表类=“中心”>
<视频控制自动播放循环 src=
这篇文章对您有帮助吗?
微信扫一扫分享
打开微信扫描二维码
|