让每一张脸都活起来,AdvancedLivePortrait —— 你的专属表情魔法师!
本项目AdvancedLivePortrait是快手出的项目LivePortrait的升级版,与LivePortrait不同的是,本项目提供多种功能来生成表情动画。针对ComfyUI进行部署使用,最后采用工作流完成项目。
一、介绍
本项目AdvancedLivePortrait是快手出的项目LivePortrait的升级版,与LivePortrait不同的是,本项目提供多种功能来生成表情动画。
具有的功能如下:
- 编辑照片中的面部表情。
- 在视频中插入面部表情。
- 使用多种面部表情创建动画。
- 从示例照片中提取面部表情。
二、容器构建说明
本文档针对ComfyUI进行部署使用,因此在正式部署之前需要部署ComfyUI
1. 部署ComfyUI
(1)使用命令克隆ComfyUI
git clone https://github.com/comfyanonymous/ComfyUI.git
cd ComfyUI
(2)安装 conda(如已安装则跳过)
下面需要使用 Anaconda 或 Mimiconda 创建虚拟环境,可以输入 conda --version
进行检查。下面是 Mimiconda 的安装过程:
- 下载 Miniconda 安装脚本
wget https://repo.anaconda.com/miniconda/Miniconda3-latest-Linux-x86_64.sh
- 运行安装脚本
bash Miniconda3-latest-Linux-x86_64.sh
- 遵循安装提示并初始化
按 Enter 键查看许可证条款,阅读完毕后输入 yes
接受条款,安装完成后,脚本会询问是否初始化 conda 环境,输入 yes
并按 Enter 键。
- 运行
source ~/.bashrc
命令激活 conda 环境 - 再次输入
conda --version
命令来验证是否安装成功,如果出现类似conda 4.10.3
这样的输出就成功了。
(3)创建虚拟环境
输入下面的命令:
conda create -n comfyui python=3.10
conda activate comfyui
(4)安装pytorch
pip install torch torchvision torchaudio --extra-index-url https://download.pytorch.org/whl/cu121
(5)安装项目依赖
pip install -r requirements.txt
此时所需环境就已经搭建完成,通过下面命令进行启动:
python main.py
访问网址得到类似下图界面即表示成功启动:
2.部署ComfyUI-AdvancedLivePortrait
(1)安装项目
如果已经安装“ComfyUI-Manager”管理器,则可通过该节点安装项目,如下图:
点击进入后在①处分别搜索图中②和③节点然后安装,安装成功后需要重启Comfy UI。
安装完成之后在路径 ComfyUI/custom_nodes/ComfyUI-AdvancedLivePortrait/
sample/workflows/中可找到各功能的工作流,下载 Bacis_Liveportrait_with_expression_editing.json
拖入界面即可:
其中还有其它工作流 Advanced_Animate_without_vid.json
如下图:
以及工作流:,但是使用不同功能的工作流时可能需要安装所需的节点和模型,如要使用如下图的工作流:
(2)下载模型
如果你的网络可以访问hugging face网站,导入工作流后,点击“Queue Prompt”(添加提示词队列),项目会自动下载所需要的相关模型,如下图:
如不能访问hugging face,则下载会失败并报错:
此时需要修改模型的下载地址,修改 /ComfyUI/custom_nodes/ComfyUI-AdvancedLivePortrait/
路径下 nodes.py
文件,将 https://huggingface.com/
地址换为 https://hf-mirror.com/
,如下图:
然后,重新启动comfyui,并再次点击“添加提示词队列”等待模型下载。下载完成即可插入图片及视频:
3. 拓展插件安装(可选)
(1)下载manager管理器
manager 是一个用来加强ComfyUI可用性的扩展,提供了对ComfyUI各种自定义节点的安装、删除、禁用、启用等管理功能。同时还提供了中心功能和便利功能,用来访问 ComfyUI 中各种信息。
cd /ComfyUI/custom_nodes
git clone https://github.com/ltdrdata/ComfyUI-Manager.git
成功安装之后重启界面会出现一个“Manager”如图:
(2)界面汉化插件
git clone https://github.com/AIGODLIKE/AIGODLIKE-ComfyUI-Translation.git
下载文件之后需要重新启动,重启模型之后:
设置一次之后可点击图中框选出的选项进行语言的切换:
更多推荐
所有评论(0)