一、介绍

周末愉快,今天看到一个生成一致性方案的工作流,很有意思,结合了很多插件,今天带大家来拆解一下这套有意思的工作流,先来看几张效果图

img

img

img

二、相关模型安装

Flux模型我就不说了,其他用到的模型和插件

Controlnet:

插件地址:

https://github.com/EeroHeikkinen/ComfyUI-eesahesNodes

模型地址:

https://huggingface.co/Shakker-Labs/FLUX.1-dev-ControlNet-Union-Pro

AdvancedLivePortrait:

插件地址:

https://github.com/PowerHouseMan/ComfyUI-AdvancedLivePortrait

模型地址:

https://huggingface.co/Kijai/LivePortrait_safetensors/tree/main

Pulid:

插件地址:
https://github.com/sipie800/ComfyUI-PuLID-Flux-Enhanced

模型地址:

https://huggingface.co/guozinan/PuLID/tree/main
没有办法魔法上网的宝子们,我将相关模型插件全部打包好放在下方了,有需要的可以自取哦~
另还有一些学习AI绘画所需的工具资料教程也一起打包了,有需要的自取哦~

在这里插入图片描述

三、工作流拆解

先来看个全貌

img

工作流核心用的技术:

• FLux模型

• PuLID脸部插件

• InstantX Controlnet控制模型

SD放大以及面部细化

• AdvancedLivePortrait表情迁移

工作流流程如下:

• 参考姿势图生成首次图像

• 高清放大以及脸部修复

• 裁剪图片

• 表情迁移

• 生成带背景的图像

现在我们来按模块来拆解学习

3.1 参数区介绍

img

参数需要调整的就三个地方

• 脸部参考图片,这里上传你想参考的人脸照片

• 姿势图,这个固定上传这个,如果你有其他姿势参考图也可以替换,不过这样后面裁剪区域参数就要自己调整

• 提示词区域,这里我写死是3D皮克斯风格的,你可以改成其他描述,下面人物具体描述你也可以改

3.2 参考姿势图生成首次图像

img

首次生成初稿图,这里核心就利用了3个能力

• FLux大模型文生图基础工作流

• PuLID Flux脸部参考

• InstantX Controlnet的姿势参考

3.3 高清放大以及脸部修复

img

这块不难,SD放大2倍,然后对脸部做进一步的细化,这里用面部细节这个节点,他会把有问题的面部细节修复一下。

3.4 裁剪保存姿势

img

这一步也很容易,需要自己算好不同区域的宽高和偏移,然后使用图像裁剪得出各个部位的图

3.5 表情包制作

这个模块利用了 AdvancedLivePortrait 插件能力,可以根据一张图,调整出各种不同的表情。

img

3.6 生成带背景的图像

img

三、总结

以上就是本次一致性方案的分享啦,这次的工作流使用的技术都很常规,就是组合起来对显存要求太高了。

👉AI绘画基础+速成+进阶使用教程👈

观看零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

**温馨提示:篇幅有限,已打包文件夹,获取方式在

在这里插入图片描述

Logo

有“AI”的1024 = 2048,欢迎大家加入2048 AI社区

更多推荐