搭建comfyui工作流就像在炒菜,炒着炒着你就知道有些菜系其实用的是同一种烹饪方法!之前很火的粘土风格工作流、陶瓷风格工作流、还是我今天要讲的3D动漫工作流其实工作流搭建原理不尽相同!

img

老规矩先说工作流原理:搭载文生图和脸部固定模型(例如ipadapter face\instand ID\PULID),和相关风格lora,并配合相关风格提示词及模型一键生成即可,指定图像任意风格加controlnet控制即可!

img

接下来我们逐步拆解搭建方法:

基础版:

第一步:搭载文生图模块:

img

第二步:搭建pulid换脸模块

这里PULID需要加载三个模型,分别是pulid模型,eva_clip模型及face analysis(insightface)模型!,和文生图的连接方式为模型通道!

PuLID 模型是一种用于图像处理和生成的深度学习模型。在这里,它加载了名为 puli-adapter_pulid_sdxl_fp16.safetensors 的模型文

EVA CLIP 模型,CLIP 模型是一种将文本和图像联合嵌入到相同空间的模型,用于文本图像匹配、图像生成等任务。EVA CLIP 是 CLIP 模型的一个变种。

InsightFace 是一个用于面部分析的深度学习模型,常用于面部识别、面部属性分析等任务。

img

这里的用法和instand ID十分相似,我们在连接image的时候可以用image crop face精确裁剪出人物面部!

img

第三步:加载LORA和提示词

这里你想生成什么样的风格的lora你就用什么风格的lora,粘土、3D动漫都可以,因为图像已经锁定,所以lora风格你可以任意切换了!这里可以加载sytles selector提示词工具可以选择不同风格,再用string fuction和CR text将你要输入的提示词append组合输入到提示词正向!

img

串联起来lora和pulid,我们看看效果怎么样!是不是既有了人物的脸型又有了3D动漫风格!

img

进阶版:

1.vae encode到latent

现实中如果你去靠这个工作流接单,客户给你一张照片让你转化风格,那么我们只需要vae encode到latent或者直接连接easy use的加载器的empty latent with和height!

img

2.图像比例调整及提示词反推

这里要将图像调整到XL生图适合的比例,并选择keep proportion保持比例,以为要更大程度的还原原图的风格所以我们再用wd14 tagger反推出图像提示词,输入到strings funtion!

img

3.controlnet 控制人物主体及构图

这里用anytext模型,在固定人物姿势及细节方面真的非常不错而且不用连接预处理器!

img

这样高级版的comfyui任意风格生成器,就搭建完成了,接下来看看生成效果!

img

好了这篇就到这里,最后,感谢每一位阅读我文章的朋友,如果你觉得文章不错,请随手点赞、在看、转发吧,也欢迎你给个星标⭐,以便第一时间收到我的推送。感谢大家的一路陪伴,希望我们共同见证一个充满希望和机遇的未来!

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

感兴趣的小伙伴,赠送全套AIGC学习资料和安装工具,包含AI绘画、AI人工智能等前沿科技教程,模型插件,具体看下方。

需要的可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】
请添加图片描述

一、AIGC所有方向的学习路线

AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。

在这里插入图片描述

在这里插入图片描述

二、AIGC必备工具

工具都帮大家整理好了,安装就可直接上手!
在这里插入图片描述

三、最新AIGC学习笔记

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
在这里插入图片描述
在这里插入图片描述

四、AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

五、实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
在这里插入图片描述
这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

请添加图片描述

Logo

有“AI”的1024 = 2048,欢迎大家加入2048 AI社区

更多推荐