这两天 Flux 又火了一把,Flux 官方亲自下场开源了重绘模型、风格参考模型以及 ControlNet 中的 Canny 和 Depth 模型。

我体验了一把,真是官方下场最致命,我花开后百花杀。哈哈,开个玩笑,但是效果是真的好。

这两天新技术出的比较多,拖不到周一了,今天我们就先把 Flux 新开源的这几个模型先来介绍一下。

另外,小伙伴们看到模型动不动就 20G 往上也不要怕,开源社区还是很给力的,现在量化版本的模型已经出来了, 只需要 8G 显存就可以玩耍了。

好了,话不多说,我们直接开整。

先来看下效果吧,模型以及对应的工作流我会放在文末的网盘里,需要的小伙伴自取。

我们先来看下 Flux 的重绘功能,主要用到 Flux 这次新出模型中的 Fill 模型。

左图是原图,在右上角给它加一个朦胧的月球,这个融合度就很高,不需要额外的动作去修复它了。

再来换个衣服,之前如果涂抹部分太大的话,人物的也会受到影响,现在就完全没问题。

替换画面中的人物,也是毫无违和感。

重绘就先介绍到这,工作流这里就不贴了,直接放文末的网盘里了。

再来看扩图,融合度也是相当完美。

细节的把握上也是恰到好处。

这扩图真的是没话说,细节的过度以及整体的构图上都是完美。

其他的扩图方案都可以放弃了,官方就是官方,一来就是王炸。

我们来介绍第二个风格参考模型:Redux,它和 IPAdapter 还是有区别的,不需要提示词就可以生成相似风格的图像,缺点就是没有 IPAdapter 那么灵活和可控,因为输入提示词无效。

以下是单张图片的风格参考模式,相当于可以生成一组风格相似的图片。

单张的变化比较少,我们就不多演示了,我们来演示多张参考图片的情况,这个用法还是很有意思的,非常有意思。

左边两张是参考图,右边相当于是融合出图,看着还怪和谐的嘞。

这感觉有一些一致性融合出图的意思了。

Redux 的神奇之处就是,通过多张图融合,我们常常会得到比较意外的但是又很有趣的结果。

看吧,草莓猫女,神奇的效果!

Redux 的多图融合功能建议小伙伴们可以去试试,真的是很有趣!

最后我们来讲一下官方出品的 ControlNet 功能,现在开源了 Canny 和 Depth 两个模型,同时官方还准备了轻量版本的 Lora 版本,可以用 Lora 来实现相同的控制效果。

我们来看下 canny,也就是线稿。这个出图质量和 Flux 本身的出图质量已经没啥区别的,相当惊喜了。

效果还是相当不错的。

再来看下 Depth,深度模型。

来个星空房。

上边的是 Flux 全量版本,以下是量化 Q4 版本的效果,感觉也没差呢!Q4 版本只需要 8G 显存就可以了。

想要使用量化版本的小伙伴,需要安装插件:ComfyUI-GGUF,经常玩 Flux 的小伙伴对这个插件应该是不陌生的。

我们只需要把工作流中的「UNET加载器」都替换成 GGUF 的 UNET 加载器就可以了,其他工作流节点都不需要动。

可以说这次 Flux 发布的这些工具模型,让 Flux 的生态又往前跨了一大步。真的是相当值得开心的事情!

好了,今天的分享就到这里了,感兴趣的小伙伴快去试试吧!相当推荐!

上边演示中涉及的模型以及工作流我都放到网盘里了,需要的小伙伴自取哦:

写在最后

常用工作流已经给各位小伙伴打包好了,可以按需自取,无偿分享。
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

这份完整版的AI绘画全套学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费

AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。

在这里插入图片描述

一、AIGC所有方向的学习路线

AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。

在这里插入图片描述

在这里插入图片描述

二、AIGC必备工具

工具都帮大家整理好了,安装就可直接上手!
在这里插入图片描述

三、最新AIGC学习笔记

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
在这里插入图片描述
在这里插入图片描述

四、AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

五、实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
在这里插入图片描述

若有侵权,请联系删除

Logo

有“AI”的1024 = 2048,欢迎大家加入2048 AI社区

更多推荐