Gemini2.0:谷歌最新多模态发布,图像编辑和修改!

Gemini2.0简介

在近期谷歌发布了最新的多模态大语言模型:gemini-2.0-flash-exp。这是一个能够实现 可连续会话完成图像生成或编辑的 多模态LLM大模型。类似国内的豆包等产品。利用会话聊天完成日常事务,这将是未来LLM的趋势;这将是一次大型的人机交互形式的改变,也是智能化的进程趋势。

为了集成ComfYUI体验,笔者在原有(https://github.com/CY-CHENYUE/ComfyUI-Gemini-API, 感谢 CY-CHENYUE 大佬)改写修复一些图像变形和api key安全性等问题。现在可以自由的在ComfyUI中探索Gemini2.0 的图文能力,也能与ComfyUI已有插件(如高清放大等)轻松集成。后续笔者计划还会增加更多相关图文功能集成。

要使用插件,首先需要申请谷歌Gemini2.0的API key。可以从Google AI Studio (https://aistudio.google.com/apikey?hl=zh-cn)获取。

img

Gemini2.0图文编辑ComfyUI体验

本文使用ComfyUI插件ComfyUI-Gemini-API-PL通过插件管理器git安装即可。文末网盘模型下载

ComfyUI-Gemini-API-PL:https://github.com/greengerong/ComfyUI-Gemini-API-PL

配置API KEY:访问Google AI Studio (https://aistudio.google.com/apikey?hl=zh-cn)获取。注意地区限制,需要科学网络

img

Gemini2.0图文编辑ComfyUI体验

Gemini2.0图文编辑ComfyUI体验工作流下载:https://www.liblib.art/modelinfo/7bb3101ef23f430a8fecda33452f0003?versionUuid=1383f6d8af6b467e8d01bd9df5f9307f

img

img

注意:

• 在安全环境中,当设置save key为True时候,会自动保存API KEY到本地文件,无需后续再次输入。在公开环境中慎用

• 生成人物图像的手部可能有畸形,可在工作流后续增加修手工作流,参见文章:[ComfyUI]HandFixer:一键轻松搞定AI坏手!基于FluxFill全自动修手神器

• 人物一致性相似度会弱一些,但相信这就是LLM的未来。LLM将越来越强大

• 推荐最近爆火的Wan视频特效,见个人主页:https://www.runninghub.cn/user-center/1890418187312222210?utm_source=kol01-RH059

01.文生图

根据提示词图片生成。提示词为:近距离摄影照片,中国古装美女,身穿白色长裙,坐着古镇小溪边

img

img

02. 图像编辑-换衣

电商广告宣传海报,将衣服修改为中国红色旗袍服装。正对着观众,保持人物一致性。

img

img

03.去水印

请将这张图上的文字或水印去掉,保留其他主体一致性。并返回去掉水印或文字后的图片信息

img

img img

04.线稿生图

请根据输入的线稿图生成一张精美的动漫风格图,保持线稿姿态一致性。并返回生成后的图片信息

img

img

05.电商模特

电商广告图,请更具输入服装添加中国美丽女明星模特图,优美的人物姿势。保持服装的一致性。并返回生成后的图片信息

img

img

06.图像换背景

请将图中的背景换为露天咖啡厅,保持人物一致性和服装的一致性。请返回修改后的生成图片信息

img

img

还有更多创意图像编辑,大家可自由探索并反馈。

• 推荐不想本地自己折腾的同学一个可在线使用**Runninghub平台可在线体验AI应用和工作流(注册即送1000积分可用)。**主页更多精彩工作流可在线体验: https://www.runninghub.cn/user-center/1890418187312222210?utm_source=kol01-RH059 。**阿里万相-最强开源*图生视频AI应用*:**https://www.runninghub.cn/ai-detail/1894632237306937345?utm_source=kol01-RH059 。AI工作流:https://www.runninghub.cn/post/1894584540348743681/aiDetail?utm_source=kol01-RH059

img
• 推荐使用云端镜像体验:新注册即送 8 元免费白嫖额度,4090D 大约 1.59 元/小时。注册链接:https://www.xiangongyun.com/register/UJ6IVE 。万相和混元视频推理和炼丹一体镜像****操作指南:https://www.xiangongyun.com/image/detail/4453a18e-f61f-4562-b4a5-2b9faa02100b?r=UJ6IVE

网盘下载

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

对于0基础小白入门:

如果你是零基础小白,想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!

零基础AI绘画学习资源介绍

👉stable diffusion新手0基础入门PDF👈

(全套教程文末领取哈)
在这里插入图片描述

👉AI绘画必备工具👈

在这里插入图片描述

温馨提示:篇幅有限,已打包文件夹,获取方式在:文末

👉AI绘画基础+速成+进阶使用教程👈

观看零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

温馨提示:篇幅有限,已打包文件夹,获取方式在:文末

👉12000+AI关键词大合集👈

在这里插入图片描述

这份完整版的AI绘画全套学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费
Logo

有“AI”的1024 = 2048,欢迎大家加入2048 AI社区

更多推荐