今天给大家介绍In-Context LoRA 这个项目太强了，前几天发布的时候就引起了许多小伙伴的关注，但是当时还没有开源，就在刚刚，作者开源了In-Context LoRA项目。

=============================================================================================

它基于FLUX训练，可以一次生成多张风格和ID一致但是内容相互关联的图片集。支持电影故事板生成、ID一致人像摄影、字体设计、PPT排版设计、家居装饰摄影。非常适合用来直接生成AI视频中需要的连续图生视频关键帧。

最关键的是In-Context LoRA (IC-LoRA)。这种方法不需要修改原始 DiT 模型，只需要更改训练数据。并且可以生成更符合提示的高保真图像集。如下图所展示的内容：

提示：这组四张图片展示了一位年轻艺术家在明亮而鼓舞人心的工作室中的创作过程；

1. 她站在一块大画布前，手拿画笔，为一幅未完成的画作增添鲜艳的色彩；

2. 她坐在一张杂乱的木桌前，在散落着各种美术用品的笔记本上勾勒出想法；

3. 她停下来观察自己的作品；

4. 她直接在调色板上混合颜料，尝试不同的纹理，专注的表情展现了她对工艺的执着。”

unsetunset相关链接unsetunset

项目主页：https://ali-vilab.github.io/In-Context-LoRA-Page

论文：https://arxiv.org/pdf/2410.23775

代码：https://github.com/ali-vilab/In-Context-LoRA

unsetunset论文介绍unsetunset

unsetunset方法概述unsetunset

最近的研究探索了使用扩散变压器 (DiT) 进行与任务无关的图像生成，方法是简单地在图像之间连接注意力标记。然而，尽管拥有大量计算资源，但生成的图像的保真度仍然不是最优的。

论文重新评估并简化了这一框架，假设文本到图像的 DiT 本质上具备上下文生成功能，只需进行最少的调整即可激活它们。通过不同的任务实验定性地证明了现有的文本到图像的 DiT 可以有效地执行上下文生成而无需任何调整。

基于这一见解，文中提出了一个非常简单的流程来利用 DiT 的上下文能力：

1. 连接图像而不是标记

2. 对多幅图像进行联合字幕

3. 使用小数据集（例如20〜 100 个样本）应用任务特定的 LoRA 调整，而不是使用大数据集进行全参数调整。

将模型命名为 In-Context LoRA (IC-LoRA)。这种方法不需要修改原始 DiT 模型，只需要更改训练数据。并且可以生成更符合提示的高保真图像集。

unsetunset实验结果unsetunset

电影故事板生成

每个三幅图像序列均使用 In-Context LoRA 同时生成。占位符角色名称在图像中唯一地引用角色的身份

肖像摄影

每组四幅图像均与 In-Context LoRA 同时生成，旨在保持每组图像之间的主体身份一致。

字体设计

每组四幅图像均与 In-Context LoRA 同时生成，旨在实现每组图像之间的一致字体样式。家居装饰 每组四幅图像均使用 In-Context LoRA 同时生成，旨在使每组图像之间的装饰风格保持一致。

家居装饰

每组四幅图像均使用 In-Context LoRA 同时生成，旨在使每组图像之间的装饰风格保持一致。

PowerPoint 模板设计

每组四幅图像均与 In-Context LoRA 同时生成，旨在为每组幻灯片创建具有凝聚力和统一性的演示风格。

视觉识别设计

每对图像均与 In-Context LoRA 同时生成，旨在实现每对图像之间连贯一致的视觉识别

情侣档案生成

每对图像均与 In-Context LoRA 同时生成，旨在使每组中的两张图像保持一致的风格和身份特征。

资料软件免费放送

次日同一发放请耐心等待

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错，但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料，给那些想学习 AI绘画 的小伙伴们一点帮助！

感兴趣的小伙伴，赠送全套AIGC学习资料和安装工具，包含AI绘画、AI人工智能等前沿科技教程，模型插件，具体看下方。

需要的可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

**一、AIGC所有方向的学习路线**

AIGC所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照下面的知识点去找对应的学习资源，保证自己学得较为全面。

二、AIGC必备工具

工具都帮大家整理好了，安装就可直接上手！

三、最新AIGC学习笔记

当我学到一定基础，有自己的理解能力的时候，会去阅读一些前辈整理的书籍或者手写的笔记资料，这些笔记详细记载了他们对一些技术点的理解，这些理解是比较独到，可以学到不一样的思路。

四、AIGC视频教程合集

观看全面零基础学习视频，看视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从基础到深入，还是很容易入门的。

五、实战案例

纸上得来终觉浅，要学会跟着视频一起敲，要动手实操，才能将自己的所学运用到实际当中去，这时候可以搞点实战案例来学习。

这份完整版的学习资料已经上传CSDN，朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】