Stable Diffusion模型制作教程:科尼科尼风格的LoRA konyconi-style LoRA

Stable Diffusion模型制作教程:科尼科尼风格的LoRA konyconi-style LoRA

Stable Diffusion模型制作教程:科尼科尼风格的LoRA konyconi-style LoRA_Qpipi
Stable Diffusion模型制作教程:科尼科尼风格的LoRA konyconi-style LoRA
此内容为免费资源,请登录后查看
0积分
网盘密匙:Qpipi2023
允许图像商用
不允许出售模型
不允许生成图像服务费
许可证:CreativeML Open RAIL++-M
🎀包含版本🆕TrainingData、BasicCaptioningScript、KohyaSsSetting
⚠️注意任选一个新版本即可,安装方法请看文章内介绍
🔑授权许可🆓creativeml-openrail-m
免费资源

经过一些试验和错误, 我发现了一种创建 LoRA 的有效方法,该方法可以将样式或功能应用于各种项目.我的 LoRA 在这里很受欢迎, 令人惊讶的是这个过程是多么容易和快速.这几乎感觉像作弊。我很享受这种认可,但我相信是时候谦虚地与大家分享我的方法了。

本教程展示了我创建大多数 LoRA 所遵循的典型过程.

TLDR版本:

我使用生成的图像;

我将简单的插图合并到训练数据中;

我使用基本的字幕:[触发词][概念],

我使用一个简单的Python脚本来创建字幕文件。

第 1 步:找到一个想法(样式/功能)并检查带有您最喜欢的检查点的 SD 无法做到这一点。比方说,波西米亚风格。

亲爱的 revAnimated,请为我生成一个“boho tank”:

图片[1]_Stable Diffusion模型制作教程:科尼科尼风格的LoRA konyconi-style LoRA_Qpipi


好吧,波西米亚风格似乎是一个尝试的好主意,


第 2 步:检查其他图像生成器。

亲爱的Bing,请为我生成一个“波西米亚坦克”:提示:
prompt: illustration of battle tank in boho-style

图片[2]_Stable Diffusion模型制作教程:科尼科尼风格的LoRA konyconi-style LoRA_Qpipi


亲爱的DALEE-2,请为我生成一个“波西米亚坦克”:提示:
prompt: battle tank in boho style, illustration

图片[3]_Stable Diffusion模型制作教程:科尼科尼风格的LoRA konyconi-style LoRA_Qpipi


好的,我们可以看到这些图片在某种程度上捕捉了波西米亚风格boho-style。因此。。。。


第 3 步:使用可以理解波西米亚风格 boho-style 的图像生成器生成训练集。

我的一些 LoRA 在训练集中不使用生成的图像, 而其他 LoRA 则包含一部分生成的图像.值得注意的是, 我最近的 LoRA 完全依赖于生成的图片.


例如,生成“波西米亚坦克”、“波西米亚计算机”、“波西米亚村”、“波西米亚飞船”、“波西米亚潜艇”等(generate “boho tank,” “boho computer,” “boho village,” “boho dirigible,” “boho submarine,” etc)。每个概念的目标是 1-6 张图像,总共 50-100 张图像。


当您生成此类不常见的东西(例如“波西米亚坦克 boho tank”)时,您可能会遇到STEP 2中显示的图像。不用担心将这些图像包含在训练数据中;它们通常比(半)逼真的图片更好。例如,我的BohoAI训练数据仅包含以下飞船示例:

图片[4]_Stable Diffusion模型制作教程:科尼科尼风格的LoRA konyconi-style LoRA_Qpipi
图片[5]_Stable Diffusion模型制作教程:科尼科尼风格的LoRA konyconi-style LoRA_Qpipi


然而,最终模型产生如下:

图片[6]_Stable Diffusion模型制作教程:科尼科尼风格的LoRA konyconi-style LoRA_Qpipi


还包括一些(半)逼真的图片。对于某些概念,例如“波西米亚风格的客厅 boho living room”,它们应该不是问题。

第 4 步:通过删除徽标、生成的作者签名和其他类似元素来清理图像。还要移除不需要的人工制品,例如坦克塔上的额外大炮。
删除可能非常粗糙:只需将图片的其他部分放在不需要的部分上即可。

不要调整图片大小。

第 5 步:字幕。

使用非常基本的标题,例如“BohoAI dirigible”。

为了加快该过程,请尝试此技巧:将图像保存在以概念命名的文件夹中。因此,所有飞船图片都将位于名为“dirigible”的文件夹中。

将所有图像组织在各自的文件夹中后,执行我在附件中提供的 Python 过程。它递归遍历文件夹,并为每个.jpg文件创建包含给定触发词和文件夹名称的.txt。

第 6 步:我们很好去。训练Lora.

我认为您通常的设置不会出错。
经过一些实验,似乎需要 rank 128 和 alpha 128 才能获得预期的结果。我稍后会做更深入的研究。

我正在分享 kohya ss 的配置,但请持保留态度。我经常改变它并盲目地尝试。BohoAI 使用此配置进行了 10 次重复训练。

LoRA封装了波西米亚风格, 熟练地将其应用于未经训练的概念.


查看dajusha的评论图片(我的数据集中没有任何动物的图片):

图片[7]_Stable Diffusion模型制作教程:科尼科尼风格的LoRA konyconi-style LoRA_Qpipi

我已经分享了我的秘密,并恳请一个帮助:如果您发布使用此方法训练的 LoRA,请归功于本教程.

许多创作者可以采用并增强这一想法,最终提高 Qpipi.com 内容的质量。

通过分享我的金点子,我恳请您考虑通过以下链接支持我喝咖啡:

https://www.buymeacoffee.com/konyconiN

https://ko-fi.com/konyconi7992

如果您觉得不错请再给我一个赞和分享,谢谢!

希望你喜欢使用这个AI模型,就像我们创造它一样!如果您有任何问题或建议,请在评论区告诉我们。

使用Qpipi读图提示功能,获取图片TAG Prompt提示

Stable Diffusion AI绘图软件常见问题解答

AI绘画新人必备工具指南

你想要什么SD绘画模型?请在Qpipi社区或者评论留言告诉我们!

🎨享受精美的AI绘图乐趣!

© 版权声明
THE END
喜欢就支持一下吧!
点赞8 分享
评论 抢沙发

请登录后发表评论

    暂无评论内容