在探索生成式AI绘图的世界中,你可能已经遇到过以下情景:
- 你在一个模型中用一组提示词成功绘制了你喜欢的角色,但当你尝试在同一个模型中改变角色的姿势、场景、表情、服装等细节时,生成的图像却不如你所愿。
- 同一组提示词在一个模型中可以产生理想的角色形象,但在另一个模型中却无法获得相似的结果。
- 一些知名角色在某些模型中似乎无法被识别和绘制。
这些问题常常让AI绘图过程充满了挑战。然而,LoRA(Loose Reinforcement of AI)是一项新的技术,它正在改变这个游戏规则,使生成式AI绘图更加灵活和强大。
什么是LoRA?
LoRA可以被看作是生成式AI中的一种“修正贴纸”。想象一下,大型AI模型就像一本字典,而LoRA就是你可以粘贴在字典上的贴纸,以改变其中的定义。
从工作原理来看,AI通过将提示词与你提供的训练数据中的含义进行比较,并将两者之间的差异存储在LoRA中。这样,LoRA充当了一个修正器,可以在生成图像时对AI的行为进行微调。
LoRA的使用方法
LoRA的使用方法非常简单,它可以轻松地集成到Stable Diffusion webui中。无论是你自己训练的LoRA还是从其他网站下载的LoRA,只需将它放入Stable Diffusion webui的安装目录下的/models/文件夹中,然后重新启动Stable Diffusion webui,你就可以使用LoRA了。
在Stable Diffusion webui中,你可以按以下步骤使用LoRA:
- 打开”Show/Hide Extra Network”按钮以显示额外网络区域。
- 在额外网络区域中,选择”Lora”标签,并选择你想要使用的LoRA。
- LoRA会以”lora:档案名:权重“的形式出现在正面提示词中(仅可用于正面提示词)。
- 将LoRA的启动提示词添加到正面提示词中。每个LoRA的正面提示词都是不同的,你可以在下载页面中找到相关信息。例如,某个LoRA的提示词可能是”princess zelda”。
LoRA的注意事项
需要注意的是,LoRA对整个模型都会产生影响,因此给予它太高的权重可能会导致整个画面严重变形。不同的LoRA对不同模型的干扰程度各不相同,因此需要进行适度的测试。
LoRA也可以同时使用,例如你可以同时使用一个用于角色的LoRA和一个用于风格的LoRA,以实现更多的创意可能性。
最后,稳定扩散会在将LoRA提示词混合到模型中后进行过滤,因此一些特殊的稳定扩散语法可能无法使用,如混合提示词。
LoRA:赋予AI绘图新的可能性
LoRA是一种强大的工具,它为生成式AI绘图带来了新的可能性。无论你是创作角色还是探索不同的艺术风格,LoRA都可以帮助你更好地与AI合作,创造出令人惊叹的作品。不断尝试和测试不同的LoRA,找到适合你需求的组合,让AI绘图成为一种更加富有创意和多样性的体验。
原创文章,作者:SD中文网,如若转载,请注明出处:https://www.stablediffusion-cn.com/sd/sd-use/3687.html