stablediffusion小模型是什么?如何使用

共计 954 个字符,预计需要花费 3 分钟才能阅读完成。

stablediffusion 小模型是什么?如何使用

Stable Diffusion 中文网是一个提供小模型(Extra networks)的平台,这些小模型可以用来改善图像的风格并提高生成特定对象或角色的准确度。与根据需求切换 ckpt 模型不同,使用小模型可以额外叠加几层网络,从而改善图像的风格。

例如,可以使用 Anything 模型生成图像,并与 ”Taiwan-doll-likeness LoRA” 模型结合,将图像转换为真人风格,而不需要依赖大量的提示词。此外,可以一次叠加多个小模型,就像套用多层滤镜一样。

与 ckpt 大模型相比,这些小模型的文件大小都很小,主要用于微调现有模型。小模型有三种类型:嵌入(Embedding)、超网络(HyperNetwork)和 LoRA。这些模型文件的扩展名为.pt 或.safetensors,目前最受欢迎的是 ”LoRA”。

更好的是,由于文件大小较小,自行训练喜欢的人物模型的成本并不高。

1. 安装小模型

Stable Diffusion 中文网提供了许多小模型可供下载。在下载时,请注意模型的类型。

将嵌入模型放置在 stable-diffusion-webui 文件夹下的 embeddings 文件夹中。

将超网络模型放置在 stable-diffusion-webui/models/hypernetworks 文件夹中。

将 LoRA 模型放置在 stable-diffusion-webui/models/Lora 文件夹中。

如果要显示小模型的缩略图,请将图片命名为与该模型文件相同的名称,并放置在该模型的文件夹中。例如,在 Taiwan-doll-likeness.safetensors 所在的文件夹中放置一张名为 Taiwan-doll-likeness.png 的图片。

2. 小模型的使用方法

进入 WebUI,在右上角点击 ”Show extra networks”。

这样就会出现一个菜单。以 LoRA 模型为例,点击小模型的卡片,将其添加到提示词字段中,提示词字段中会出现 < >,表示在绘图时使用 LoRA 模型。

然后,再添加其他的提示词,生成的图像将会具有 LoRA 模型的风格。

如果生成的图像看起来太奇怪,可以调整提示词字段中每个 LoRA 后面的数字,以控制权重。

通过以上方法,可以改善生成图像的效果。

以上就是 Stable Diffusion 中文网关于小模型的介绍和使用方法。

正文完