LoRA模型：小型Stable Diffusion模型的微調(diào)技術(shù)

LoRA模型是一種小型的Stable Diffusion模型，對checkpoint模型進(jìn)行微小的調(diào)整。它們的體積通常是檢查點模型的10到100分之一。由于體積小而效果好，因此LoRA模型的使用程度相對較高。

這篇文章面向從未使用過LoRA模型的初學(xué)者，將介紹LoRA模型的概念、獲取途徑以及在AUTOMATIC1111 GUI中的使用方法。最后，還將提供一些LoRA模型的實際應(yīng)用演示。

LoRA模型是什么？

LoRA（Low-Rank Adaptation）是一種微調(diào)Stable Diffusion模型的訓(xùn)練技術(shù)。相比于Dreambooth和文本反轉(zhuǎn)等訓(xùn)練技術(shù)，LoRA模型是一種折中方案。它的文件大小更易管理（2-200 MB），并且訓(xùn)練能力相當(dāng)不錯。LoRA模型是解決存儲問題的優(yōu)秀方案，特別適用于定制AI藝術(shù)模型，不會占用太多本地存儲空間。

LoRA如何工作？

LoRA對Stable Diffusion模型中最關(guān)鍵的部分進(jìn)行微小的修改，主要是交叉注意力層。通過將自己的權(quán)重加到這些矩陣上來微調(diào)模型，LoRA模型通過將矩陣分解成兩個更小的（低秩）矩陣來存儲更少的數(shù)字，從而實現(xiàn)文件更小的效果。

在交叉注意力層中，LoRA模型通過將矩陣分解成兩個更小的（低秩）矩陣來存儲更少的數(shù)字，從而實現(xiàn)文件更小的效果。

在哪里找到LoRA模型？

Civitai

尋找LoRA的首選地點是Civitai。該網(wǎng)站托管了大量LoRA模型的集合。應(yīng)用LORA過濾器以僅查看LoRA模型。不過里面的大多數(shù)模型都是：女性肖像，動漫，現(xiàn)實主義插圖風(fēng)格等。

Hugging Face

Hugging Face是另一個LoRA庫的好來源。你會發(fā)現(xiàn)更多種類的LoRA模型。但那里的LoRA模型可能沒有C站多，并且也不太直觀。因為沒有圖片預(yù)覽。

如何使用LoRA？

在AUTOMATIC1111 Stable Diffusion GUI中使用LoRA模型非常簡單。AUTOMATIC1111原生支持LoRA，無需安裝任何擴(kuò)展。

第1步：安裝LoRA模型

要在AUTOMATIC1111 webui中安裝LoRA模型，請將模型文件放入以下文件夾： stable-diffusion-webui/models/Lora

第2步：在提示中使用LoRA

要在AUTOMATIC1111 Stable Diffusion WebUI中添加帶權(quán)重的LoRA，請在提示或否定提示中使用以下語法： 。其中， name 是LoRA模型的名稱， weight 是應(yīng)用于LoRA模型的權(quán)重。默認(rèn)值為1。將其設(shè)置為0將禁用模型。

實用的LoRA模型

add_detail

誰不想要AI圖像中更多的細(xì)節(jié)？細(xì)節(jié)調(diào)整器允許你增加或減少圖像中的細(xì)節(jié)。使用正LoRA權(quán)重來增加細(xì)節(jié)，使用負(fù)權(quán)重來減少細(xì)節(jié)。

add_saturation

這個lora可以給圖片添加一些飽和度。

add_brightness

這個lora可以用來控制圖片的亮度。

總結(jié)

LoRA模型是checkpoint模型的小型修改器。你可以通過在提示中包含一個短語輕松地在AUTOMATIC1111中使用它們。在以后的文章中，我將告訴你如何自己來訓(xùn)練一個LoRA模型。

點我查看更多精彩內(nèi)容:www.flydean.com

• 《暗喻幻想：ReFantazio》尤法社群等級提升作用介紹
• 【長城守望】新服開啟！沖榜就送非遺城磚
• 《寶可夢大集結(jié)》路卡利歐技能圖鑒
• 《塞爾達(dá)傳說 智慧的再現(xiàn)》螺旋甜味冰沙怎么制作
• 《仙劍世界》黑蜘蛛森林寶箱開啟方法