在Stable Diffusion網(wǎng)絡(luò)中,通常會(huì)下載社區(qū)中的LoRA模型,并對CLIP模型和Unet的CrossAttention的線性層進(jìn)行微調(diào)。相應(yīng)的被微調(diào)的層會(huì)有 'lora_up'
和 'lora_down'
兩組參數(shù),分別對應(yīng)上述的 A
和 B
矩陣。參考高手的代碼,只需根據(jù)LoRA保存的層的名稱找到Stable Diffusion對應(yīng)的參數(shù),然后對原始網(wǎng)絡(luò)的參數(shù)進(jìn)行更新即可。文章來源:http://www.zghlxwxcb.cn/news/detail-500901.html
初識LoRA
盡管每個(gè)checkpoint都是Stable Diffusion模型,但由于受到不同圖片訓(xùn)練的影響,神經(jīng)元權(quán)重各異,因此各有各的風(fēng)格。然而這時(shí)會(huì)發(fā)現(xiàn)一些問題:文章來源地址http://www.zghlxwxcb.cn/news/detail-500901.html
- checkpoint文件非常大,大小不等,多為2 ~ 7 GB,如果需要多種風(fēng)格,將占用大量硬盤空間
- 每個(gè)checkpoint不
到了這里,關(guān)于Stable diffusion WebUI LoRA使用教學(xué)的文章就介紹完了。如果您還想了解更多內(nèi)容,請?jiān)谟疑辖撬阉鱐OY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章,希望大家以后多多支持TOY模板網(wǎng)!