目錄
1.模型基本分類
1.1 CheckPoint 大模型/底模型/主模型
1.2 VAE美化模型/變分自編碼器
1.3 HyperNetwork 超網(wǎng)絡(luò)
1.4 embeddings（/Textual Inversion） 嵌入式向量
1.5 loRa 低秩適應(yīng)模型
2. 下載途徑和渠道
2.1 C站
2.1.1 如何篩選到自己需要的模型
2.1.2 使用技巧
2.1.3 學(xué)習(xí)他人作品
2.2 HuggingFace
想要做出好的AI繪畫，模型是最重要的，他相當(dāng)于AI繪畫的大腦，決定了AI繪畫質(zhì)量的上限，所以了解AI繪畫的各種模型非常重要
相比于Midjourney，Stable Diffusion最大的優(yōu)勢就是開源。
因而SD則每時每刻都有人在世界各地訓(xùn)練自己的模型并免費(fèi)公開共享給全世界的使用者。當(dāng)然我們也可以訓(xùn)練自己的專屬模型
提示詞+模型+參數(shù)設(shè)置
全能型賽博畫手
首先我們來了解一下模型的基本分類
1.模型基本分類
具體模型類型有checkpoint、Textual lnversion、Hypernetwork、Aesthetic Gradient、LoRA、LyCORIS、Controlnet、Poses、wildcards等等
常用的有checkpoint
哇塞，這么多，那么這些究竟都是什么意思呢？
1.1 CheckPoint 大模型/底模型/主模型
檢查點(diǎn)，常玩游戲的朋友肯定不陌生，一般會在一些節(jié)點(diǎn)存檔
一個大的模型訓(xùn)練起來是非常費(fèi)力的，如果每次迭代我們都從頭訓(xùn)練那可真實(shí)個災(zāi)難，因而訓(xùn)練到一定程度我們就給模型存檔，生成一個關(guān)鍵點(diǎn)Checkpoint模型，
常見文件后綴:后綴ckpt、safetensors（如果都有提供的話建議下載safetensors，下同）
存放路徑: 根目錄\models\Stable-diffusion
占用存儲： 模型較大，占用3-7GB
我們這里的根目錄都是指我們webui的最外層的那個文件夾，比如我這里的是stable-diffusion-webui
使用方法 將模型移動到根目錄\models\Stable-diffusion后，在webui界面點(diǎn)擊刷新按鈕，再點(diǎn)下拉就可以看到了
?文章來源：http://www.zghlxwxcb.cn/news/detail-673190.html
模型推薦
二次元模型
menia mix 生成動漫
AbyssOrangeMix 深源橘
counter-feit v2.5 動漫模型
dream Shper v5 模型 肖像畫 夢幻的插畫風(fēng)格
真實(shí)系模型
realistic vision v2.0 現(xiàn)實(shí)模型
Delibe-rate 比較全能的一個模型
在本章第二節(jié)可以看到如何利用其他網(wǎng)站來篩選自己需要的模型
1.2 VAE美化模型/變分自編碼器
從使用來看，我們可以把他粗略的理解為“調(diào)色濾鏡” 有些時候不加載VAE的情況下，出圖就會發(fā)灰發(fā)白
有很多比較新的大模型是會將VAE整合到內(nèi)部的，比如Chilloutmix。如果再加VAE則可能畫面效果不會更好，甚至適得其反
而有的大模型則會有自己適配的VAE，如深淵橘，這里看模型網(wǎng)站上作者的推薦就好
也有一些適用于大多數(shù)模型的VAE
二次元風(fēng)格：kf-f8-anime
寫實(shí)風(fēng)格:840000
常見文件后綴:后綴ckpt、pt
存放路徑: 根目錄/models/VAE
占用存儲： 模型較小，占用0-1個GB
使用方法 將模型移動到根目錄\models\VAE后，在VAE選項(xiàng)點(diǎn)擊刷新按鈕，再點(diǎn)下拉就可以看到了
1.3 HyperNetwork 超網(wǎng)絡(luò)
hypernetworks是一個附加到stable diffusion model上的小型網(wǎng)絡(luò)，用于微調(diào)，和embedings類似，不過現(xiàn)在用的也不是很多了，因?yàn)樗墓δ芑究梢员籹mbeddings替代了
常見文件后綴: 后綴pt
存放路徑: 根目錄/models/hypernetworks
占用存儲： 模型較小，占用幾百M(fèi)B
使用方法 注意HyperNetwork，embeddings這種微調(diào)網(wǎng)絡(luò)和大模型使用方法不同
（1）將模型放到 根目錄/models/hypernetworks
（2）首先點(diǎn)擊生成按鈕下的從左往右數(shù)的第三個，然后點(diǎn)擊超網(wǎng)絡(luò)，再點(diǎn)擊需要用到的超網(wǎng)絡(luò)模型，就會在提示詞中添加相應(yīng)的尖括號內(nèi)容，如本例中的<hypernet>
?
1.4 embeddings（/Textual Inversion） 嵌入式向量
（1）優(yōu)化畫風(fēng),
（2）通過僅使用的幾張圖像，向模型教授新的概念，比如AI不知道奧特曼，通過embeddigns就可以讓AI知道奧特曼長什么樣子
（3）減少提示詞的輸入，比如EasyNegative這個Embeddings，里面包含了大量的負(fù)面詞，可以減少你每次打一堆負(fù)面詞的痛苦，解決AI繪畫痛點(diǎn)，如畫手等等
常見文件后綴: 后綴pt
存放路徑: 根目錄/embeddings
模型的切換通過文件名稱來觸發(fā)
占用存儲： 模型很小，占用幾十kB到幾百kB
使用方法:
（1）將模型放到 根目錄/embeddings目錄下
（2）同HyperNetwork超網(wǎng)絡(luò)，首先點(diǎn)擊生成按鈕下的從左往右數(shù)的第三個，然后點(diǎn)擊嵌式入，再點(diǎn)擊需要用到的嵌入式模型，就會在提示詞中添加相應(yīng)的尖括號內(nèi)容
1.5 loRa 低秩適應(yīng)模型
進(jìn)行人物模型的微調(diào)，
讓AI學(xué)習(xí)到一些新的人物概念
常見文件后綴: 后綴safesensors
存放路徑: 根目錄/embeddings
占用存儲： 模型較小，10-200 MB。必須與checkpoint模型一起使用。
使用方法:
（1）將模型放到 根目錄/models/Lora
（2）同HyperNetwork超網(wǎng)絡(luò)，首先點(diǎn)擊生成按鈕下的從左往右數(shù)的第三個，然后點(diǎn)擊Lora，再點(diǎn)擊需要用到的Lora模型，就會在提示詞中添加相應(yīng)的尖括號內(nèi)容
除了這些以外還有DreamBooth模型，LyCORIS模型等等，這些模型在模型的進(jìn)階用法給大家介紹
2. 下載途徑和渠道
SD官方會發(fā)布模型
但是官方這個模型出圖風(fēng)格比較單一，因而我們現(xiàn)在下載使用的大多是私人訓(xùn)練的
主流下載網(wǎng)站
2.1 C站
需要科學(xué)上網(wǎng) C站是最主流的一個AI繪畫模型網(wǎng)站了，對于模型都是圖像化展示，非常便捷
?
2.1.1 如何篩選到自己需要的模型
1 通過模型生成內(nèi)容區(qū)分查找 模型欄目上邊有一排可以選擇的
2 利用我們第一節(jié)講到的模型類型區(qū)分
?
?
2.1.2 使用技巧
注意模型的各種信息，包括作者推薦的VAE，分辨率設(shè)置，采樣方式等等
如我們點(diǎn)擊進(jìn)入ReV Animated這個模型的下載界面，在模型的介紹界面里有show More
?
然后就可以看到作者推薦的VAE啦，提示詞prompting啦之類的
?
初學(xué)可以使用別人推薦的一些大模型
stable diffusion 常用大模型解釋和推薦（持續(xù)更新ing） - 知乎 (zhihu.com)
2.1.3 學(xué)習(xí)他人作品
C站除了優(yōu)秀的模型以外，還會有很多優(yōu)秀的作品，我們可以學(xué)習(xí)他們的模型搭配，提示詞等等
點(diǎn)擊C站的Images
點(diǎn)進(jìn)去以后就可以看到詳細(xì)的圖片生成信息,模型搭配，提示詞，采樣方式，種子等等
?
2.2 HuggingFace
不需要科學(xué)上網(wǎng)，網(wǎng)速較快
?
Hugging Face – The AI community building the future.文章來源地址http://www.zghlxwxcb.cn/news/detail-673190.html
到了這里，關(guān)于Stable Diffusion 系列教程 | 打破模型壁壘的文章就介紹完了。如果您還想了解更多內(nèi)容，請?jiān)谟疑辖撬阉鱐OY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章，希望大家以后多多支持TOY模板網(wǎng)！
