大家好,我是風雨無阻。
通過前面幾篇文章的介紹,相信各位小伙伴,對 Stable Diffusion 這款強大的AI 繪圖系統(tǒng)有了全新的認知。我們見識到了借助 Stable Diffusion的文生圖功能,利用簡單的幾個單詞,就可以生成完美的圖片。本期我們一起來研究 Stable Diffusion圖生圖功能這個寶藏。
對于新朋友,想詳細了解Stable Diffusion 的話,請查看往期文章:
AI 繪畫Stable Diffusion 研究(一)sd整合包v4.2 版本安裝說明
AI 繪畫Stable Diffusion 研究(二)sd模型ControlNet1.1 介紹與安裝
AI 繪畫Stable Diffusion 研究(三)sd模型種類介紹及安裝使用詳解
AI 繪畫Stable Diffusion 研究(四)sd文生圖功能詳解(上)
AI 繪畫Stable Diffusion 研究(五)sd文生圖功能詳解(下)
AI 繪畫Stable Diffusion 研究(六)sd提示詞插件
AI 繪畫Stable Diffusion 研究(七) 一文讀懂 Stable Diffusion 工作原理
AI 繪畫Stable Diffusion 研究(八)sd采樣方法詳解
為了讓大家更直觀的了解圖生圖功能,這里以幾個實用價值比較高的案例來介紹圖生圖功能到底是干嘛的,能做什么事情?
-
第一個案例 老照片高清修復放大
-
第二個案例 精美二維碼的制作
-
第三個案例 美女換裝
這里以案例穿插知識點說明的方式進行講解。
各位朋友,可以根據(jù)我的步驟一邊進行實操,一邊進行理論知識的學習,這樣能提高學習效率。
老照片高清修復放大案例
第一步,我們在修復照片之前,需要先進行設(shè)置
設(shè)置->面部修復
- 勾選FGPGAN 選項
- codeFromer 權(quán)重設(shè)置為1
- 勾選處理完成后,將面部修復模型從顯存卸載到內(nèi)存
- 保存設(shè)置
- 重載前端
第二步,切換到圖生圖界面
第三步,選擇需要修復的照片
-
切換到局部重繪標簽頁面
-
將需要修復的圖片拖入圖片上傳區(qū)域
第四步,選擇縮放模式
在選擇縮放模式前,我們現(xiàn)來看看縮放模式的知識點,四個縮放模式有什么區(qū)別:
-
僅調(diào)整大小
圖片會直接縮放拉伸,例如,尺寸從512x512 調(diào)整為768x512 , 如圖
-
裁剪后縮放
例如,尺寸從512x512 調(diào)整為400x512 , 選擇此模式后,圖片寬度內(nèi)容會被裁剪掉,如圖:
-
縮放后填充空白
例如,尺寸從512x512 調(diào)整為768x512 , 選擇此模式后,圖片寬度方向會以相近的內(nèi)容自動填充,如圖:
- 調(diào)整大小(潛空間放大)
這種模式和第一種模式比較相似,但是也有區(qū)別。
第一種模式,是在圖片生成后被縮放。
而這種模式,是圖片生成前,在潛空間內(nèi)先進行縮放,這種縮放,每次出圖的效果不太一樣,有微小的差別。
例如,尺寸從512x512 調(diào)整為768x512:
所以,可根據(jù)自己的需求進行縮放模式的選擇。
這里,我們之間選擇第一種縮放模式。
第五步,選擇采樣方法和迭代步數(shù)
采樣方法,在前面也有詳細介紹,感興趣的朋友可以前往查看:
AI 繪畫Stable Diffusion 研究(八)sd采樣方法詳解
這里貼一下我的選擇建議:
- 如果想快速生成質(zhì)量不錯的圖片,建議選擇 DPM++ 2M Karras (20 -30步) 、UNIPC (15-25步)
- 如果想要高質(zhì)量的圖,不關(guān)心重現(xiàn)性,建議選擇 DPM++ SDE Karras (10-15步 較慢) ,DDIM(10-15步 較快)
- 如果想要簡單的圖,建議選擇 Euler,Heun(可以減少步驟以節(jié)省時間)
- 如果想要穩(wěn)定可重現(xiàn)的圖像,請避免選擇任何祖先采樣器(名字里面帶a或SDE)
- 相反,如果想要每次生成不一樣的圖像,可以選擇不收斂的祖先采樣器(名字里面帶a或SDE)
這里我們選擇 DPM++ 2M Karras (28步)
第六步、面部修復選擇
在選擇面部修復相關(guān)設(shè)置之前,我們先來介紹一下面部修復相關(guān)的知識點。
面部修復有兩種方式,一種重繪尺寸倍數(shù),一種是重繪尺寸。
- 重繪尺寸
我們可以點擊“三角形”按鈕 , 將自動獲取到原圖的尺寸
- 重繪尺寸倍數(shù)
按照倍數(shù)來,可根據(jù)自己的需求,進行選擇,例如: 1倍、2倍 、3倍
在這個案例中,我們直接選擇按原圖的重繪尺寸,倍數(shù)選擇1。
-
重繪幅度
假如把重繪幅度設(shè)置為0,則表示AI 什么都不會做,保持原圖。
假如把重繪幅度設(shè)置為1,則表示AI 完全自由發(fā)揮,產(chǎn)生的圖片跟原圖關(guān)聯(lián)性就很小。
因為這里我們要做照片的高清修復,所以這里不需要AI 去重繪 ,設(shè)置為0 。
第七步、點擊生成
效果如下:
可以看到效果并不明顯,并沒有達到預期。這是因為在上述步驟中,只處理了面部細節(jié),對其他部分并未進行處理,那么此時我們還需要進行后期處理。
第八步、后期處理
我們將生成好的圖像,點擊“發(fā)送到后期處理”按鈕,切換到后期處理頁面。
縮放比例,選擇:1
放大算法選擇:SwinIR_4x
生成效果如下:
根據(jù)對比圖,我們可以看到,面部細節(jié)以及發(fā)色、背景都做了高清處理。
如果你對生成的圖像還不滿意,那么我再告訴你一個圖像高清終極大法,相信高清修復后的圖像你絕對沒話說。
請繼續(xù)往下看。
第九步、圖像高清終極大法
圖像高清終極大法究竟是什么呢?那就是使用ConctrolNet title 進行控制圖像效果。
相信閱讀過 AI 繪畫Stable Diffusion 研究(二)sd模型ControlNet1.1 介紹與安裝 這篇文章的朋友應(yīng)該有印象。
這里在介紹 ConctrolNet 新增的 Tile 模型時,曾經(jīng)說到過:Tile 模型對于圖片高清修復、提升細節(jié)、根據(jù)畫面自動推斷內(nèi)容有著很好效果,大家還記得嗎?
好,廢話不多說,直接上操作步驟:
(1)、首先切換到圖生圖界面,并上傳需要修復的圖片
(2)、選擇縮放模式、采樣方法 、開啟面部修復
(3)、啟用ControlNet ,并選擇需要控制的圖片
(4)、重點來了
- 控制類型: 選擇title 分塊
- 預處理器選擇:title_resample
- 模型選擇:control_v11fle_sd15_title
(5)、點擊生成
對比效果如下:
對這個高清和細節(jié)修復效果,你是否還滿意?
當然做老照片高清修復的方法網(wǎng)絡(luò)上也有很多,這里還是著重介紹圖生圖的功能。文章來源:http://www.zghlxwxcb.cn/news/detail-658115.html
好了,我們的第一個圖生圖的功能案例就到此結(jié)束。文章來源地址http://www.zghlxwxcb.cn/news/detail-658115.html
到了這里,關(guān)于AI 繪畫Stable Diffusion 研究(九)sd圖生圖功能詳解-老照片高清修復放大的文章就介紹完了。如果您還想了解更多內(nèi)容,請在右上角搜索TOY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章,希望大家以后多多支持TOY模板網(wǎng)!