一、安裝
1.1、安裝ffmpeg
下載地址:
解壓,配置環(huán)境變量 E:\AI\ffmpeg\bin
檢查是否安裝成功
1.2、安裝SD的 EbSynth 插件
插件地址 https://github.com/s9roll7/ebsynth_utility
報錯:ModuleNotFoundError: No module named 'extensions.ebsyynth_utility
將 目錄 ebsyynth_utility-main 改為 ebsyynth_utility.
1.3、安裝 EbSynth
從官網(wǎng)下載,解壓即可
1.4、下載背景透明工具transparent-background
Pip install transparent-background
該代碼執(zhí)行還需要依賴模型文件,如果預先現(xiàn)在則在執(zhí)行時會從google-driver中下載模型,如果網(wǎng)絡不行則會下載失敗。
模型下載地址:https://drive.google.com/uc?id=13oBl5MTVcWER3YU4fSxW3ATlVfueFQPY
1.5、安裝 TemporalKit插件
也可以在webui 的 extensions 中安裝
二、TemporalKit + EbSynth
2.1、使用TemporalKit 分割視頻
2.1.0、參數(shù)
Sides 數(shù)量決定每張圖片顯示幾張圖
Border Key Frames
2.1.1、分拆結果
input 為每一幀
2.2、使用圖生圖
填入提示詞
2.2.1、設置 ControlNet
2.2.1.1、配置第一個 為 Tile
2.2.1.2、配置第二個 為 SoftEdge
2.2.1.3、第三個配置為 depth
2.2.2、點擊生成圖片
選擇覺得好的結果圖片,記錄好種子
2.2.3、批量處理
2.2.3.1、設置批處理輸入輸出路徑
2.2.3.2、設置每個contorlnet 的 批處理輸入路徑
其他兩個輸入路徑設置一樣
然后點擊生成
報錯: 解決安裝對應 pt
結果生成到output
2.3、Ebsynth-Process
生成結果:
2.4、使用 Ebsynth 處理key, frames圖片
其他1-8的目錄同樣處理
2.5、recombine ebsynth (合并)
2.7、問題
1、一個視頻無法進行 pre-processing文章來源:http://www.zghlxwxcb.cn/news/detail-585800.html
暫時沒有解決,只有這個視頻無法處理,其他視頻正常。文章來源地址http://www.zghlxwxcb.cn/news/detail-585800.html
到了這里,關于Stable Diffusion + EbSynth + ControlNet 解決生成視頻閃爍的文章就介紹完了。如果您還想了解更多內容,請在右上角搜索TOY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關文章,希望大家以后多多支持TOY模板網(wǎng)!