大家好，我是風(fēng)雨無阻。
前一篇，我們詳細(xì)介紹了使用 SadTlaker制作數(shù)字人視頻案例，感興趣的朋友請前往查看:AI 繪畫Stable Diffusion 研究（十三）SD數(shù)字人制作工具SadTlaker使用教程。
對于沒有安裝 SadTlaker 插件的朋友，可以查看這篇文章：AI 繪畫Stable Diffusion 研究（十二）SD數(shù)字人制作工具SadTlaker插件安裝教程 。
想必用過 SadTlaker 的朋友都知道，目前使用 SadTlaker插件制作數(shù)字人說話的視頻，有兩個(gè)不太理想的地方：
（1）、 生成視頻消耗的時(shí)間比較長。尤其是顯卡和顯存比較低的朋友，想要制作一個(gè)長時(shí)間的視頻，效率更低。
筆者親測：使用3060 12G顯卡，制作一段15s 左右的視頻，需要10分鐘左右。
（2）、目前的SadTlaker 圖片人物只能使用正面照，這樣給人的感覺比較突兀。
那有沒有其他方法制作數(shù)字人視頻，既能達(dá)到讓數(shù)字人張嘴說話的效果， 效率又更高，還可以使用非正面圖的方式呢？
答案是有的，那就是今天的主題： SD 圖生圖制作人物張嘴說話圖+剪映制作說話視頻。
一、SD制作人物張嘴說話圖
1、切換到SD 圖生圖->局部重繪界面 ，上傳一張人物圖片
2、反推正向提示詞
3、改寫正向提示詞，讓人物張嘴
沒安裝提示詞插件的朋友，請查看這篇文章AI 繪畫Stable Diffusion 研究（六）sd提示詞插件，有詳細(xì)安裝步驟。
（1）、我們使用提示詞插件， 在提示詞處，先輸入中文： 張嘴
提示詞插件會(huì)自動(dòng)將中文轉(zhuǎn)換英文提示詞。
如圖：
（2）、為了讓人物張嘴效果更明顯，不被sd 忽略，我們需要增加張嘴提示詞的權(quán)重
選擇張嘴提示詞， 會(huì)彈出權(quán)重操作按鈕，然后我們點(diǎn)擊三次，增加權(quán)重圖標(biāo)按鈕，此時(shí)提示詞輸入框內(nèi)會(huì)自動(dòng)增加提示詞的權(quán)重。
如圖：
（3）、涂選重繪區(qū)域
在局部重繪界面，右側(cè)選擇畫筆，ctrl+鼠標(biāo)滾輪可調(diào)整畫筆粗細(xì)。
（4）、調(diào)整重繪尺寸
（5）、啟用controlnet ，保存人物姿勢不變
- 啟用controlnet
- 控制類型選擇：openpose
- 預(yù)處理器：openpose_full
- 模型：control_v11p_sd15_openpose
(6)、點(diǎn)擊生成，即可獲得人物張嘴的圖片
對比圖如下：
上面我們已經(jīng)獲得了人物張嘴的圖片，那么接下來，我們使用剪映，加上配音和字幕，即可制作人物開口說話視頻了。
二、剪映制作人物開口說話視頻
1、準(zhǔn)備工作
-
安裝剪映，具體的安裝步驟這里就不再細(xì)說，很簡單，請自行安裝。
-
準(zhǔn)備好人物張嘴和閉嘴的兩張圖
-
準(zhǔn)備好音頻文件
2、打開剪映點(diǎn)擊開始制作
3、導(dǎo)入音頻和圖片
如圖：
qyDT-1692773049806)(assets/image-20230823003231110.png)]
4、將音頻拖入下方音頻軌道
5、生成字幕
依次點(diǎn)擊菜單欄上“文本”按鈕，再點(diǎn)擊左側(cè)“智能字幕”按鈕，接著點(diǎn)擊“開始識(shí)別”按鈕，生成字幕
字幕生成如下：
6、將圖片拖入軌道，然后切換嘴型
（1）、怎么切換嘴型，使其看上去像說話的效果呢？
用過剪映的朋友肯定知道，剪映 1s 是30幀 。
那么正常人說話，大約1s 5 -6 個(gè)字。
因此我們可以計(jì)算出來大概 5幀 一個(gè)嘴型。
因此我們先使用閉嘴的圖，然后在5幀的地方，切換張嘴的圖即可實(shí)現(xiàn)。
（2）、制作步驟
-
step 1: 將張嘴的圖和閉嘴的圖分別導(dǎo)入到圖片兩個(gè)軌道上
-
step 2:將右側(cè)軌道縮放拖到最右側(cè)，可以清晰看見軌道上的幀數(shù) ，如1f \2f\4f\6f
如圖：
step 3: 將定位線移到 5幀處，然后點(diǎn)擊分割按鈕，將張嘴和閉嘴圖都分割開
如下：
step 4:處理閉嘴的圖， 分割后，我們刪除，前5幀，不用的閉嘴圖
如下：
step 5: 繼續(xù)往后數(shù)5幀，再分割
step 6: 刪除張嘴、閉嘴圖 多余的部分
step 7: 將張嘴、閉嘴拖入同一軌道，并且打組
選中兩個(gè)片段，然后鼠標(biāo)右鍵，新建復(fù)合片段，打組
現(xiàn)在的效果，就是閉嘴、張嘴的一個(gè)片段 。
打組后如圖：
step 8: 復(fù)制粘貼多個(gè)片段，直到一句說完話為止
然后將圖片末尾和字幕對齊。
如圖：
step 9: 沒說話的時(shí)候，使用閉嘴的圖
注意：將圖片末尾和空白處末尾對齊
如下：
step 10: 繼續(xù)處理后面說話的部分， 重復(fù)步驟step 8，直到每句話處理完畢
step 11: 調(diào)整視頻比例，9:16 再導(dǎo)出視頻
右上角導(dǎo)出按鈕，導(dǎo)出即可。
好了，這個(gè)視頻制作就到此結(jié)束，看看效果吧：
SD 圖生圖+剪映制作人物說話視頻
說實(shí)話，這個(gè)視頻只是張嘴閉嘴的效果，沒有臉部表情變化，確實(shí)顯得比較生硬。文章來源：http://www.zghlxwxcb.cn/news/detail-675389.html
不過這里重點(diǎn)在于介紹制作思路和剪輯方法， 對于感興趣的朋友可以嘗試玩一下。文章來源地址http://www.zghlxwxcb.cn/news/detail-675389.html
到了這里，關(guān)于AI 繪畫Stable Diffusion 研究（十四）SD 圖生圖+剪映制作人物說話視頻的文章就介紹完了。如果您還想了解更多內(nèi)容，請?jiān)谟疑辖撬阉鱐OY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章，希望大家以后多多支持TOY模板網(wǎng)！
