AI轉(zhuǎn)繪一鍵成片工具介紹
今天給大家介紹一款我自用的AI轉(zhuǎn)繪工具:Video2Anime。我的視頻投稿幾乎都是借助這款工具來完成的。相比其他轉(zhuǎn)繪工具,它最大特點(diǎn)是:傻瓜操作,一鍵成片。效果呢可以瀏覽一下我的投稿,或者感興趣的自己下載使用實(shí)驗(yàn)一下。下面我就告訴大家它如何使用。
相關(guān)視頻:

第一步:安裝插件
插件地址:https://github.com/gagaprince/sd-webui-video2anime.git?
可以使用webui的擴(kuò)展安裝,也可以下載下來拋進(jìn)webui的extensions目錄中,然后重啟webui
在文生圖和圖生圖界面下面出現(xiàn)如下截圖 就說明安裝好了

第二步:物料準(zhǔn)備
要轉(zhuǎn)繪的視頻:

大模型和必要的lora模型:比如我這里使用麥橘寫實(shí)v6和我常用的云韻lora ,如果你想做動(dòng)漫風(fēng)格可以選擇動(dòng)漫大模型和lora


這些物料的準(zhǔn)備就不過多贅述了,應(yīng)該都是比較基礎(chǔ)的,如果你還不能熟練操作SD的圖生圖,可以先在站內(nèi)學(xué)習(xí)一下。
第三步:設(shè)置基礎(chǔ)圖生圖操作
大模型選取麥橘寫實(shí)v6
正常圖生圖參數(shù)設(shè)置(lora選擇你自己常用的就行)
正向提示詞(可以使用你常用的詞):ultra realistic 8k cg,picture-perfect face,flawless,clean,masterpiece,professional artwork,famous artwork,fashion girl,((realistic)),1girl,solo,long_hair,breasts,looking_at_viewer,black_hair,dress,bow,cleavage,medium_breasts,hair_bow,necklace,white_dress,lips, <lora:add_detail:0.5>, <lora:SD1.5泛光調(diào)節(jié)_v1.0:0.4>,? ?<lora:811yx2:0.7>
反向提示詞:(worst quality, low quality:1.3), logo, watermark, signature, bad anatomy, bad hands, text, error, missing fingers, extra digit, fewer digits, cropped, worst quality, low quality, normal quality, jpeg artifacts, signature, watermark, username, blurry, lowres, bad anatomy, bad hands, text, error, extra digit, fewer digits, cropped, worst quality, low quality, normal quality, jpeg artifacts, signature, watermark, username, blurry, ugly,pregnant,vore,duplicate,morbid,mut ilated,tran nsexual, hermaphrodite,long neck,mutated hands,poorly drawn hands,poorly drawn face,mutation,deformed,blurry,bad anatomy,bad proportions,malformed limbs,extra limbs,cloned face,disfigured,gross proportions, (((missing arms))),(((missing legs))), (((extra arms))),(((extra legs))),pubic hair, plump,bad legs,error legs,username,blurry,((nsfw)),((cleavage)),((nipple))
貼圖:截取一張視頻圖片即可
縮放模式:裁剪后縮放
迭代步數(shù):動(dòng)漫風(fēng)格設(shè)置為25-30,真實(shí)風(fēng)格設(shè)置為45-55
采樣方法:追求速度可以選Euler a,也可以嘗試其他采樣
重繪尺寸:可以根據(jù)視頻尺寸和顯存自定義,我正常使用豎版720*1280
引導(dǎo)系數(shù):6-8之間都可以
重繪幅度:追求高重繪和畫面變化的可以選0.8以上,推薦Euler a填寫0.4-0.6,只想換臉可以填寫0.3-0.4,我一般會(huì)選高重繪,可以根據(jù)自己需求出圖看效果后確定
開啟Adetailer:如果你的人物面部占比非常低,建議開啟,不建議寫Adetail提示詞,原因下文會(huì)講
controlnet:開啟兩個(gè),分別選擇lineart和tile,lineart權(quán)重真人設(shè)置高一點(diǎn),動(dòng)漫可以設(shè)置低一點(diǎn),模型可以根據(jù)實(shí)驗(yàn)效果來確定,tile選擇固定顏色,權(quán)重0.5
以上設(shè)置可以參考下圖:





可以根據(jù)生圖效果調(diào)整參數(shù),確認(rèn)沒問題后進(jìn)行接下來video2anime的配置
第四步:video2anime的配置

點(diǎn)擊啟用
拖拽單個(gè)視頻到插件中,或者想要批量視頻轉(zhuǎn)換的可以填入視頻目錄,二選一如果都選了以批量為主
轉(zhuǎn)換方式:有兩個(gè)選項(xiàng),多幀渲染 & 關(guān)鍵幀渲染
多幀渲染是全序列轉(zhuǎn)繪然后合成,類似mov2mov,這種方式可以配合下面的抽幀參數(shù)來減少轉(zhuǎn)繪的總幀數(shù)來縮短時(shí)間,當(dāng)然我更推薦關(guān)鍵幀渲染,因?yàn)樗€(wěn)定且快速
關(guān)鍵幀渲染是挑選畫面改變較大的圖片作為轉(zhuǎn)繪幀,中間幀根據(jù)關(guān)鍵幀的引導(dǎo)映射進(jìn)行生成(其實(shí)底層是ebs,想要了解ebs的同學(xué)可以去站內(nèi)搜索,當(dāng)然我后面也會(huì)出專欄來分享一下我理解的ebs)
關(guān)鍵幀配置:
最小關(guān)鍵幀:關(guān)鍵幀的最小間隔比如設(shè)置為10,則程序選擇關(guān)鍵幀的時(shí)候會(huì)至少保持10幀的間隔
最大關(guān)鍵幀:參考最小關(guān)鍵幀
關(guān)鍵幀閾值:當(dāng)前幀與上一個(gè)關(guān)鍵幀差異超過此閾值時(shí)會(huì)將當(dāng)前幀選為關(guān)鍵幀
推薦設(shè)置:真人:7,14,35; 動(dòng)漫:5,8,20;當(dāng)然你也可以自己嘗試
啟用放縮至指定寬高(重要):因?yàn)樯厦嫖覀冊O(shè)置的參數(shù)是720*1280,所以可以在這里設(shè)置一個(gè)輸出的像素,會(huì)調(diào)用放大算法來放到至更高分辨率,用來導(dǎo)出更加精細(xì)的視頻
目標(biāo)寬度:輸出的視頻寬度,這里我設(shè)置1080
目標(biāo)高度:輸出的視頻高度,這里設(shè)置1920
放大算法:我這里選 R-ESRGAN 4x+
以上設(shè)置可以保證我輸出1080P的視頻
是否啟用反推提示詞:針對(duì)每張圖片進(jìn)行提示詞反推,更加精準(zhǔn)的控制畫面,建議開啟
反推提示詞閾值:建議? 0.35 值越高,條件越苛刻
附加正向提示詞:因?yàn)榉赐铺崾驹~只會(huì)返回當(dāng)前圖片的描述,那么針對(duì)風(fēng)格,質(zhì)量,lora等相關(guān)的提示詞需要在這里描述,我這里填寫的是:ultra realistic 8k cg,picture-perfect face,flawless,clean,masterpiece,professional artwork,famous artwork,fashion girl,((realistic)), <lora:add_detail:0.5>, <lora:SD1.5泛光調(diào)節(jié)_v1.0:0.4>,<lora:811yx2:0.7>,
其實(shí)就是上文的正向提示詞去除畫面描述剩下的詞填寫在這里
去背景模式:推薦“正?!本涂梢?,其他的選項(xiàng)你可以自行嘗試
跳幀分子:針對(duì)多幀渲染方式的,此處關(guān)鍵幀配置是不會(huì)生效的,可以自己嘗試
最大轉(zhuǎn)換幀數(shù):如果你第一次使用此插件,建議設(shè)置為30先生成30幀視頻來測試一下,總數(shù)30幀關(guān)鍵幀是4-5幀也就5分鐘左右,測試沒問題后調(diào)成-1進(jìn)行全視頻轉(zhuǎn)換
第五步:開始燒顯卡
點(diǎn)擊右上角生成按鈕,開始跑圖,我的經(jīng)驗(yàn)是10s的視頻大概300幀大概會(huì)消耗40-60分鐘。
最后完成后,會(huì)在webui的outputs/m2a-videos目錄下找到你的轉(zhuǎn)繪視頻。
視頻效果如下:(等我投稿了再放上來)
結(jié)尾:
這是我第一次開發(fā)webui插件,結(jié)合我對(duì)視頻轉(zhuǎn)繪的理解,已經(jīng)將非常多的操作在插件內(nèi)部封裝了,再也不需要為了做一個(gè)轉(zhuǎn)繪視頻安裝各種非必要的工具,甚至被站內(nèi)某些UP割韭菜,真的只需要一個(gè)插件就可以。如果你在使用過程中遇到了問題,可以留言給我,后續(xù)我會(huì)制作一個(gè)視頻投稿來演示效果,也會(huì)組建一個(gè)技術(shù)交流群。
最后求個(gè)關(guān)注喲!