Diff-svc語音轉(zhuǎn)換技術(shù)訓(xùn)練全流程概要
溫馨提示:
本專欄不提倡對任何非授權(quán)數(shù)據(jù)進行訓(xùn)練,若您務(wù)必確保您所訓(xùn)練的聲音數(shù)據(jù)得到了相關(guān)授權(quán)。
本技術(shù)需要一定計算機基礎(chǔ)和基礎(chǔ)解決問題能力(搜索引擎),不建議沒接觸過的朋友嘗試
一.了解:
Q:什么是SVC,我可以用它做什么?
A:不談過多的技術(shù)術(shù)語,Diff-svc的實質(zhì)就是一個非實時的變聲器:
Diff-svc需要模型來將A的音色轉(zhuǎn)換為B的音色。相對于傳統(tǒng)變聲器,diff-svc可以提供更高質(zhì)量的合成效果。根據(jù)diff-svc的功能,可以使用您喜歡的任何人的聲音數(shù)據(jù)進行訓(xùn)練并二創(chuàng)(前提需要聲音數(shù)據(jù)得到明確授權(quán))
二.開始入門并實踐:
Q:我想入門Diff-svc,我需要了解什么?
A:您需要了解以下內(nèi)容:
1.您需要先閱讀項目須知:
項目須知:https://www.yuque.com/shaohuojie/svc-guidebook/cm77fivddaymi8u8
2.您需要有一定的linux與cmd的操作基礎(chǔ),同時對python有一定的了解:
參考教程請自行搜索
3.您需要知曉一部分專業(yè)術(shù)語(又叫做黑話),可以幫助您更好的與他人進行技術(shù)交流:
參考教程:https://www.yuque.com/shaohuojie/svc-guidebook/aldqrp33n2l8ngzi
4.您需要知道一些模型訓(xùn)練的常識:
模型訓(xùn)練多久合適:https://www.yuque.com/shaohuojie/svc-guidebook/aoxgtfgf6u0tqv8w
Q:我剛?cè)腴Tdiff-svc,想要自己制作某個聲音模型,我需要怎么做?
A:您需要學(xué)習(xí)Diff-svc從預(yù)處理到推理的全過程:
1.您需要核實您的電腦配置是否可以達到要求:
配置要求:https://www.yuque.com/shaohuojie/svc-guidebook/ugea7tgipxsm3s3v
2.您需要制作目標(biāo)音色的數(shù)據(jù)集:
數(shù)據(jù)集制作教程:https://www.yuque.com/shaohuojie/svc-guidebook/pa322rrwt0xt53sn
3.若您的電腦配置可以達到訓(xùn)練要求,您可以選擇進行本地相關(guān)操作;如果達不到要求, 您需要進行云端相關(guān)操作:
【本地相關(guān)操作】
step1:環(huán)境配置:https://www.yuque.com/shaohuojie/svc-guidebook/ktl2rwhrckushf5m
step2:本地預(yù)處理:https://www.yuque.com/shaohuojie/svc-guidebook/yus02ev6zxn4ddhq
step3:本地訓(xùn)練:https://www.yuque.com/shaohuojie/svc-guidebook/mf5ywpl3fkn199yu
step4:本地訓(xùn)練可視化:https://www.yuque.com/shaohuojie/svc-guidebook/ecftvccvsgeh07hc
【云端相關(guān)操作】
首先您需要選擇一個合適的云服務(wù)廠商:
1.九天畢昇:
優(yōu)點:免費
缺點:需要搶顯卡資源,而且不好搶
2.AutoDL:
優(yōu)點:顯卡資源豐富,部署方便
缺點:收費
若選擇九天畢昇,請參考以下教程:
step1:環(huán)境配置:https://www.yuque.com/shaohuojie/svc-guidebook/qozrznbtkslg6rgo
step2:云端預(yù)處理:https://www.yuque.com/shaohuojie/svc-guidebook/grbgnl7xwehd9x33
step3:云端訓(xùn)練:https://www.yuque.com/shaohuojie/svc-guidebook/rn71br2f720hghkf
step4:云端訓(xùn)練可視化:https://www.yuque.com/shaohuojie/svc-guidebook/gggg7dqcvlhgt80l
若選擇AutoDL,請參考以下教程:
step1:環(huán)境配置:https://www.yuque.com/shaohuojie/svc-guidebook/gi8gn13zkmgqvvdv
step2:云端預(yù)處理:https://www.yuque.com/shaohuojie/svc-guidebook/rckyzbffv5fmwdd1
step3:云端訓(xùn)練:https://www.yuque.com/shaohuojie/svc-guidebook/rckyzbffv5fmwdd1
step4:云端訓(xùn)練可視化:https://www.yuque.com/shaohuojie/svc-guidebook/lfa4h9x6mp5wl7fv
4.訓(xùn)練完成之后,您需要進行推理來合成聲音
本地推理參考教程:https://www.yuque.com/shaohuojie/svc-guidebook/hwgiy8q5nm3lz0c5
云端推理參考教程:https://www.yuque.com/shaohuojie/svc-guidebook/cdcdfdhpigs5s62k
Q:我認(rèn)為我自己無法訓(xùn)練模型,但是也想利用diff-svc制作二創(chuàng)作品,我需要怎么做?
A:您僅需要學(xué)習(xí)如何進行推理以及尋找公開模型進行推理:
1.您需要先確定您的電腦配置是否可以達到要求:
?配置要求:https://www.yuque.com/shaohuojie/svc-guidebook/ugea7tgipxsm3s3v
2. 確定完電腦配置之后,若您的電腦配置可以達到要求,您可以選擇進行本地推理;如果達不到要求,您需要 進行云端推理:
?本地推理參考教程:https://www.yuque.com/shaohuojie/svc-guidebook/hwgiy8q5nm3lz0c5
Q:如果發(fā)生了報錯,我需要怎么做?
A:請您先自行搜索百度,bing,詢問ChatGPT;若實在無法解決,可以在群內(nèi)提供完整清晰的教程對應(yīng)截圖和報錯截圖并詳細(xì)具體的提出您的報錯,由群內(nèi)的群友為您解答,
讓我們共同構(gòu)建一個良好的技術(shù)交流平臺!