EyelashNet 即將登上 SIGGRAPH ASIA 2021 舞臺(tái)

NExT Studios與「浙江大學(xué)CAD & CG國(guó)家重點(diǎn)實(shí)驗(yàn)室」金小剛教授團(tuán)隊(duì)合作,經(jīng)過一年多的試驗(yàn)探索,在高保真數(shù)字人的制作領(lǐng)域,提出了一個(gè)高精度眼瞼幾何重建的解決方案。其研究成果——EyelashNet: A Dataset and A Baseline Method for Eyelash Matting——目前已被SIGGRAPH Asia 2021大會(huì)技術(shù)論文 (Technical Papers) 環(huán)節(jié)接收。
高保真數(shù)字人的制作,需要每個(gè)部分的準(zhǔn)確掃描與重建,才能做到既絲毫畢現(xiàn),又真假難辨,進(jìn)一步突破真實(shí)與虛幻的邊界。這其中,“睫毛重建“是一個(gè)很容易被忽略、卻又非常重要的環(huán)節(jié)。用傳統(tǒng)方法或嚴(yán)重依賴模型師費(fèi)時(shí)費(fèi)力的手動(dòng)修復(fù),用自動(dòng)化算法或準(zhǔn)確性有限,而EyelashNet能很好地兼顧解決問題。

EyelashNet包含一個(gè)大規(guī)模睫毛摳圖數(shù)據(jù)集和一個(gè)睫毛摳圖模型。在基于多視角的三維人臉重建中采用EyelashNet,可摳取多視角圖像中的睫毛,消除睫毛幾何對(duì)人臉其它區(qū)域的干擾,提升人臉參數(shù)化模型在眼瞼區(qū)域的重建質(zhì)量。同時(shí)也極大地節(jié)省動(dòng)畫師手工修復(fù)眼部幾何所用時(shí)間,顯著提升個(gè)性化人臉重建的質(zhì)量和效率。
在12月7日舉辦的SIGGRAPH Asia 2021前置線上會(huì)議中,我們將詳細(xì)介紹EyelashNet的技術(shù)細(xì)節(jié),包括數(shù)據(jù)集的采集與構(gòu)建、深度學(xué)習(xí)模型的訓(xùn)練和實(shí)際應(yīng)用效果。微見真章,敬請(qǐng)期待!
浙江大學(xué)計(jì)算機(jī)輔助設(shè)計(jì)與圖形學(xué)國(guó)家重點(diǎn)實(shí)驗(yàn)室??成立于1992年,是國(guó)際一流的計(jì)算機(jī)圖形實(shí)驗(yàn)室,為國(guó)家“七五”計(jì)劃建設(shè)項(xiàng)目。主要從事計(jì)算機(jī)輔助設(shè)計(jì)、計(jì)算機(jī)圖形學(xué)的基礎(chǔ)理論、算法及相關(guān)應(yīng)用研究。近二十年來(lái),實(shí)驗(yàn)室依托浙江大學(xué)計(jì)算機(jī)、數(shù)學(xué)、機(jī)械等學(xué)科,作為牽頭單位先后承擔(dān)了一批國(guó)家級(jí)重大科研項(xiàng)目和國(guó)際合作項(xiàng)目,在計(jì)算機(jī)輔助設(shè)計(jì)與圖形學(xué)的基礎(chǔ)研究和系統(tǒng)集成等方面取得了一批重要成果。
金小剛教授??教授、博士生導(dǎo)師,來(lái)自浙江大學(xué)計(jì)算機(jī)科學(xué)與技術(shù)學(xué)院。是“十三五”國(guó)家重點(diǎn)研發(fā)計(jì)劃首席科學(xué)家,浙江大學(xué)-騰訊游戲智能圖形創(chuàng)新技術(shù)聯(lián)合實(shí)驗(yàn)室主任,浙江省虛擬現(xiàn)實(shí)產(chǎn)業(yè)聯(lián)盟理事長(zhǎng),中國(guó)計(jì)算機(jī)學(xué)會(huì)虛擬現(xiàn)實(shí)與可視化專委會(huì)副主任委員,杭州錢江特聘專家。在ACM TOG (Proc. of Siggraph)、IEEE TVCG等國(guó)際重要學(xué)術(shù)刊物上發(fā)表論文140多篇,多次獲得國(guó)內(nèi)外重要獎(jiǎng)項(xiàng)。