(資料圖)

近日，網(wǎng)易互娛AI Lab論文《基于單張照片的實(shí)時(shí)高分辨率人臉重演算法》（《Face2Faceρ: Real-Time High-Resolution One-Shot Face Reenactment》）入選了人工智能國際頂會(huì)ECCV 2022。該論文創(chuàng)新性地提出了一種人臉重演的新方法，在保證生成質(zhì)量的同時(shí)，最高可將算法速度最高提升至原來的9倍。

ECCV是計(jì)算機(jī)視覺領(lǐng)域內(nèi)首屈一指的頂尖國際研討會(huì)，每兩年舉辦一次，每一屆都吸引了皆來自世界各地的頂尖專家學(xué)者參與。本屆論文總投稿數(shù)達(dá)到了5803篇，再創(chuàng)歷史新高，堪稱“史上最火ECCV”。本屆大會(huì)最終入選論文數(shù)量為1650篇，接收率僅為28%，不足三成，可見其競(jìng)爭(zhēng)之激烈、難度之高。

在網(wǎng)易互娛AI Lab入選的本篇論文中，研究團(tuán)隊(duì)創(chuàng)新地提出了一種能夠基于單幅圖片的實(shí)時(shí)高分辨率人臉重演算法，用于將驅(qū)動(dòng)人臉說話時(shí)的面部表情和頭部姿態(tài)實(shí)時(shí)遷移至靜態(tài)圖像的人臉上，從而實(shí)現(xiàn)對(duì)姿態(tài)和表情的“復(fù)制粘貼”。在生成效果方面，該方案相比目前常見的基于形變（warp-based）或直接合成（direct synthesis）的方法，無論是對(duì)于編輯前后的人臉身份保持、還是對(duì)于頭部大姿態(tài)改變時(shí)的生成結(jié)果，都能取得甚至超越目前的已有方案；而在運(yùn)行效率方面，該方案在顯著降低算法復(fù)雜度的基礎(chǔ)上，將速度最高提升至目前方案的9倍，大大降低了內(nèi)存開銷和生成速度。

人臉重演效果對(duì)比

近年來，人臉重演技術(shù)因其在媒體、娛樂、虛擬現(xiàn)實(shí)等方面的應(yīng)用前景而備受關(guān)注，其最直接的幫助就是能夠幫助提升音視頻的制作效率。去年，網(wǎng)易互娛AI Lab也將該技術(shù)成功應(yīng)用于AI合成新聞主播制作，并與《羊城晚報(bào)》攜手推出了“羊小晚”和“羊小派”兩位虛擬新聞主播，幫助自動(dòng)生成新聞播報(bào)視頻，以降低制作成本、提升制作效率，促進(jìn)新聞生產(chǎn)的智慧變革。

網(wǎng)易互娛AI Lab成立于2017年，隸屬于網(wǎng)易互動(dòng)娛樂事業(yè)群，是游戲行業(yè)領(lǐng)先的人工智能實(shí)驗(yàn)室。除了人臉重演技術(shù)，團(tuán)隊(duì)在內(nèi)容自動(dòng)化生成方面還擁有一系列前沿的AI技術(shù)，如面部動(dòng)捕、視頻動(dòng)捕、音樂自動(dòng)生成舞蹈等，并已成功落地于《一夢(mèng)江湖》、《第五人格》等多款熱門游戲和項(xiàng)目中。未來，網(wǎng)易互娛AI Lab將繼續(xù)持續(xù)挖掘AI技術(shù)的潛在價(jià)值、開拓更廣泛的應(yīng)用場(chǎng)景，幫助推動(dòng)物理世界的全面數(shù)字化轉(zhuǎn)型。

關(guān)鍵詞： 網(wǎng)易互娛