每個(gè)人都有一個(gè)童話(huà)夢(mèng)，童話(huà)世界的主人公通常天真、爛漫，是美好形象的象征。假如有一天，可以穿越到童話(huà)世界中，你是否躍躍欲試？近期，騰訊光影研究室出品的“童話(huà)臉”特效玩法在網(wǎng)絡(luò)上迅速走紅，不僅有李雪琴親傳童話(huà)世界基本生存須知“公主并”，更是受到辣目洋子、劉曉慶、王大陸等眾多明星青睞。作為業(yè)內(nèi)首次將GAN技術(shù)與3D卡通風(fēng)格相結(jié)合的應(yīng)用特效，“童話(huà)臉”支持用戶(hù)化身為人間芭比、在逃公主、童話(huà)王子等人物，分享在QQ小世界、微視APP、微博等社交平臺(tái)，不少用戶(hù)更是直接將變身后的童話(huà)臉設(shè)置為個(gè)人頭像。
二次元當(dāng)?shù)溃瑐€(gè)性化“童話(huà)臉”特效應(yīng)運(yùn)而生
隨著年輕用戶(hù)在社交互動(dòng)中的個(gè)性化表達(dá)需求持續(xù)增加，自帶二次元、萌元素的虛擬形象成為了用戶(hù)展示自我情緒、日常交流的新形式。基于在用戶(hù)個(gè)性化形象創(chuàng)造上的長(zhǎng)期積累，騰訊光影研究室上半年已推出2D日漫卡通畫(huà)特效，并受到廣大網(wǎng)友的一致好評(píng)。為了更好地還原用戶(hù)的面部特征以及情緒張力的表達(dá)，團(tuán)隊(duì)將五官和神態(tài)捕捉都十分靈動(dòng)的3D卡通風(fēng)格作為研發(fā)方向之一，并在權(quán)衡卡通化的趣味性和真實(shí)摹寫(xiě)的用戶(hù)體驗(yàn)后，最終打造了童話(huà)臉特效。
據(jù)團(tuán)隊(duì)介紹，童話(huà)臉風(fēng)格屬于卡通畫(huà)風(fēng)格中的一種。卡通畫(huà)里有不同分類(lèi)，如寫(xiě)實(shí)風(fēng)，卡通風(fēng)，日韓風(fēng)，歐美風(fēng)，中國(guó)風(fēng)。但在技術(shù)實(shí)現(xiàn)層面，不同的風(fēng)格意味著模型要學(xué)習(xí)紋理和形變的困難指數(shù)不一樣。其中，寫(xiě)實(shí)風(fēng)基本沒(méi)有形變，實(shí)現(xiàn)較簡(jiǎn)單生成效果也最佳；卡通風(fēng)形變較小且涉及紋理學(xué)習(xí)，存在一定的難度；Q版卡通風(fēng)形變較大并涉及風(fēng)格模型學(xué)習(xí)，難度最大。此次，“童話(huà)臉”特效便是將難度最大的Q版卡通風(fēng)得以實(shí)現(xiàn)。目前，該特效技術(shù)已應(yīng)用在QQ、微視APP等社交娛樂(lè)場(chǎng)景中，給用戶(hù)提供最直觀、新鮮的AI體驗(yàn)。
GAN技術(shù)與3D卡通風(fēng)格首次結(jié)合，左右互搏訓(xùn)練生成完美圖片
由于傳統(tǒng)的CV算法基本不可能滿(mǎn)足需求，此次童話(huà)臉特效是基于先進(jìn)的生成對(duì)抗網(wǎng)絡(luò)（GAN）算法研發(fā)而出，也是全球首家在手機(jī)上給用戶(hù)提供的實(shí)時(shí)個(gè)性化童話(huà)臉特效。具體而言，針對(duì)卡通童話(huà)臉大形變、CG質(zhì)感紋理等特點(diǎn)，團(tuán)隊(duì)在設(shè)計(jì)模型網(wǎng)絡(luò)結(jié)構(gòu)策略上，將形變和紋理區(qū)分后再進(jìn)行解耦，從而達(dá)到穩(wěn)定生成卡通童話(huà)臉的目的。同時(shí)，結(jié)合復(fù)雜的實(shí)際應(yīng)用場(chǎng)景下，更是在拍攝環(huán)境及角度、臉型妝容及濾鏡、機(jī)型性能差異等維度上持續(xù)打磨逼真效果，確保給用戶(hù)帶來(lái)愉悅、滿(mǎn)意、驚喜的體驗(yàn)。
實(shí)際上，“童話(huà)臉”特效從啟動(dòng)到上線(xiàn)僅花費(fèi)兩周時(shí)間，并保持快速的模型迭代。高效率的研發(fā)升級(jí)得益于光影研究室在新技術(shù)上的提前積累、底層技術(shù)的深度優(yōu)化和強(qiáng)大的工程能力支持。特效背后的GAN生成技術(shù)，在2020年上半年便已投入研發(fā)進(jìn)行積累，通過(guò)對(duì)一定數(shù)量的圖片進(jìn)行訓(xùn)練，便能在一周內(nèi)生成多版本模型進(jìn)行上線(xiàn)。此前刷新微視視頻特效制作量新紀(jì)錄的王者臉，以及QQ上線(xiàn)的國(guó)內(nèi)首創(chuàng)光頭特效，均是騰訊光影研究室利用生成式對(duì)抗網(wǎng)絡(luò) GAN所制造的獨(dú)特體驗(yàn)。
伴隨新技術(shù)的不斷發(fā)展和進(jìn)步，AI在社交娛樂(lè)方面的應(yīng)用也將變得更加豐富。作為騰訊旗下專(zhuān)注于探索前沿影像處理技術(shù)的團(tuán)隊(duì)，騰訊光影研究室通過(guò)酷炫的渲染能力與靈活便捷的特效玩法引擎，已賦能QQ、微視APP、全民K歌等多款產(chǎn)品。未來(lái)，團(tuán)隊(duì)也將持續(xù)探索更多場(chǎng)景的創(chuàng)意玩法，為用戶(hù)提供充滿(mǎn)趣味驚喜的社交新體驗(yàn)。
