在人工智能技術(shù)發(fā)展的基礎(chǔ)上，越來越多的新業(yè)態(tài)正在涌現(xiàn)。近日，百度大腦開放平臺上線視頻人臉融合產(chǎn)品，用戶可通過人臉編輯技術(shù)，定制化生成非常接近真人的虛擬人臉圖，并可高保真地替換已有視頻素材中的形象。背靠百度大腦開放平臺領(lǐng)先的圖形圖像AI技術(shù)，這一產(chǎn)品解決了廣告創(chuàng)意、互動娛樂、游戲影視等行業(yè)打造虛擬IP被高門檻要求拒之門外的痛點(diǎn)，同時又可以規(guī)避肖像權(quán)與隱私權(quán)風(fēng)險，應(yīng)用前景廣闊。
官網(wǎng)信息顯示，該產(chǎn)品可生成不同種族、年齡、性別、五官風(fēng)格、膚色等的虛擬人物形象，滿足用戶的全方位需求。最重要的是，以前視頻換臉總是伴隨侵權(quán)風(fēng)險，而該產(chǎn)品可以讓你打造專屬你本人IP的虛擬人臉，全程合法合規(guī)，可有效保障肖像權(quán)與隱私權(quán)，避免風(fēng)險。此外，網(wǎng)絡(luò)生成的形象可以定制觀賞性高的角色，以滿足虛擬廣告形象、虛擬主播形象、虛擬游戲影視形象等領(lǐng)域的高要求。
在效果上，不同場景均可以打造出觀賞性好，趣味性強(qiáng)，風(fēng)格獨(dú)一的虛擬形象，且輸出的視頻可以保持高清晰度，并消除關(guān)鍵點(diǎn)、顏色等的抖動，具有非常高的穩(wěn)定性。同時，產(chǎn)品的使用操作也相當(dāng)簡易化，無需海量素材，僅一張圖片即可實(shí)現(xiàn)視頻級別形象替換，很快就能得到結(jié)果，僅需非常低的用戶成本。
(視頻人臉融合產(chǎn)品輸出效果)
據(jù)了解，視頻人臉融合技術(shù)在實(shí)際應(yīng)用中，往往因?yàn)橐曨l畫面的復(fù)雜性，造成面容僵硬、光照條件變化、身份信息失真等問題，影響觀眾體驗(yàn)，而且傳統(tǒng)解決方案輸出效率也較低。對此，百度大腦視頻人臉融合產(chǎn)品利用極易獲取的先驗(yàn)知識，如3DMM系數(shù)，區(qū)域紋理編碼等，通過生成模型實(shí)現(xiàn)對于任意人臉的全方面編輯，涵蓋身份、姿態(tài)、表情、光照、妝容等維度，具備很大的靈活性，同時展現(xiàn)出強(qiáng)大的控制力。
(人臉形象替換示例，每列依次為換臉，換妝，光照控制效果)
為保障視頻人臉融合輸出的高質(zhì)量與高保真度，百度團(tuán)隊(duì)設(shè)計了Identity-Style Normalization Module框架，可利用身份信息和區(qū)域紋理編碼對主干生成網(wǎng)絡(luò)特征進(jìn)行調(diào)制，使得視頻源的身份和區(qū)域紋理信息得到最大化的保留，在“換臉”時讓觀眾很難分辨出差異。同時，該產(chǎn)品利用一個簡單的前向模型來實(shí)現(xiàn)，僅用單圖就能對視頻進(jìn)行換臉，數(shù)據(jù)效率更高。
此外，鑒于該方案在人臉融合技術(shù)領(lǐng)域的領(lǐng)先性，百度相關(guān)論文得到學(xué)術(shù)界肯定，被美國人工智能協(xié)會(AAAI)2021年會收錄。同時，該產(chǎn)品面向娛樂行業(yè)的相關(guān)從業(yè)人員或愛好者，用戶可在百度大腦開放平臺官網(wǎng)進(jìn)入產(chǎn)品頁面，
(視頻人臉融合技術(shù)框架)
借助這一全新產(chǎn)品，更多開發(fā)者與從業(yè)者將能夠體驗(yàn)到虛擬角色形象帶來的新潛力，延伸出更多的玩法，讓娛樂行業(yè)更智慧化。實(shí)際上，作為百度打造的新型AI技術(shù)基礎(chǔ)設(shè)施，百度大腦正通過這些技術(shù)能力與產(chǎn)品方案的輸出，在工業(yè)、農(nóng)業(yè)、教育、零售、文化娛樂、企業(yè)服務(wù)等眾多行業(yè)落地創(chuàng)新應(yīng)用和智能化升級，僅AI能力就開放了273項(xiàng)。未來百度大腦也將持續(xù)開放能力和產(chǎn)品，讓更多行業(yè)走上AI之路，發(fā)展新業(yè)態(tài)，提供新動能。
