在剛剛過去的十一國(guó)慶假期，全國(guó)國(guó)內(nèi)旅游達(dá)近5.5億人次，其中，北京、上海、杭州和武漢等地成為熱門旅游景點(diǎn)。當(dāng)游客去到東方明珠、黃鶴樓等標(biāo)志性地標(biāo)建筑時(shí)，免不了拍照打卡為旅程留下美好回憶。如何在國(guó)慶攝影大賽中突圍而出，曬出最獨(dú)特的假期打卡“游客照”？最近，就有這么一個(gè)「賽博國(guó)風(fēng)」AR短視頻玩法，備受好評(píng)。
在手機(jī)QQ的相機(jī)功能上，于國(guó)慶前后上線了東方明珠地標(biāo)、黃鶴樓、天壇和雷峰塔等多個(gè)AR短視頻模板。用戶只需要掃描這幾個(gè)地標(biāo)的照片或者實(shí)物，就能一鍵生成一條3D AR特效的地標(biāo)短視頻，例如掃描黃鶴樓，會(huì)在畫面上出現(xiàn)一只飛鶴和極具威嚴(yán)神圣之感的飛龍。
landmark AR科技實(shí)現(xiàn)「虛實(shí)結(jié)合」3D特效
這種虛實(shí)結(jié)合的3D特效，出自騰訊QQ影像中心研發(fā)的landmark AR地標(biāo)技術(shù)。其原理結(jié)合了中心自主研發(fā)的高精度三維重建和3D物體檢測(cè)及識(shí)別技術(shù)，實(shí)現(xiàn)地標(biāo)建筑物逼真穩(wěn)定的3D AR特效。
三維重建的本質(zhì)就是依賴計(jì)算機(jī)視覺算法，從一系列二維圖像中還原場(chǎng)景物體的三維信息，從而建立客觀世界的虛擬現(xiàn)實(shí)表達(dá)。3D物體檢測(cè)識(shí)別則能夠通過深度神經(jīng)網(wǎng)絡(luò)提取物體結(jié)構(gòu)及特征信息，從而使得產(chǎn)出的內(nèi)容有著更高的精確度。
QQ影像中心研發(fā)的高精度三維重建技術(shù)，使用互聯(lián)網(wǎng)上爬取的建筑物不同角度和位置的圖片及視頻，重建出地標(biāo)建筑物的厘米級(jí)精度的高完整性的全景模型，模型的大小及形狀真實(shí)建筑物高度一致，不但可以用于實(shí)現(xiàn)與真實(shí)建筑物十分貼合的AR特效，還可以用于生成真實(shí)建筑物與虛擬物體的遮擋關(guān)系，實(shí)現(xiàn)“以假亂真”的AR特效。
高精度高完整度建筑物重建算法，為逼真的ar特效打下基礎(chǔ)
QQ影像中心研發(fā)的建筑物識(shí)別檢測(cè)算法，依托積累的大量輔助訓(xùn)練數(shù)據(jù)和完善的篩選標(biāo)注清洗流程，并且采用NAS技術(shù)自動(dòng)搜索到效果最好性能最優(yōu)的算法結(jié)構(gòu)，訓(xùn)練出性能高效，識(shí)別準(zhǔn)確的檢測(cè)識(shí)別算法，為用戶提供流暢的使用體驗(yàn)。
據(jù)了解，這樣的技術(shù)，QQ影像中心已實(shí)現(xiàn)了技術(shù)流程高度模塊化、流水線化。甚至，它已然可以完成多個(gè)建筑物的并行構(gòu)筑，目前，完成一個(gè)建筑物的重建和識(shí)別僅僅需要1-2天時(shí)間，并且可并行完成多個(gè)建筑物的相關(guān)工作。
高準(zhǔn)確度高性能建筑物識(shí)別檢測(cè)算法 為用戶提供流暢使用體驗(yàn)
不同于千篇一律的游客照，QQ影像中心所研發(fā)的新玩法，能夠讓更多用戶以更多元的方法，擁抱地標(biāo)建筑和其背后的人文風(fēng)韻，也開啟傳統(tǒng)地標(biāo)的新可能。
QQ影像中心團(tuán)隊(duì)在語(yǔ)義分割、目標(biāo)檢測(cè)、分類識(shí)別、GAN生成對(duì)抗等方面的深厚技術(shù)積累，在AI生成領(lǐng)域已進(jìn)行了很多相關(guān)算法的研發(fā)和落地工作。此前，奧運(yùn)會(huì)期間，該團(tuán)隊(duì)在人體動(dòng)作遷移上所做出的熱門AI玩法——我的奧運(yùn)奪冠時(shí)刻等，也同樣帶給用戶豐富有趣的科技體驗(yàn)。
關(guān)于騰訊QQ影像中心
騰訊QQ影像中心（原騰訊光影研究室）是騰訊旗下專注于研究前沿影像處理技術(shù)的團(tuán)隊(duì)，在單目深度估計(jì)技術(shù)、語(yǔ)義分割、目標(biāo)檢測(cè)、分類識(shí)別、GAN生成對(duì)抗等方面均有深厚的技術(shù)積累。團(tuán)隊(duì)一直致力于探索泛娛樂綜合解決方案，將前沿的AI能力、先進(jìn)的玩法引擎和3D渲染技術(shù)賦能產(chǎn)品，讓視覺創(chuàng)意更多樣，音視頻編輯更智能，社交溝通更趣味。
