在剛剛過去的十一國慶假期，全國國內(nèi)旅游達近5.5億人次，其中，北京、上海、杭州和武漢等地成為熱門旅游景點。當(dāng)游客去到東方明珠、黃鶴樓等標(biāo)志性地標(biāo)建筑時，免不了拍照打卡為旅程留下美好回憶。如何在國慶攝影大賽中突圍而出，曬出最獨特的假期打卡“游客照”？最近，就有這么一個「賽博國風(fēng)」AR短視頻玩法，備受好評。
在手機QQ的相機功能上，于國慶前后上線了東方明珠地標(biāo)、黃鶴樓、天壇和雷峰塔等多個AR短視頻模板。用戶只需要掃描這幾個地標(biāo)的照片或者實物，就能一鍵生成一條3D AR特效的地標(biāo)短視頻，例如掃描黃鶴樓，會在畫面上出現(xiàn)一只飛鶴和極具威嚴(yán)神圣之感的飛龍。
landmark AR科技實現(xiàn)「虛實結(jié)合」3D特效
這種虛實結(jié)合的3D特效，出自騰訊QQ影像中心研發(fā)的landmark AR地標(biāo)技術(shù)。其原理結(jié)合了中心自主研發(fā)的高精度三維重建和3D物體檢測及識別技術(shù)，實現(xiàn)地標(biāo)建筑物逼真穩(wěn)定的3D AR特效。
三維重建的本質(zhì)就是依賴計算機視覺算法，從一系列二維圖像中還原場景物體的三維信息，從而建立客觀世界的虛擬現(xiàn)實表達。3D物體檢測識別則能夠通過深度神經(jīng)網(wǎng)絡(luò)提取物體結(jié)構(gòu)及特征信息，從而使得產(chǎn)出的內(nèi)容有著更高的精確度。
QQ影像中心研發(fā)的高精度三維重建技術(shù)，使用互聯(lián)網(wǎng)上爬取的建筑物不同角度和位置的圖片及視頻，重建出地標(biāo)建筑物的厘米級精度的高完整性的全景模型，模型的大小及形狀真實建筑物高度一致，不但可以用于實現(xiàn)與真實建筑物十分貼合的AR特效，還可以用于生成真實建筑物與虛擬物體的遮擋關(guān)系，實現(xiàn)“以假亂真”的AR特效。
高精度高完整度建筑物重建算法，為逼真的ar特效打下基礎(chǔ)
QQ影像中心研發(fā)的建筑物識別檢測算法，依托積累的大量輔助訓(xùn)練數(shù)據(jù)和完善的篩選標(biāo)注清洗流程，并且采用NAS技術(shù)自動搜索到效果最好性能最優(yōu)的算法結(jié)構(gòu)，訓(xùn)練出性能高效，識別準(zhǔn)確的檢測識別算法，為用戶提供流暢的使用體驗。
據(jù)了解，這樣的技術(shù)，QQ影像中心已實現(xiàn)了技術(shù)流程高度模塊化、流水線化。甚至，它已然可以完成多個建筑物的并行構(gòu)筑，目前，完成一個建筑物的重建和識別僅僅需要1-2天時間，并且可并行完成多個建筑物的相關(guān)工作。
高準(zhǔn)確度高性能建筑物識別檢測算法 為用戶提供流暢使用體驗
不同于千篇一律的游客照，QQ影像中心所研發(fā)的新玩法，能夠讓更多用戶以更多元的方法，擁抱地標(biāo)建筑和其背后的人文風(fēng)韻，也開啟傳統(tǒng)地標(biāo)的新可能。
QQ影像中心團隊在語義分割、目標(biāo)檢測、分類識別、GAN生成對抗等方面的深厚技術(shù)積累，在AI生成領(lǐng)域已進行了很多相關(guān)算法的研發(fā)和落地工作。此前，奧運會期間，該團隊在人體動作遷移上所做出的熱門AI玩法——我的奧運奪冠時刻等，也同樣帶給用戶豐富有趣的科技體驗。
關(guān)于騰訊QQ影像中心
騰訊QQ影像中心（原騰訊光影研究室）是騰訊旗下專注于研究前沿影像處理技術(shù)的團隊，在單目深度估計技術(shù)、語義分割、目標(biāo)檢測、分類識別、GAN生成對抗等方面均有深厚的技術(shù)積累。團隊一直致力于探索泛娛樂綜合解決方案，將前沿的AI能力、先進的玩法引擎和3D渲染技術(shù)賦能產(chǎn)品，讓視覺創(chuàng)意更多樣，音視頻編輯更智能，社交溝通更趣味。
