騰訊多媒體實驗室一直致力于沉浸式技術投入與建設,包括全景視頻,三維重建,自由視角,虛實融合,數字孿生,全息視訊等沉浸式媒體技術的前沿技術研究和落地應用開發,其中多項技術已服務于騰訊各項業務,并落地故宮博物院和敦煌研究院等大型項目。
此前,由故宮博物院和騰訊聯合主辦的“‘紋’以載道——故宮騰訊沉浸式數字體驗展”在深圳海上世界文化藝術中心舉辦,是故宮超高精度“數字文物”首次在深圳展出,并借助VR、AR技術還原倦勤齋部分場景。
在“錦繡世界”展區,觀眾將看到一個數米高的裸眼3D視覺裝置。空間內部借助騰訊多媒體實驗室沉浸式渲染技術,實現文物22倍超清放大,讓觀眾置身于紋樣萬花筒的世界中。只要“觸碰”文物,即可投影出重組過的精美動態紋樣,讓觀眾感受古代工匠的巧思何現代技術相結合的創意。
沉浸式內容生產基于騰訊多媒體實驗室自研的算法,用沉浸式渲染技術,按照萬花筒的折射原理將紋理材質鑲嵌進幾何圖形,達到對圖形的色調動態調控的效果。讓觀眾深度參與到絢麗花紋變化的過程中來,體驗全新的沉浸式數字萬花筒。
此外,敦煌研究院與騰訊推出“云游敦煌”小程序,借助游戲、動漫、音樂等數字創意多元演繹敦煌文化,逐漸成為大眾了解及學習敦煌文化的重要數字窗口之一。騰訊多媒體實驗室通過深度學習敦煌壁畫病害數據,形成自動識別并添加圖示的一整套算法,打造出高效的AI壁畫病害識別工具。
同時提供沉浸式遠程會診技術,基于多媒體實驗室的高性能編解碼引擎,用4K超清畫質的360度沉浸式畫面,無死角展示洞窟內的景象和文物的細節,實現無障礙遠程文物會診。
這樣,不同地域的會診專家,都可以實時清晰查看現場情況,共同為文物保護出謀劃策。