2016年被業(yè)界稱為VR元年，從Facebook的Oculus到HTC的Vive，層出不窮的VR設備和VR內容讓用戶逐漸體驗到了VR的魅力。隨著5G、云、AI等技術的不斷突破，VR視頻、VR直播已從賽事、展會延伸到電商、教育、影視等行業(yè)，VR產業(yè)迎來前所未有的發(fā)展。IDC最新發(fā)布的《IDC全球增強與虛擬現(xiàn)實支出指南》預測，到2023年，中國AR/VR市場支出規(guī)模將達到652.1億美元，較2019年的預測(65.3億美元)有顯著增長。然而，在視頻向高清、超高清發(fā)展的趨勢下，VR視頻行業(yè)仍面對碼率大、帶寬成本高，視頻卡頓，延遲大，內容匱乏等痛點。
近日，在第二十屆虛擬現(xiàn)實大會上(ChinaVR 2020)，金山云高級研發(fā)總監(jiān)樊鴻飛針對以上難點，重點介紹了金山云在VR直播和超高清方面的整體解決方案和技術實力。
沉浸式VR直播 金山云提供完整解決方案
“沉浸式技術要實現(xiàn)大規(guī)模商用，需解決三大難題：VR內容、硬件設備、變現(xiàn)與生態(tài)，其中VR內容對技術要求很高。”樊鴻飛介紹道，通過集智高清、FOV編碼、金山云魔鏡平臺、低延遲直播等技術和服務，金山云在VR內容層面可提供高品質、低成本的整體解決方案。
基于自身CDN分發(fā)平臺，金山云提供VR視頻從采集到播放的完整端到端一體化解決方案，支持VR視頻拼接、云端實時轉碼，為用戶提供超高清、低延時、不眩暈的VR新體驗。目前，金山云VR直播解決方案已在某秀場直播平臺實現(xiàn)落地。
金山云集智高清、KSC265、VR分塊傳輸方案保證在畫質前提不變的情況下，相比普通VR視頻可降低75%碼率，大幅降低帶寬成本。在VR直播方案中，通過精巧的算法設計以及強大的邊緣計算能力，保證視角切換時用戶能及時無感知地切換到高清Tile。金山云VR分塊傳輸方案穩(wěn)定的云端編碼技術，還能有效控制新舊視角切換數(shù)據(jù)延時維持在30ms-60ms以內，有效消除暈動現(xiàn)象。
“此外，金山云VR直播解決方案支持iOS/Android手機、平板、頭盔等多種頭顯播放設備。同時，金山云VR SDK支持一鍵接入、HLS形式直播/點播業(yè)務以及多種開放接口定制開發(fā)，方便用戶多終端實時享受。”樊鴻飛表示。
AI集智高清 提升VR視頻畫質的利器
在視頻行業(yè)高速發(fā)展的過程中，用戶的痛點也在發(fā)生變化：首先是用戶終端的變化，從電視、PC、Pad到手機，再回旋發(fā)展到大屏、超大屏，且終端的應用也有了極大的豐富;其次，視頻的高清體驗不斷提升，分辨率從1k、4k到8k超高清，在帶寬、網絡得到極大豐富的5G時代，VR直播中用戶對高清畫質的需求將更加強烈。
針對這些痛點，金山云推出基于AI技術與傳統(tǒng)圖像處理技術的解決方案，集合多種視覺AI與編碼技術，通過深度神經網絡對視頻畫面內容進行感知，并通過智能調節(jié)編碼，優(yōu)化主觀體驗，追求更佳的人眼視覺感受。
集智高清擁有四大核心優(yōu)勢：1.集智高清處理后視頻傳輸可節(jié)省30%-60%帶寬;2.相較普通轉碼，集智高清可明顯提升主觀效果;3.通過預分析的場景分類和質量評測，匹配更適合的碼控，為編碼尋找“最優(yōu)解”;4.集智高清將視頻進行分層處理，對視覺顯著部分做畫質增強。
樊鴻飛表示，金山云集智高清具有的優(yōu)勢離不開其背后的四大核心技術支持。利用超分辨率技術進行畫質修復，包括采集端由于編碼、采集噪聲、投影等帶來的噪聲;感知編碼技術可檢測出人眼真正敏感的區(qū)域，對邊緣部分進行保護的同時，分配碼率到更重要的地方;通過關注區(qū)域，讓VR視頻中人眼關注區(qū)域的視場角有跡可循，針對不同的Tile進行Multiplexing。根據(jù)視頻本身的內容特征，以及第一次編碼的信息，集智高清能自動決策更匹配的編碼參數(shù)，用戶完全不需要感知編碼器設置內容，就已解決調參難題。
金山云魔鏡平臺 高清技術的幕后英雄
視頻的高清發(fā)展使得用戶對視頻/圖像質量的要求不斷提升，其真實體驗感受評測難度也相應增加，如何全面客觀評價視頻畫質的質量是否得到提升?“就此而言，金山云魔鏡平臺可以稱得上是高清技術的幕后英雄。因為通過模擬實際的觀看體驗，金山云魔鏡平臺真正對‘感知愉悅度’進行評測，并深度解析算法對主觀畫質的影響，克服AB-test的局限性，不僅能得到‘好不好’，而且能知道‘好在哪’、‘為何好’。”樊鴻飛表示。
金山云魔鏡平臺能兼容H.264、H.265、AV1編碼標準的視頻播放，以在線平臺的方式提供圖像/視頻評測服務，無需下載，且根據(jù)具體場景提供三種評測模式：專家模式(全參考模式)、用戶模式(無參考模式)和細粒度模式(OAA模式)。
除了平臺本身提供完整的畫質評測流程，金山云魔鏡平臺還能幫助企業(yè)提供全流程畫質評測解決方案，包括根據(jù)企業(yè)使用場景及樣本類型篩選評測數(shù)據(jù)，定制評測維度，提供評測人數(shù)建議以及評測報告分析，并提供客觀評價指標的自動計算。
通過高效的主觀畫質驗證，金山云魔鏡平臺能夠幫助企業(yè)：實現(xiàn)算法原型短期快速驗證;算法長期迭代并提供可度量的畫質指標;幫助AI保障泛化性，以滿足商業(yè)化落地需求。
5G、4K/8K、VR等新技術、新應用與云計算和AI正不斷深度融合，用戶在未來的直播中將可以獲得和現(xiàn)場近乎相同的沉浸式體驗，這也是金山云視頻云前進的方向和終極目標。
