11月19日-22日，由國家廣播電視總局、北京市人民政府指導(dǎo)，北京市廣播電視局主辦的首屆中國(北京)國際視聽大會(huì)(China Beijing International Audiovisual Conference，簡稱CIAC)在北京隆重舉行。
大會(huì)圍繞“視聽改變生活，文化引領(lǐng)未來”這一主題，聚焦中國視聽業(yè)高質(zhì)量發(fā)展，以展覽、論壇等形式展現(xiàn)廣播電視和網(wǎng)絡(luò)視聽融合發(fā)展成果和視聽產(chǎn)業(yè)自主創(chuàng)新成果。近300名專家學(xué)者齊聚一堂，聚焦視聽業(yè)高質(zhì)量發(fā)展，交流新經(jīng)驗(yàn)、新觀點(diǎn)。
金山云高級副總裁、合伙人 梁守星
在首日召開的“北京新視聽年度峰會(huì)”主論壇上，金山云高級副總裁、合伙人梁守星發(fā)表了《智享沉浸視界》的主題演講，深入分享了金山云布局沉浸式視頻云的技術(shù)核心、實(shí)踐與認(rèn)知。
沉浸式視頻迎來巨大前景
隨著5G時(shí)代的到來，視頻內(nèi)容向4K/8K超高清方向演變，VR/AR/MR技術(shù)也將刷新更為新潮的互動(dòng)方式，沉浸式媒體與娛樂應(yīng)用將迎來全面爆發(fā)。為加速創(chuàng)新落地，金山云在業(yè)內(nèi)率先提出“智享沉浸視界”，布局沉浸式視頻云未來。
根據(jù)Cisco VNI數(shù)據(jù)，預(yù)計(jì)到2022年，全球CDN流量規(guī)模將達(dá)到252EB/m，其中，互聯(lián)網(wǎng)視頻流量占比呈逐年上升趨勢。“預(yù)計(jì)5G網(wǎng)絡(luò)下，基于超高清、低時(shí)延互動(dòng)的沉浸式視頻業(yè)務(wù)場景會(huì)不斷產(chǎn)生和演化，成為視頻行業(yè)的主力軍。”梁守星表示。
從整個(gè)沉浸式視頻產(chǎn)業(yè)的演變過程來看，2014-2016年市場培育期，圖像處理能力提升，F(xiàn)acebook收購Oculus，微軟發(fā)布Hololens;隨后在近兩年的市場狂熱后，2017年產(chǎn)業(yè)進(jìn)入低谷，但大廠仍繼續(xù)蓄力，彼時(shí)Apple推出ARKit，Google推出ARCore;2018-2021年為全新發(fā)展期，逐漸重回?zé)狳c(diǎn)，游戲、教育等熱門應(yīng)用成熟，例如Oculus Go發(fā)布和Magic leap One正式發(fā)售等。2022年后，隨著光學(xué)、聲學(xué)等核心技術(shù)突破，產(chǎn)業(yè)將進(jìn)行發(fā)展的機(jī)遇期。
增強(qiáng)現(xiàn)實(shí)讓學(xué)習(xí)氛圍更具真實(shí)感，混合現(xiàn)實(shí)讓職業(yè)培訓(xùn)實(shí)操性更強(qiáng)，肢體識(shí)別讓互動(dòng)升級，虛擬現(xiàn)實(shí)感覺身臨其境......“我們跟很多的AR廠商做了溝通，很多的操作是通過AR的方式來快速學(xué)習(xí)。例如，電力維修操作員學(xué)習(xí)的基礎(chǔ)操作，他們可以通過AR去操作一些更精密的器件，可以帶來更好的實(shí)景操作的效果。”梁守星講到。
金山云視頻云的技術(shù)硬核
“從生物學(xué)角度，滿足人眼真正的沉浸式需要50k分辨率,沉浸式將對視頻的編解碼和傳輸帶來巨大挑戰(zhàn)。”梁守星表示，金山云在算法+AI+編碼技術(shù)三方面打造智能超高清編解碼方案。
金山云擁有集智高清、KSC265、KIE多組產(chǎn)品。集智高清結(jié)合金山云自主研發(fā)的KSC265編碼方式，可將高清視頻碼率節(jié)省60%，從而解決了消費(fèi)者觀看卡頓的問題以及視頻提供商的帶寬成本問題。金山云將于近期發(fā)布可商用版KAV1,相較于 KSC265 的基線水平，能夠在保證高清下，壓縮率繼續(xù)提升10%-20%，同時(shí)編解碼效率更高，更好的支持未來超高清大帶寬的視頻轉(zhuǎn)碼。
梁守星表示，VR頭顯設(shè)備視頻大部分實(shí)現(xiàn)1080P以上的支持，傳統(tǒng)的編碼模式主要是對硬件解碼的支撐和編碼方式的升級，設(shè)備解碼溫度偏高。頭部轉(zhuǎn)向中涉及大量的視頻信息傳輸，金山云Tile方案解碼功耗低，分塊編碼帶寬更小，碼率節(jié)省75%。梁守星指出，Tile方案的挑戰(zhàn)在于頭部轉(zhuǎn)向延遲必須要低，要求很高的邊緣計(jì)算、視頻編碼、網(wǎng)絡(luò)傳輸能力，對AI、圖像處理均帶來很大的挑戰(zhàn)，而金山云可以通過邊緣計(jì)算中心以及GPU處理能力快速處理返回超高清的圖像。
不僅如此，金山云支持8K與VR的配合，360度高清視頻傳輸渲染，大幅降低延時(shí)，提升用戶體驗(yàn)。金山云VR FOV傳輸方案能將原始視頻切塊，分別進(jìn)行編碼、分配不同的碼率，在大幅降低視頻傳輸碼率的同時(shí)，將視角切換延遲可控制在30-60ms內(nèi)，有效消除暈動(dòng)。
在AI助力下，金山云視頻云可對視頻場景進(jìn)行識(shí)別，對體育、秀場、游戲等場景匹配不同的編碼模板;通過ROI區(qū)域檢測，捕捉視頻畫面中人眼視覺焦點(diǎn)，對焦點(diǎn)區(qū)域做畫質(zhì)增強(qiáng)，使主體更加突出，背景更加純凈; 檢測出人眼真正敏感的區(qū)域，對邊緣部分進(jìn)行保護(hù)，分配碼率到更重要的地方;通過神經(jīng)網(wǎng)絡(luò)學(xué)習(xí)，支持評價(jià)多種質(zhì)量類型，并對不同類型圖像質(zhì)量制定不同優(yōu)化策略。
“AI + 超高清編解碼，實(shí)現(xiàn)更佳的場景識(shí)別和優(yōu)化，對于編碼整體的性能，或者編碼整體的效果來說都得到了大大的提升。”梁守星表示，智能編碼與視頻分析為在線視頻、泛娛樂直播、短視頻、在線教育等行業(yè)助力，可有效的減少卡頓率、提高首屏?xí)r間，提升畫質(zhì)體驗(yàn)。
互動(dòng)直播成為沉浸式未來發(fā)展方向
從整個(gè)產(chǎn)業(yè)發(fā)展來看，實(shí)時(shí)交互式直播可創(chuàng)造真實(shí)感的沉浸式直播體驗(yàn)，將成為未來沉浸式發(fā)展方向。
“目前，800ms是實(shí)時(shí)互動(dòng)的臨界點(diǎn)，傳統(tǒng)直播時(shí)延達(dá)3秒，RTC可實(shí)現(xiàn)250ms甚至更低的時(shí)延，有效提升互動(dòng)體驗(yàn)，RTC + 邊緣計(jì)算技術(shù)帶來音視頻會(huì)議的低延遲。”梁守星表示。
金山云邊緣計(jì)算提供低于15毫秒的低延遲接入，良好的跨網(wǎng)路由優(yōu)化及調(diào)度能力，高效傳輸音視頻數(shù)據(jù)流以及強(qiáng)大的算力支持。RTC結(jié)合金山云邊緣網(wǎng)絡(luò)技術(shù)有效消除視頻會(huì)議網(wǎng)絡(luò)抖動(dòng)，實(shí)現(xiàn)更低延遲的互動(dòng)體驗(yàn)。
梁守星講到，金山云LiveNet 邊緣網(wǎng)絡(luò)去中心的網(wǎng)絡(luò)拓?fù)洌蠓嵘?lián)網(wǎng)穩(wěn)定性;廣泛邊緣計(jì)算節(jié)點(diǎn)、網(wǎng)絡(luò)動(dòng)態(tài)調(diào)度，讓邊緣網(wǎng)絡(luò)更智能。LiveNet網(wǎng)絡(luò)消除RTC通信網(wǎng)絡(luò)抖動(dòng)，并支持一鍵無侵入接入，智能運(yùn)維讓用戶無感知調(diào)整網(wǎng)絡(luò)狀態(tài)。
目前，金山云邊緣計(jì)算的技術(shù)優(yōu)勢主要體現(xiàn)在網(wǎng)絡(luò)和調(diào)度兩個(gè)層面。在網(wǎng)絡(luò)層面，金山云率先在邊緣節(jié)點(diǎn)上實(shí)現(xiàn)了包括彈性IP、負(fù)載均衡在內(nèi)的多種網(wǎng)絡(luò)接入方式，可以靈活的應(yīng)對各種業(yè)務(wù)場景，并經(jīng)過了高并發(fā)、大流量下的業(yè)務(wù)驗(yàn)證;在調(diào)度層面，金山云積極探索客戶端和邊緣節(jié)點(diǎn)，以及邊緣節(jié)點(diǎn)之間的的連接和組網(wǎng)場景，通過對邊緣節(jié)點(diǎn)的網(wǎng)絡(luò)質(zhì)量、承載能力以及標(biāo)準(zhǔn)容器網(wǎng)絡(luò)進(jìn)行優(yōu)化，可以實(shí)現(xiàn)靈活的邊緣節(jié)點(diǎn)的組網(wǎng)和調(diào)度。
演講最后，梁守星表示，金山云很早便明確了視頻云“向上 AI 化、向下邊緣化”的發(fā)展策略，持續(xù)優(yōu)化升級相關(guān)技術(shù)和解決方案，基于高清、VR、互動(dòng)，在IaaS、PaaS層全面布局沉浸式視頻云產(chǎn)品。同時(shí)，我們也期待5G時(shí)代更多應(yīng)用的內(nèi)容和服務(wù)出現(xiàn)，金山云希望與各方合作伙伴一起攜手打造更高清互動(dòng)的產(chǎn)業(yè)新生態(tài)，智享沉浸視界。
