在軟硬件技術(shù)空間發(fā)展的背景下，人們對于互聯(lián)網(wǎng)玩法的暢想逐步由創(chuàng)造虛擬空間向現(xiàn)實世界與虛擬空間融合邁進。
甚至在剛剛過去的 10 月，F(xiàn)acebook 創(chuàng)始人馬克·扎克伯格將“臉書”改名為“ Meta ”，這使得“元宇宙”在整個科技圈、投資圈內(nèi)風(fēng)頭一時無兩。
說到“元宇宙”，按照目前的發(fā)展形態(tài)來看，它是一種現(xiàn)實空間復(fù)制與再造的過程，即人們在互聯(lián)網(wǎng)上再造一個具備高沉浸感、體驗感、互動感的虛擬世界，甚至人們可以基于各個互聯(lián)網(wǎng)大廠創(chuàng)造的虛擬世界重新塑造自己的人生。
當然，如果說真的要實現(xiàn)這樣的終極目標，其實還需要很長的路要走，不過新冠疫情的爆發(fā)無疑為“元宇宙”的商業(yè)化用例提供了更多的市場化需求。
比如我們常見的會議場景，新冠疫情之前的會議多以線下會議為主，在線下時，參會者可以隨時選擇與其他人進行 1 對 1 、 1 對多甚至多對多的實時交流，甚至在會議中可以臨時預(yù)約一個“小型會議包間”結(jié)識摯友，而這樣具備極強場景感的體驗在傳統(tǒng)視頻會議中卻無法獲得。
目前主流的傳統(tǒng)視頻會議在呈現(xiàn)方式上較為單一，缺乏空間場景，從而使得用戶層在會議過程中現(xiàn)場感缺失，容易出現(xiàn)精神疲勞、注意力不集中等問題。
專注應(yīng)用體驗，打造沉浸式會議“新世界”
為了解決這一難題，網(wǎng)易伏羲率先發(fā)布了一款沉浸式會議活動系統(tǒng)——“瑤臺”，以方便疫情期間人們在線上舉辦各類會議活動。
（“瑤臺”官網(wǎng)登錄界面）
“瑤臺”本身是創(chuàng)造了一個全新的古風(fēng)沉浸式虛擬會議世界，在“瑤臺”中，活動方可以按照自己實際需求在場景中設(shè)置多種風(fēng)格的活動場地，高精度復(fù)刻真實的會議場景。
同時，為了增強會議的互動性和體驗感，“瑤臺”不僅同步實現(xiàn)了 PPT 嵌入式播放、文字和語音聊天、同聲翻譯、多個分會場自由切換等數(shù)十項會議功能，而且為了滿足了會議社交需求，無需加群，虛擬人見面就能開啟群聊。
（虛擬人走近，開啟“群聊模式”）
考慮到虛擬會議世界更加貼近現(xiàn)實會議場景，會議主辦方可以在“瑤臺”中自由選擇活動場地內(nèi)展板數(shù)量、布局與內(nèi)容；活動場地座位數(shù)量與布局；場地加載廣告；大屏幕、展板宣傳廣告；活動場地冠名等，同時“瑤臺”還支持后臺自主管理會議和會議數(shù)據(jù)分析等功
（為 DAI 2020量身打造服裝。圖片來源：網(wǎng)易）
值得一提的是，為了增加用戶體驗的真實性和參與感，參會者可以通過上傳個性化照片打造專屬的個人虛擬形象。
依托于網(wǎng)易伏羲行業(yè)首創(chuàng)的 AI 智能捏臉技術(shù)，平臺會對肖像照片和人臉特征進行精準還原，并通過肖像網(wǎng)絡(luò)分析人臉特征，重建人臉三維信息，結(jié)合風(fēng)格化網(wǎng)絡(luò)學(xué)習(xí)數(shù)據(jù)，生成特定風(fēng)格的容顏，如發(fā)型、膚色、五官。
與此同時，虛擬人的表情、動作會實時隨著真實表情、動作的改變而改變，讓所有參會者仿佛置身于現(xiàn)實會議中，直觀感受對方的喜怒哀樂。
（專屬虛擬形象與真人驅(qū)動虛擬人示例）
目前，“瑤臺”已經(jīng)可以應(yīng)用到國際學(xué)術(shù)會議、簽約儀式、線上展會、招聘會、新產(chǎn)品發(fā)布會、品牌推介會、公司年會、頒獎儀式、圓桌會議、校園宣講會等眾多場景，并且最多可以同時容納 500 人同時在主會場參會。
此外，考慮到參會者參與此類活動的頻率，最大化提升參會者體驗，“瑤臺”選擇了最簡單的方式，即通過瀏覽器登錄平臺，輸入?yún)a就可以進入會議場景，免去了下載客戶端、注冊賬號等一系列繁瑣流程。
深耕底層技術(shù)，打造“瑤臺”極致互動體驗
作為集網(wǎng)易 24 年 IM 以及音視頻技術(shù)打造的融合通信云服務(wù)專家，網(wǎng)易云信提供融合通信與音視頻的核心能力與組件。在與網(wǎng)易伏羲的合作中，“瑤臺”就深度融合了網(wǎng)易云信音視頻、屏幕共享等能力。
“瑤臺”作為一款沉浸式會議系統(tǒng)，在為用戶提供高沉浸感、高互動性的會議活動體驗的同時，也需要做好用戶方體驗的視聽與活動方的分享質(zhì)量。
1.自研 AI 算法，保障用戶享受高質(zhì)量視聽體驗
網(wǎng)易云信自研的 AI 音視頻引擎，支持單、雙聲道，音頻采樣率 16 kHz - 48 kHz，碼率最高支持 128 kbps 立體聲高清音質(zhì)；視頻通話中，支持 1080P 高清畫質(zhì)。同時為了避免通話中可能存在的噪音問題，網(wǎng)易云信通過自研的音頻 3A 算法處理和 AI 音頻降噪算法，幫助用戶消除通話中的回聲和嘯叫，并對嘈雜人聲、鍵盤聲等非穩(wěn)態(tài)噪聲進行定向降噪，從而保障“瑤臺”用戶享受純凈的通話與互動體驗。
（參會者就墻板內(nèi)容進行實時互動交流）
另外，網(wǎng)易云信音視頻技術(shù)支持用戶在“瑤臺”中同時加入到多房間，實現(xiàn)同時訂閱到多個會議房間的音視頻流，同時也可以將本地的音頻流、視頻流推送到某一個會議房間中，且支持會議場景內(nèi)近距離 16 人暢聊。
考慮到用戶分享與互動中可能存在的網(wǎng)絡(luò)延遲問題，網(wǎng)易云信依托領(lǐng)先的精準帶寬偵測、智能擁塞控制、前向糾錯、編碼優(yōu)化等技術(shù)，實測抗丟包率達 80% ，從而保證“瑤臺”用戶即使在復(fù)雜的網(wǎng)絡(luò)環(huán)境下仍能享受高穩(wěn)定、低延時的視聽體驗。
2.高可用網(wǎng)絡(luò)，全面保障瑤臺全球互動
當前，“瑤臺”在應(yīng)用場景上已經(jīng)涉及到多類國際性學(xué)術(shù)大會，這就需要保證在長距離、高復(fù)雜網(wǎng)絡(luò)條件下，各種數(shù)據(jù)實時傳輸質(zhì)量。網(wǎng)易云信發(fā)布的首個獨立于業(yè)務(wù)邏輯的傳輸層基座——全球智能路由網(wǎng)絡(luò) WE-CAN ，完美支持媒體流、 IM 消息、信令以及通用數(shù)據(jù)傳輸，為“瑤臺” 99.9% 的通話提供無卡頓音視頻服務(wù)。
（ WE-CAN 全球智能路由網(wǎng)絡(luò)分層圖）
目前， WE-CAN 已在印度、中東、歐洲、北美、北非等全球 200+主要地區(qū)實現(xiàn)節(jié)點部署。廣泛節(jié)點覆蓋、完善運營機制、靈活調(diào)度策略以及智能路由策略，這 4 大特點賦予 WE-CAN “傳送門”一般的屬性，不論用戶身處何處，只要數(shù)據(jù)進入系統(tǒng)，就能快速到達目的地。
3.實時共享，打造簡單易用的分享環(huán)境
網(wǎng)易云信通過為“瑤臺”提供簡單易用的 NERTC SDK ，通過簡單集成后，演講嘉賓在會議中只需要將自己的屏幕內(nèi)容如文件、數(shù)據(jù)、網(wǎng)頁、PPT 等畫面以屏幕共享的方式分享給參會聽眾，從而讓其他與會者更加直觀的了解討論的內(nèi)容和主題，提升溝通效率。
（實時會議分享）
此外，考慮到接入成本問題，網(wǎng)易云信通過 Unity SDK 封裝技術(shù)，幫助“瑤臺”節(jié)省接入成本。
隨著虛擬現(xiàn)實技術(shù)與音視頻通話技術(shù)的逐步普及，高需求、多場景、低門檻的應(yīng)用將推動“瑤臺”的加速爆發(fā)，很多“ AI +會議”的玩法創(chuàng)新也在持續(xù)進化中。
下一步，“瑤臺”將進一步開發(fā)如虛擬社群、虛擬接待、 VR 虛擬現(xiàn)實等功能，而網(wǎng)易云信也將持續(xù)拓展服務(wù)邊界，為會議元宇宙、游戲元宇宙、社交元宇宙、教育元宇宙等場景持續(xù)提供穩(wěn)定、移動、可靠的融合通信云服務(wù)。
