隨著疫情的常態化,當物理層面上的隔離成為必須,我們總要通過其他途徑滿足人類剛需——社交。怎樣才能讓人們超越物理的距離,實現最“真實”的見面?語聊房、互動播客、一起X.....線上的片刻相聚,又仿佛蜻蜓點水般的相遇,始終缺少面對面促膝長談的暢快、老友間耳語交流的私密。對于初次在線上相遇的兩個陌生人而言,又如何拉近在線上的“距離”?
注冊登錄、取個名字、生成自己的虛擬形象,選擇任一房間進入,接下來你便可以與眾多用戶體驗低延時、穩定、流暢的“元宇宙社交”了。多種虛擬場景隨你選,360°空間音頻讓無數屏幕后的“社牛”和“社恐”們,體驗到雖遠隔萬里,仍可“促膝”而談的沉浸感。而這背后用到的便是聲網“MetaChat元語聊”解決方案。
虛擬形象激發社交潛能,“社恐”變“社牛”
傳統語聊房只聞其聲,不見其“人”,缺少沉浸感。而聲網MetaChat元語聊解決方案提供了一種全新的語聊方式——用戶以虛擬形象參與到暢聊中。目前已支持自定義捏臉、服飾、發型搭配等功能,為用戶打造獨一無二的Avatar。此外,用戶的虛擬形象風格可按需定制,滿足開發者對于擬真、卡通等在內的各種業務場景需求。虛擬形象是“社牛”和“社恐”都能接受的社交方式,具體來說虛擬形象的構建會使得以往缺失在溝通環節中的“身體”重新“在場”,會使得用戶的非語言符號、動作等得以具現,這喚醒了具身傳播,激發了用戶的社交潛能,也讓那些喜歡線上交友但卻“社恐”的用戶多了些許心理慰藉和神秘感。
百變造型和服飾,創造專屬Avatar
多種虛擬場景渲染沉浸式社交氛圍
聲網MetaChat元語聊解決方案目前提供Party、咖啡廳、酒吧3種虛擬場景,未來將會拓展諸如會展、自習室、迪廳等在內的多元化場景,開發者可根據業務玩法選擇合適的場景,也可按需定制。以上虛擬場景基于AR-3D引擎建模,可以實現多風格建筑、物體等3D物體效果;雨水、火焰、煙霧等復雜粒子效果;以及碰撞、重力等物理效果;并支持卡通、反射、高光計算、多光源等復雜的材質系統。逼真、沉浸式的虛擬場景避免了單一的語聊場景給用戶帶來的視覺疲勞,還能緩解用戶間沉悶、尷尬的初始溝通氣氛。
沉浸式虛擬場景,打造絕佳社交體驗
目前,每個語聊房可以支持16位玩家,每位玩家都可以看到其他玩家的Avatar,且可以與任一玩家進行動作互動,還可以在任意空座位上就坐,在吧臺喝飲料、起舞等。
360°空間音頻,溝通近在“咫尺間”
要做到深度的社交沉浸感,一大難點是如何在虛擬社交場景中重現“空間的質感”??臻g、距離、尺寸等維度對于判斷一個環境是否真實至關重要,也是實現深度沉浸感的重要一環。聲網MetaChat元語聊解決方案支持360°空間音頻,可以為語聊房中的玩家帶來身臨其境的聊天體驗和更為沉浸的在場參與感,讓溝通更高效、更有趣。
所謂空間音頻,或許大家在很多場景中都有過體驗。例如在“吃雞”一類的游戲中,我們戴上耳機,可以利用聲音帶來的方位感判斷隊友當下所處的位置;亦或是在虛擬會議場景中,大家雖然坐在不同的位置,但你能清楚的聽到每個人發出聲音的具體方位、甚至感知到聲音的遠近強弱。
聲網360°空間音頻采用純軟件算法方案,能夠模擬頭部球面區域立體聲場,因此不受硬件的限制,用戶使用普通耳機在手機或電腦上就能體驗。當用戶操作Avatar在虛擬場景里移動時,聽到的音效會根據Avatar的頭部及臉部朝向、聲源角度和距離不同而變化,完美模擬現實聽覺。具體在語聊房場景中:
玩家在進入房間后會聽到房間內正在播放的背景音樂,例如在咖啡廳場景中會聽到輕音樂,在酒吧會有駐場樂隊、DJ等不同效果。玩家走向房間的不同方位也會聽到不同的BGM效果,比如隨著腳步的走遠BGM音量變小,聲音逐漸清晰或減弱等。除此之外,玩家還可以通過前后左右的位置操控,移動到其他玩家身邊開啟暢聊。最讓人激動的是,房間內的BGM可以與玩家的音頻共存,這就意味著玩家既可以聽到房間內的背景音樂,又能聽到一定范圍內其他玩家的聲音,再輔以玩家的虛擬形象,這就完美模擬了真實的互動感。宛若眾人在現實中的酒吧聽著音樂、喝著酒,暢聊人生得與失,豈不快哉?
輪盤控制角色移動,感受360°空間音頻
未來,聲網MetaChat元語聊解決方案還將支持語音驅動嘴型和聲紋變聲兩大功能。
1.關于語音驅動嘴型,聲網將提供以下兩種解決方案:
· 純音頻驅動方案:無需面部表情捕捉,通過算法識別,將中英文(或其他語種)發音跟人像嘴型、面部表情智能關聯,驅動人像模擬真人說話,支持2D人像圖片和3D人像模型
· 面部表情捕捉方案:需要調取表情捕捉設備(例如手機前置攝像頭),通過捕捉面部表情系數,準確識別眨眼、皺眉、張嘴、轉頭等動作
2.聲網聲紋變聲支持在保持語義內容不變的情況下,將一個人的語音轉成另一個人或另一種風格,包括變聲和美聲兩大類:
· 變聲:包括聲音變換、風格變換和情緒變換,常用于娛樂場景
· 美聲:將不流暢的表達轉化為流暢的表達,將疲憊的聲音轉化為音色飽滿的演說,常用語演說等商用場景
縱觀元宇宙爆火的當下,我們不難發現科技巨頭所展望的“元宇宙社交”,其實已雛形初具:移動互聯網的發展開啟了虛擬與現實的結合,而實時互動正在將這種結合逐層滲透。或許在不久的將來,我們將可能在虛擬的KTV中,與一眾Avatar揮舞熒光棒,合唱一首《難忘今宵》。
聲網 MetaChat元語聊解決方案 iOS和Android 端Demo已上線,如果您想進一步體驗Demo,請移步聲網公眾號。