2021年5月15日，融云X-Meetup技術沙龍第三站續航上海。本場沙龍聚焦“音視頻技術新方向”，由融云音視頻研發高級工程師姜春雨、時光機器人創始人兼CEO徐晶、融云IM研發中心高級工程師劉佳、學而思網校架構師李亞龍，和資深音視頻技術專家栗偉，五位技術大咖出任演講嘉賓，他們以時下熱門應用場景為視角，從技術實踐出發，與開發者們交流分享了關于音視頻技術的新觀察。
iOS 上的音頻開發
今年，由于Clubhouse和Tiya的示范效應，語聊房產品大火，音頻的開發技術備受開發者的關注。來自融云的音視頻研發高級工程師姜春雨,多年專注于移動端和音視頻領域的技術研發，他分享了《iOS 音頻設備開發 - Core Audio》的主題內容。
融云音視頻研發高級工程師姜春雨發表演講
姜春雨認為：移動端音頻處理的難點在于聲音美化、變聲、實時高音質和場景玩法多樣化。單從iOS設備來說，要突破這些難點，離不開iOS所提供的Audio Unit，它是一項強大靈活的音頻處理技術，支持混合、均衡、格式轉換和實時輸入/輸出，用于錄制、播放、離線渲染和實時對話。
融云SDK以Audio Unit為基礎，構建了長音效、短音效等多個功能模塊，最終在音頻設備上完成混音輸出。在場景化實踐中，姜春雨以音樂語聊房和百人超大會議室兩個典型場景為例，分享了融云SDK的技術開發優化方案。比如，音樂語聊房注重高音質、美聲變聲，以舒適噪音為好，開發者要根據這些需求進行算法調優；而超大會議室的優化則要求做到服務端智能發流、多人聲音同時出現可以智能選擇會議發言人的聲音。
姜春雨總結道：Audio Unit是一個強大的音頻處理框架，音頻處理要基于Audio Unit框架構建內容，并且要在音頻處理內容上不斷打磨優化。未來，融云音視頻SDK還將不斷基于不同場景需要開發新的功能，持續優化音頻產品，為開發者提供更好的解決方案。
構建低延遲高可靠的信令系統
融云作為互聯網通信云賽道的領先廠商，2020年在業界率先提出“IM+RTC+PUSH”的整體通信解決方案。融云RTC喚起用戶的通道就是依賴于IM的SDK信令，因此，本次融云的IM研發中心高級工程師劉佳，分享了《構建低延遲高可靠信令系統的探索與實踐》，幫助開發者更好地了解融云IM如何協同RTC，提供高可靠的通信能力。
融云IM研發中心高級工程師劉佳
劉佳介紹，高可靠音視頻信令系統的構建在IM信令系統設計時，首先要進行服務分層，包括接入層、內部服務和數據存儲的分層。而拆分原則要根據業務差異和服務對象的不同，拆分為API和 CMP，整體做到可監控、可維護。其次，是要搭建完整的監控體系，通過可視化的圖表，監看網絡的性能情況，及時處理系統瓶頸。
對于低延遲信令系統的實現，劉佳分享道，融云不僅利用全球加速網絡,降低網絡延遲，還基于融云自有通訊協議降低數據傳輸量，利用緩存機制,提高了服務的業務處理速度。并且，劉佳以緩存設計為例，說明通過一致性hash提高緩存命中率、高效利用CPU的處理能力、實施異步存儲等，也都是實現低延遲系統設計的要旨。
基于這些設計要點，劉佳展示了海量并發用戶場景下的語聊房系統架構，為開發者提供了干貨解決方案。同時，他還總結出融云現有的音視頻整體服務架構的三大優勢：第一，信令服務與媒體服務解藕,兩個服務之間也不需要狀態同步；第二，媒體服務專注通信,信令服務專注能力；第三，部署簡單,方便進行全球部署媒體服務。
直播系統架構設計 滿足用戶對實時性的需求
本場沙龍中，音視頻直播場景也是一個重點話題。深耕互聯網音視頻12年，在直播領域積累了豐富實戰經驗的拾光機器人公司創始人兼 CEO徐晶，通過他的《互聯網直播快速實戰》，分享了基于直播答題場景的架構設計，尤其是幾個關鍵技術點和應對策略，以及如何保證直播中的視頻和音頻質量，都做出了詳細的講解。
沙龍中，專注于在線教育的學而思網校架構師李亞龍，還針對教育低延時大班的直播場景，為開發者帶來了關于《在線教育直播系統架構升級》的分享。他著重從網校視頻技術的發展、網校大班直播系統、網校公益直播課、低延遲直播探索這四個方面的設計要點，進行了分析講解。對于專注在線教育的開發者而言，具有普遍的示范意義。
此外，資深音視頻技術專家的栗偉，發表了《使用WebRTC構建實時在線課堂》的演講。栗偉曾任職于中科院計算所、CC視頻，任職期間利用WebRTC技術開發了直播、在線課堂、視頻會議等商業產品，并發用戶數達到500萬。他還曾主筆撰寫了 《WebRTC技術詳解：從0到1構建多人視頻會議系統》，在該領域有多年實踐經驗，對WebRTC有非常深入的研究，他的實踐分享也讓開發者們獲益匪淺。
結語
在本次沙龍中，五位講師的分享，其共性特點在于：他們都基于當下所關注熱門場景展開話題。由此可見，應用場景才是“探討音視頻技術新方向”的基礎，而越熱門的場景往往越是代表著這個領域的發展潛力更大，因此也就越需要通過新技術、新產品加以承載。
隨著5G的進一步落地，網絡帶寬、網絡質量的不斷優化，音視頻通信無論在使用量級上，還是使用場景上，都會出現更多可能。對于開發者而言，只有及早儲備，盡可能多地掌握新技術，關注新方向，才能贏在當下，贏在未來。
