2020 年 12 月 31 日，實時互動云服務商聲網Agora 公布 2020 年度總結，集中展現了過去一年的業務進展和取得的成績。2020 年，憑借在技術、產品、應用場景上的領先成果，聲網實現了對實時互動行業實踐的創新與引領，以及對 RTE 生態的持續賦能。
數據顯示，聲網 2020 年實時音視頻分鐘數月均用量超 400 億分鐘（按流計時約為 1600 億分鐘）、成立以來累計實時音視頻分鐘數超 10,000 億分鐘（按流計時約為 40000 億分鐘）、客戶主動調用 API 次數突破 100 億次/日、全球注冊應用已經超 21 萬（截至 2020 年 6 月底）。
01新技術落地
基于 AI 的美聲、音效與降噪
在音頻方面，聲網Agora 今年推出了業界首個基于 AI 的實時美聲方案。該方案適用于包括語音通話、互動直播、語聊房、桌游狼人殺等語聊場景，以及互動直播、K歌房、線上KTV、FM 電臺等歌唱場景。
同時，在以上場景中，聲網還提供了變聲音效、曲風音效、空間塑造、電音音效四種實時音效。開發者均可通過修改接口參數調整人聲、音樂的音效效果。
聲網自成立以來，一直深耕于音頻算法設計與落地，針對傳統降噪的無法很好處理突發噪聲的痛點，我們自研了基于深度學習的語音降噪模型 RFCAE（Residual Fully Convolutional Auto Encoder），并在今年依據此模型完成了實時降噪方案的落地。
圖：帶噪語料、WebRTC降噪語料及AI降噪語料對比
多算法落地 優化視頻高清質量與體驗
在視頻層面，我們始終關注視頻質量與互動體驗。我們結合人工智能算法，同時利用先進的編碼技術和傳輸算法，整體優化了 SD-RTN™ 傳輸策略和 Last Mile 傳輸策略，尤其針對東南亞、印度、印尼和埃及等地區進行網絡優化，進一步降低首幀出圖時間和切頻道出圖時間，并且有效提升碼流爬升速度，優化用戶體驗。
同時，我們結合 AI 算法落地了專為 RTE 場景打造的感知技術套件 APAS（Agora Perception Augment Suit），將采集、前處理、編碼、傳輸、抗弱網、渲染作為一個整體，通過多種自研算法來優化音視頻端到端的處理。
圖：APAS 感知技術套件
自研新傳輸協議
在網絡傳輸層，聲網自研了基于 UDP 的多路復用傳輸協議 AUT（Agora Universal UDP-based Transport Protocol）。該協議滿足以下技術要求：
通用性：使用一套協議設計來滿足不同場景的需求，不僅 RTC，也包括可靠數據通道；
傳輸協議中原生的流支持：多路復用，靈活的優先級管理，通過流中捎帶自定義的 Stream Meta 信息，給使用者進行流的管理決策；
靈活的擁塞控制模塊接口，可擴展實現不同的擁塞控制算法；
底層網絡接口化，能夠支持 SD-RTN™、UDP Socket 和任何虛擬網絡等。
AUT 協議在 Agora RTC SDK 中作為底層傳輸技術已經得到了技術驗證，為上層應用提供了高質量的傳輸保證和靈活的控制機制。
除此之外，我們還有多項自研技術在今年分別在中國、歐洲、美國獲得了專利。
02新產品發布
行業首個體驗質量標準 XLA 將“黑盒”明晰化
今年7月，聲網基于近萬億分鐘的用戶體驗數據及海量用戶主觀體驗評價，定義并推出了實時互動行業首個體驗質量標準 XLA，這是業內首個圍繞用戶實際體驗建立的可量化、可查證、可賠付的體驗質量標準和保證。XLA 相當于是把原本黑盒狀態的體驗質量明晰化了，一經推出就得到眾多開發者及客戶的認可，截至 10 月 24 日，已有 60 家企業加入 XLA 計劃，將共同推動實時互動全行業體驗質量的有效提升，推動實時互動行業逐漸走向成熟。
首創輕互動直播產品“極速直播”
聲網極速直播開創了低延時、強同步的"輕互動"直播場景，并支持連麥。極速直播主要面向對文字、白板等消息互動的延時要求較高，或強弱互動頻繁切換的直播場景，主播與觀眾端延時在 1.5s-2s 之間，相比傳統 CDN 直播方案延時降低 80% 以上，同時直播間內 90% 的觀眾與觀眾間延時差異小于 500ms，可滿足電商直播、教育大班課、直播答題等觀眾需要強同步場景的需求。
低碼高清：同等畫質降低 50% 視頻碼率
基于傳統的視頻編解碼方案，降低視頻碼率勢必要以犧牲畫質為代價，而聲網基于對視頻編解碼多年的技術積累和深度理解，推出了低碼高清產品服務，針對 CDN 直播場景，可以在保證主觀畫質不變的情況下，降低 50% 視頻碼率，幫助直播平臺有效降低成本。聲網低碼高清通過融合 PVC（感知視頻編碼）、智能碼控、ROI（感興趣區域視頻編碼）等多種 AI 和深度學習算法，在服務端對實時媒體流進行轉碼處理，可實現同等畫質下，大幅降低 CDN 直播視頻碼率，節省帶寬成本。
03產品與質量改進
SD-RTN™ 傳輸質量優化 穩定性達到專線水平
首先，在實時數據傳輸質量的優化上，SD-RTN™ 的傳輸穩定性已達到專線水平，在包到達率上，SD-RTN™ 與專線已無差別，jitter 200ms 的到達率為 99.9%。
東南亞、中東地區的網絡傳輸質量優化始終是目前行業的難點之一。我們在今年針對菲律賓等東南亞地區的網絡質量進行了專項優化。目前，90% 端到端雙向延時降低了14%，音頻優質傳輸率達97.31%。
另外，通過對音視頻、弱網、傳輸等層面的優化，在印度地區僅 Web 瀏覽器端的 5 秒登錄成功率也提升了 8%，并且成功支持多次萬人大頻道直播活動落地。
在中東地區，客戶通過聲網Agora 的 Cloud Proxy，進一步提升了該地區用戶的網絡接入成功率。
RTC SDK 優化落地，質量進一步提升
我們今年對聲網Agora RTC SDK 進行了深度的架構優化，實現了類似于 Rust 和 C++20的無棧協程架構，簡化了異步邏輯開發難度，提升有“異步化邏輯”需求的研發效率。在包體積方面，目前的 SDK 體積相較于原來更小，而且提供了靈活的剪裁包體積的能力，這在行業中也是獨有的。
聲網Agora 視頻/音頻 SDK 現已更新至 3.2 版。在迭代的過程中，我們也不斷地對其背后的抗弱網指標進行著優化，目前視頻的抗弱網邊界已經從原來的 60% 提升至 70%，音頻則已經提升至 80%，在這樣的弱網環境下，仍可以保證音頻、視頻的流暢體驗。同時，根據美洲，亞洲，東南亞，中東等地區用戶提供的數據顯示，SDK 首幀出圖、出聲時間也得到了全面的優化，客戶閉環驗證結果與實驗室測試結果完全吻合。
同時，穩定性監控系統落地上線，對穩定性問題可做到提前發現、崩潰問題定級、自動提交 JIRA，可使問題快速進入處理流程，大大提高了問題修復效率。
Web SDK 4.x 版落地 極大提升開發效率和體驗
面向 Web 瀏覽器端的Agora 視頻/音頻 SDK 在今年完成了一次優化。目前最新版（4.x）的 Web SDK 采用了 Promise （async/await）異步方法，可以極大地提升開發者的開發效率和開發體驗。
TypeScript 可以幫助開發者寫出高質量、高可維護性的代碼，對于大型的前端應用開發具有非常重要的意義。Agora Web SDK 4.x 版使用 TypeScript 開發，所以也導出了完備的類型定義文件供 TypeScript 開發者使用，配合編輯器的 TypeScript 插件，這將會極大得提升你的開發體驗。
實時消息 RTM SDK 弱網對抗能力提升
實時互動從來都不僅僅是指音視頻的互動，還包括消息與信令控制等實時消息的交互。實時消息 RTM SDK 在今年已經開始支持富媒體消息的實時互動，支持傳輸 30MB 以內的圖片或文件，并支持離線保存 7 天。
實時消息的傳輸同樣需要低延時與高可靠。所以我們今年特別針對傳輸通道進行了優化。現在，RTM 在 Native 端的多種弱網情況下，消息到達率和實時性有大幅提升，在 70%的丟包下到達率 100%。根據用戶數據反饋，RTM SDK 全球全網實際端到端平均延時<150ms<>。
RTM SDK 目前已經支持 RESTful API、Unity 平臺，以及小程序平臺。
實時碼流加速 RTSA SDK ，推兩大子產品
實時碼流加速 RTSA SDK 在今年完成升級優化后，發布了兩個子產品 RTSA Lite 與 RTSA Pro，適用于不同的場景。
其中 RTSA Lite 面向資源有限的輕量級設備，擁有極小包體、超低功耗、低延時、抗弱網等特性，適用場景主要包含智能手表、智能攝像頭、智能音箱等穿戴式、便攜式的智能設備。RTSA Lite 覆蓋平臺主要有 Linux 全平臺以及 RTOS 平臺，它也是業內首個支持 RTOS 平臺的實時互動 SDK。
RTSA Pro 則面向體驗優先、資源豐富的設備，覆蓋 Linux、Android、Windows 等平臺，適用場景為無人車、無人機、智能機器人等。
RTSA 把編解碼的靈活性釋放給設備端，支持客戶充分利用硬件的優勢進行自定義碼流。在傳輸層，RTSA 繼承 SD-RTN™，運用全球全網節點 、智能動態路由以及端側弱網對抗算法，提供高聯通性、低延時、高穩定性的音視頻碼流傳輸云服務，配合低延時，高可靠的信令通道，助力開發者在任意設備與場景中開啟實時互動能力。
水晶球大頻道監測優化，取消人數限制
水晶球（Agora Analytics）是聲網推出的行業首個實時音視頻互動質量監測與分析工具，支持問題調查、數據洞察、實時數據、自動診斷。用戶可以通過水晶球提供的丟包率、音視頻接通、卡頓、網絡連接狀態等實時數據，快速分析定位質量問題。我們在今年優化更新了“大頻道”功能，從原先只支持 100 人以上，現在最新版本已經取消該限制。
持續推進全球合規：數據傳輸，安全可靠
隨著業務的全球化，聲網將安全合規問題作為公司發展的重要戰略方向，主動遵守業務覆蓋國家和地區以及行業的各項法律法規，遵循最小化及公開透明的數據采集、處理原則，充分滿足信息安全、數據安全及個人隱私保護規范。今年，聲網獲得了 ISO27001、ISO27017、ISO27018、SOC2 Type1 認證，通過了第三方 GDPR，CCPA，HIPPA 符合性檢測/審計，進一步證明了嚴格的安全實踐。
同時，為支持傳輸層加密，聲網Agora 視頻/音頻 SDK 從 3.2 版開始新增 TLS（Transport Layer Security）加密和 UDP（User Datagram Protocol）加密方式。希望通過這一系列合規的動作，更好的保護全球開發者和客戶的信息安全、數據安全及個人隱私。
04更多創新場景方案落地
視頻面試：見證牛客網的200萬場視頻面試
聲網為國內眾多主流招聘平臺提供了高質量、高并發、超低延時的實時互動解決方案，并有效保障了視頻面試過程中穩定、流暢的互動體驗。以牛客網為例，牛客網是國內知名的面向 IT、技術求職者的招聘平臺，受疫情影響，今年牛客網平臺“視頻面試”的需求實現了爆發式增長，截止目前，牛客網今年單年的面試總時長已超過 8000 萬分鐘，同比 2019 增長了 5 倍，同時牛客網已為超過 100 萬候選人服務了近 200 萬場視頻面試。
智能手表：輕量級設備專屬的視頻通話SDK
聲網為小天才等多個國內主流兒童手表品牌提供兒童手表視頻通話解決方案，在兒童手表場景中，保障每一位孩子與父母進行高質量、低功耗、低延時的實時互動交流。聲網為小天才全系列兒童手表提供了輕量級設備專屬的視頻通話 SDK，包括了低功耗版本安卓 SDK 和全球首個適配 RTOS 系統的 RTC SDK。
智能作業燈：遠程即可輔導孩子的作業
聲網推出智能作業燈解決方案，為國內多家知名智能作業臺燈提供實時音視頻技術支撐，幫助家長和老師通過實時音視頻隨時隨地對孩子進行遠程看護、伴讀與線上作業輔導。針對智能臺燈不同的系統，聲網都有對應的 SDK 支持孩子與家長的實時互動，并支持 iOS、Android、Web、Windows、macOS、小程序等 20+開發平臺和框架，可以全面保障實時音視頻在各類終端平臺上的良好應用。
Watch Party：見證Scener疫情期間100倍增長
Scener 是一家虛擬電影院平臺，先后與 Netflix，Prime Video，HBO Max，迪士尼+，Hulu，Vimeo 等流媒體平臺達成了合作。今年 3 月以來，Scener 的用戶用量增長了100 倍，Scener 在 Netflix 上的收視率增長了 15 倍。聲網為Scener 的“ Watch Party ”功能提供了穩定、可靠的實時互動解決方案，見證了 Scener 今年疫情期間的 100 倍增長。
太空殺：增加玩家沉浸感、社交感
今年多家游戲平臺推出了“太空殺”小游戲，一時間受到眾多用戶追捧。《太空殺》與“玩吧”平臺使用了由聲網提供的實時游戲語音技術，實現了游戲內置實時語音。聲網擁有全球領先的實時游戲語音解決方案，通過在游戲內接入實時音視頻，增加玩家沉浸感、社交感，同時聲網還與游戲引擎商 Cocos、Unity 深度整合，Agora 音視頻 SDK 已經上線 Unity asset store ，并集成于 Cocos creator，方便開發者快速在游戲中加入實時音視頻功能。
云監考：實時監控考試畫面并與考生視頻通話
今年 5 月，聲網與優巡達成合作，為優巡 App 的 AI 云監考提供實時音視頻互動技術服務，通過聲網的視頻通話 SDK，優巡可實現監考人員在考試過程中，實時監控畫面并與考生視頻通話。不僅讓遠程監考更加高效、便捷，同時還保障了監考人員和考生溝通時的互動體驗。除此之外，聲網的實時錄制 SDK 幫助優巡實現監考視頻全程錄制，作為留存憑證，方便監考人員在考試結束后對監考視頻內容的快速審查和調取。
05開發者體驗
開源 Demo 與 API Example
目前聲網官方維護的 Github 有三個，它們包括：
AgoraIO，提供了一些基礎的代碼示例，以及一部分由官方維護的面向跨平臺、第三方框架的 SDK 版本。
AgoraIO-Community，有來自社區開發者開發的一些 Demo，以及基于不同語言或框架開發的 SDK 等。
AgoraIO-Usecase，主要包含了一些成熟的場景 Demo。
隨著實時互動場景的增加，以及產品不斷新增的功能，示例代碼越來越多，變得既不便于開發者查找，也不利于維護。所以我們在 AgoraIO 倉庫中，上線了 APIExample 項目，包含了所有基礎功能、單一場景的示例代碼，比如一對一視頻通話、一對一語音通話等。
另外，我們今年針對幾個成熟場景開源了功能相對完善的官方 Demo，其中一些 Demo 也可直接通過 App Store 下載體驗，比如 Agora Voice、Agora Live、Agora Meeting 等。
跨平臺、多語言支持
多年來，跨平臺開發一直都是最重要的技術趨勢之一。從 React Native 到現在由 Google 力推的 Flutter，框架年年革新，但熱度從未降低。采用跨平臺開發技術讓軟件開發者幾乎可以用同一套代碼就為不同平臺構建應用程序，節省了時間、人力，以及不必要的工作。
在跨平臺開發支持上，聲網可能是最激進的實時互動云服務。我們目前已支持多種語言、跨平臺框架，以及游戲開發引擎，包括：Cocos2d-x、Cocos Creator、Electron、Flutter、Python、React Native、Rust、Unity、Unreal、UWP。
另外，還有一波支持其它語言或跨平臺框架的 SDK 正在路上，希望可以進一步加速、簡化開發者的實現實時互動的多種場景。
文檔細化，體驗升級
僅僅提供 Demo 還是不夠的，畢竟很多接口參數都需要查看文檔來了解。今年我們通過為 10 余個平臺/框架添加零基礎跑通 Demo 文檔，新增場景、最佳實踐、術語等新類型的文檔，幫助不同水平的開發者更好地使用 SDK。
同時，聲網文檔中心在 11 月份進行了改版，全面優化 UI 的同時，通過添加產品首頁、API 專區、平臺選擇等，提升用戶體驗。
開發疑難，及時解決
疫情之下，我們與開發者的很多交流與互動，也從線下搬到了線上。
另外，我們在今年上線了“聲網開發者社區頁面”（dev.agora.io）。這里有我們長期舉辦的 Agora Talk、參加今年 RTE 2020 創新挑戰賽春季賽、秋季賽的項目回顧、征文大賽的文章等內容，讓開發者們可以了解更多音視頻技術知識、開發經驗，以及 SDK 的使用方法。
06聲網年度大事件
成功登陸納斯達克 股票代碼“API ”
今年 6 月 26 日，聲網成功登陸美國納斯達克， 股票代碼為“API ”，成為“全球實時互動云第一股”，當日以 50.6 億美元（相當于 357.3 億人民幣）市值成為上海市值前十的互聯網公司。 成功登陸納斯達克，不僅是資本市場對聲網的認可，更重要的是，聲網通過產品、技術、服務的專業性獲得開發者和客戶的認可。作為一家公眾公司，聲網財報的透明和公開，也可給全球開發者、客戶更多的信心和保障。
RTE2020 實時互聯網大會 中、美兩地圓滿落幕
由聲網主辦的「RTE2020 實時互聯網大會」通過線上、線下相結合的形式于今年 10 月在中、美兩地相繼召開。今年的實時互聯網大會由“ RTC 大會 ”更名為“RTE（Real-Time Engagement）大會”。全面升級后的 RTE 大會除了依然保留開發者們最愛的“ RTC 技術專場”，還覆蓋了實時互聯網的行業觀察、生態建設、創業創新等各領域內容交流，打造了一個為實時互聯網行業開發者、創業者、從業者、上下游生態合作伙伴創造價值并持續賦能的全方位大會。今年，共有 8000+ 開發者、行業人士報名參會，也有來自全球 100+ 互聯網企業和組織機構的 170+ 重量級技術、行業演講人在大會上分享干貨。
發布云市場 2.0 打造更開放、便捷RTE生態
在今年的RTE大會上，聲網發布了全新的Agora 云市場 2.0，通過整合全球 50 多家合作伙伴的能力，上線合作伙伴入駐云市場和開發者線上采購自服務體系，為全球開發者構建實時互動全場景一站式集成體驗，打造更開放、更便捷的實時互聯網生態。
RTE 2020 實時互聯網創業挑戰賽圓滿落幕
今年7月，聲網與五源資本（原晨興資本）、奇績創壇聯合啟動的“RTE 2020 實時互聯網創業挑戰賽”，成為全球首個實時互聯網創業挑戰賽，旨在全球范圍內尋找“使用實時互動技術進行創新”的企業和場景。經過為期3個月的激烈角逐，來自虛擬社交領域的 Oasis、聲樂教學領域的 vipSing、以及協同辦公領域的 Notta 三家企業，從 100+報名參賽的優質企業中脫穎而出，斬獲大賽前三名。
RTE 2020 創新挑戰賽圓滿落幕
RTE 2020 Innovation Challenge 創新挑戰賽，是由聲網和 RTC 開發者社區聯合舉辦，面向全球開發者發起的數據算法及創新應用類挑戰。我們的初衷是挖掘對 RTC 領域感興趣，熱愛技術創新，且希望不斷挑戰自我的開發者，一起決定 RTC 的技術邊界。本屆大賽共分為 2 個賽季、4 個賽道，由 1000+參賽選手組成團隊，提交了 100+ 參賽作品。
疫情還未過去，我們還是要逆水行舟，更進一步。2020 充滿了復雜及不確定性。面對不完美的世界，我們能做的就是在這個過程中，保持思考，淬煉力量，獲得成長。希望 2021 能與大家一路前行，尊重開發者的價值，釋放技術的力量，一起拓展實時互動的邊界。
