2022年9月25日國際聾人日之際,在中國老齡事業發展基金會、中國聾人協會的指導下,騰訊天籟行動召開2022年度發布會,正式對外公布天籟行動在聽障產品研發、公益救助、產研共創方面的關鍵成果。在產品研發層面,騰訊首次發布完全自研的助聽器核心算法解決方案,攜手助聽器廠商智聽科技聯合研發,推出摯聽(騰訊天籟inside)助聽器“公益助老款”。
會上,騰訊會議天籟實驗室主任商世東發表以《AI助聽,聆聽天籟》為主題的演講。商世東表示,“天籟行動”的初衷就是希望通過技術開放提升助聽設備的使用效果,在運營兩年的時間里,團隊一直在思考如何能覆蓋到更多的聽障、聽損人士,為他們做得更多一些。
(圖:騰訊會議天籟實驗室主任 商世東)
在中國,超過1.2億老年人正在喪失聽力。助聽器作為改善老年人聽力干預的重要設備,因價格昂貴、效果達不到預期等因素,在中國的老年聽障群體中的使用率很低。此次,騰訊會議天籟實驗室通過將天籟AI音頻技術開放給國內廠商,有效提升國產助聽器的使用體驗。過去三個多月,騰訊會議天籟實驗室、騰訊SSV銀發科技實驗室等組成的聯合項目團隊多次去往廣東韶關為當地的老人進行聽力檢測,并進行摯聽(騰訊天籟inside)助聽器的驗配、捐贈工作。
商世東介紹,基于騰訊天籟實驗室完全自研的助聽器核心算法解決方案,可將復雜場景下的語音清晰度和可懂度提升85%,讓千元級的國產助聽器也能媲美萬元級進口助聽器產品的體驗。在兼容IEC 60118和ANSI S3.22的測試環境下,摯聽(騰訊天籟inside)助聽器在六大關鍵指標上都已經達到、甚至部分指標超過了進口助聽器的水平。
同時,為幫助聽障人士更友好地使用協同辦公工具。商世東宣布,騰訊會議與騰訊公益慈善基金會共同發起“無礙溝通”公益夢想活動。用戶參與騰訊會議低碳會議等公益行動,獲得小紅花并捐出以支持該公益夢想。后續,通過“一花一夢想”創新的公益形式,將面向2萬名聽障人士捐贈無障礙辦公禮包,持續關注聽障人士的用戶體驗,并持續提供關愛服務。
以下為商世東的演講實錄:
各位尊敬的領導、各位嘉賓、媒體朋友以及線上的觀眾朋友們,大家好,我是來自于騰訊會議天籟實驗室主任商世東。我今天分享的主題是《AI助聽,聆聽天籟》。
在分享開始前,我想講三個簡單的故事。
有一位女孩,她叫戴柳昕,11歲,患有大前庭導水管綜合征所導致的極重度聽力障礙,3歲時就已經植入了人工耳蝸;曹騰,他是一位運動員,22歲就是重度聽力障礙了,19歲時植入了人工耳蝸;唐臣,他今年77歲,長期在噪音工作環境,導致聽力重度聽損、老年性耳聾,70歲開始佩戴助聽器。
從三個故事中我們可以看到,聽清周圍的世界對我們來說是習以為常、再自然不過的事情,在他們來說卻是難事,而他們可以是青年、可以是兒童、也可以是老人。在中國,甚至是全球,聽障、聽損都是一個很龐大的群體。聽力障礙如果沒有得到及時、有效的干預,對人的身體、心理都可能帶來長期負面的影響,可能會導致孤獨、焦慮、缺乏自信心、自我封閉等等。
在我過去二十多年的職業生涯里,一直都在和聲音打交道,做音頻相關的技術研究和產品化。兩年多前,我在和一些朋友聊天時得知,許多聽障朋友即使佩戴了輔聽設備,包括人工耳蝸、助聽器等等,在飯店、街道等嘈雜的環境下,依然會面臨著聽不清的困擾。當時我們就在想,能不能把我們在騰訊會議里經過多年的研發積累、數億用戶驗證的語音降噪和增強技術用在助聽設備里,讓聽障人士能夠聽得見、聽得清、聽得真。
有了這樣的想法后,我們就開始尋找合適的伙伴。一開始很多合作伙伴并不清楚我們到底想做什么,我們也多次被拒絕過,中間與我們的合作伙伴進行過很多次的磨合。雖然一直做聲音相關的事情,但助聽設備畢竟對我們來說是一個嶄新的領域,我們有很多跨界的知識需要學習。
2020年開始,經過半年多的驗證,我們當時取得了一些初步成果,突破了人工耳蝸重度噪音實時處理的難題,并且在兩年前的國際聾人日正式發起“天籟行動”,初衷就是希望通過技術開放提升助聽設備的效果。
“天籟行動”已經運營兩年時間,目前我們擁有眾多國際、國內的助聽合作廠商,比如來自奧地利的美迪樂、國內廠商諾爾康、澳大利亞的科利爾以及中國聯通,都接入了我們的技術合作。天籟行動與美迪樂合作,幫助聽損者提高單音節的識別率達到66%;我們和諾爾康合作,在設備上進一步提升人工耳蝸的清晰度和可懂度達40%;我們和科利爾在頻率測聽、聲消并音以及聽能康復訓練方面深度合作,為聽障人士提供從測聽到聽覺提升的全鏈條解決方案;“天籟行動”還和中國聯通推出了聯通網卡升級版,用于輔聽和字幕識別,讓聽障人士不僅聽得清,還能夠看得清。
但是這還遠遠不夠,我們也一直在思考如何能做得更多一些,如何能覆蓋到更多的聽障、聽損人士。今年我們和業內多位專家交流了解到,中國的老年聽障群體數量龐大,并且特別容易被忽視。相關數據顯示,每三位老年中,就有一位中度、重度甚至極重度的聽障患者,這個數據當時讓我們非常震驚。在和很多朋友聊到這個問題時,發現大家家里多多少少都有這樣的長輩。
老齡聽損問題,不管是老人自己還是后輩,大家都沒有重視這個問題,在我們普遍的認知里,都覺得人老了、聾了是一件很自然的事情,不需要過多干預,這是認知層面的問題。但實際上當一個老人聽力下降,會帶來很多實際問題,他們越來越不愿意交流,會感到越來越孤單。相關研究表明,老人聽障和憂郁癥、認知障礙有很強的相關性,與聽力正常者相比,聽力喪失的老年人更有可能發展阿爾茨海默病和癡呆癥。隨著一個人聽力損失越來越嚴重,相關的風險也越來越高。
所以從去年底開始,我們進一步思考如何通過技術以及騰訊眾多的平臺資源幫助聽障和聽損的老人。今年3月3日的全國愛耳日,我們啟動了天籟行動2.0升級版,助聽器是幫助老年人進行聽力干預的重要手段,我們把天籟AI音頻技術開放過國內廠商,有效提升國產助聽器的使用體驗,通過聽力篩查、科普,提升大家對老年聽損的認知,通過與中國老齡事業發展基金會成立天籟銀發關愛基金,給經濟困難的老人免費捐贈天籟inside助聽器。4月份,首批天籟銀發關愛基金在廣東韶關試點落地。過去三個多月,我們團隊的小伙伴多次去廣東韶關的仁化縣、乳源縣給當地的老人進行聽力檢測和騰訊天籟inside助聽器驗配。
在過去的半年時間里,天籟實驗室攜手助聽器廠商智聽科技進行聯合研發,推出了摯聽(騰訊天籟inside)公益助老款,基于騰訊會議完全自研實現的助聽器核心算法解決方案,將復雜場景下的語音清晰度和可懂度提升了85%,讓千元級的國產助聽器也能媲美萬元級進口助聽器產品的體驗。
在我們搭建的兼容國際IEC 60118和ANSI S3.22標準測試環境下,我們對助聽器的六大關鍵指標進行了測量,系統延遲直接決定了整個助聽器的佩戴體驗;滿檔增益進一步決定了對中重度患者的聽力補償;語音質量、空間噪聲決定了在安靜環境下的音質體驗;家居噪聲和街道噪聲則是聽障老人平時花時間最多的場景。在這六大關鍵指標上,可以看到我們的表現非常出色,分別和京東上購買的兩款來自于北歐的進口助聽器(相比),一款價值3萬元左右,另一款價值不到2萬元,分別在我們的環境下進行了1對1的比較,可以看到天籟inside助聽器的體驗非常出色和均衡,在六大關鍵指標上都已經達到,甚至部分指標超過了進口助聽器的水平。
當然我們也意識到,目前我們的方案是基于一款通用的藍牙處理芯片,這跟進口助聽器的專用處理芯片相比,在功耗上我們還有很大的區別,要進一步優化和提升,這也是為我們日后的工作,指明了進一步努力的方向。
我們把騰訊會議天籟實驗室過往多年積累的技術,包括國際比賽2020年DCASE聲學場景識別和分類比賽中獲得亞軍的關鍵突破性技術,以及今年年初我們在ICASSP 2022 DNS語音增強和降噪比賽中獲得冠軍的個性化聲紋技術用在助聽器方案里。我們還把騰訊會議Rooms場景下獲得騰訊公司技術突破獎的遠場波速成形和反饋抑制等技術,針對助聽器的低延時、低功耗場景了進行深度優化。我們還和智聽科技的聽力學專家一起,把針對中重度患者特別需要的聽力補償和聽力驗配公式結合WDRC技術進行了專門的適配和驗配,用來組成我們的助聽器方案。后續我們會把助聽器完整的天籟inside解決方案面向業內的合作伙伴進一步開放,共同提升當前助聽器的使用體驗。
除了會議降噪、語音增強等場景,我們的技術也在騰訊會議的實時字幕中得到廣泛應用。最近幾年,無論是開會、上課、教學等等,在線協同的需求越來越多。為幫助聽障人士更友好地使用協同辦公工具,今天騰訊會議也宣布與騰訊公益慈善基金會共同發起無礙溝通公益夢想活動,用戶參與騰訊會議、低碳會議等公益行動獲得小紅花,并捐出以支持該公益夢想,通過“一花一夢想”創新的公益形式,我們將面向2萬名聽障人士捐贈無障礙辦公禮包,持續關注聽障人士的用戶體驗,并提供相應的關愛服務。
在此,我們也希望有更多的廠商、公益組織和伙伴一起加入我們,讓每一位聽障人士都可以聽清世界的聲音。
謝謝大家!