日前，2021全球頂級語音大會INTERSPEECH論文投稿收錄結果揭曉。繼去年5篇入選后，騰訊英語君憑借在“口語評測發音分”、“口語評測魯棒性”等方面獲得的重大研究突破和技術落地，今年共有9篇論文入選。本次入選論文的研究方向涵蓋口語評測發音、音素錯誤檢測、口語評測魯棒性、口語評測韻律、口語評測場景下的語音識別等。
INTERSPEECH是由國際語音通訊協會創辦的語音信號處理領域的頂級科技盛會，歷屆INTERSPEECH會議都受到了全球各地語言領域人士的廣泛關注。騰訊英語君的論文連續被這一國際頂級盛會所收錄，也證明其在AI語音科研領域強大的創造力與實力。
深入探索口語評測功能成果顯著 對應更多英語教育場景
在本次入選的9篇論文中，論文《Deep feature transfer learning for automatic pronunciation assessment》提出了一種自動發音評估的遷移學習方法，直接利用聲學模型的深層特征，而不是 GOP 等傳統特征，并將聲學知識從 ASR 模塊遷移到特定的評分模塊。基于注意力機制考慮話語中不同粒度之間的關系，僅更新此模塊以更快地遷移和適應各種發音評估任務。
論文《A noise robust method for word-level pronunciation assessment》提出了一種基于領域對抗(DAT) 方法的詞級發音評估噪聲魯棒模型，將干凈和噪音情況下的發音評估視為源域和目標域，通過結合發音評估和噪聲域鑒別來優化網絡。實驗結果表明，在不同噪聲條件下，所提出的模型在Pearson相關系數 (PCC) 和準確度方面比基線平均高出 3% 和 4%。
論文《A neural network-based noise compensation method for pronunciation assessment》考慮音素屬性，采用雙向長短期記憶網絡（BLSTM）進行單詞中音素上下文建模，對噪聲條件下的受損的音素的GOP進行特征補償。考慮到不同程度的噪音，不同發音水平下基于 ASR 的 GOP 分數可能會有不同的影響，將 GOP補償任務與預測發音熟練度等級的輔助任務相結合。所提出的模型在皮爾遜相關系數 (PCC) 和在嘈雜條件下進行發音評估的準確性方面優于基線。此外，它還證明了該網絡在各種嘈雜情況下的穩健性。
論文《Explore Wav2vec 2.0 for Mispronunciation Detection》利用聲學預訓練模型wav2vector,提取豐富的發音特征，極大的提升了細粒度音素判錯的準確度，實現更加精細的發音反饋能力。
通過持續科研創新，騰訊英語君打造了特有的音素級AI口語評測功能，基于海量英語發音大數據的垂直研究，深挖中國學生發音習慣，打造獨家學生發音特征體系。本次被收錄的論文《Deep feature transfer learning for automatic pronunciation assessment》在口語評測方面實現了重大突破，能夠更快地針對中國學生提供糾正、提升和拓展訓練的遞進性學習方式，幫助學生全面提升英語口語能力，同時也提升了老師的教學效率。
在打造特有的音素級AI口語評測功能的同時，騰訊英語君還針對英語教育中的實際場景進行深入探索，基于AI技術和大數據能力，為英語教學、考試質量提升提供助力。例如，“口語評測魯棒性”能在人聲噪聲、設備噪聲、白噪聲等場景下進行發音評測，在針對英語聽說考試中的單詞、句子、段落朗讀等五大題型進行評測時，實現AI機器評分+專家抽樣/仲裁的形式進行打分，全面提升英語考試評分效率。
以AI技術提升考試效率 騰訊英語君助力學校智慧化轉型
依托于騰訊三大AI實驗室技術能力，騰訊英語君能夠運用神經網絡算法、圖像識別技術、語音識別和口語評測技術、自然語言處理、大數據應用等AI能力，為產品專屬開發多項功能，提高教學質量和效率，幫助學生提高英語聽、說能力。
以英語聽說考試為例，借助行業領先的語音識別、口語評測等AI技術，騰訊英語君圍繞“教、學、考、評”四大場景，推出了聽說考試系統和練習系統，基于標準化、一致性的AI評分技術，致力于解決聽說考試評價標準難統一、公平性難保證、人力成本高等問題，實現考試評閱的準確性和公平性。
目前，騰訊英語君已為上海松江區34所學校提供了標準化考場建設、模考和訓練系統建設等基礎建設服務，在助力優化傳統考試模式的同時，積極推動當地教育智慧化升級轉型；參與多場中高考口語考試的機器自動評分，包括上海、聊城、青海等多個省市，從入場到最后提交報告時長在一周左右，機器評分可保證在兩天內完成。同時，騰訊英語君還為深圳市光明區小、初、高41所學校提供區域統一的英語聽說教學質量監測全流程方案和評分服務，引導教師高度重視學生的英語聽說能力，幫助學生打好堅實的口語基礎。
此外，騰訊英語君為廣東佛山市南海區的150多所小學、17萬名學生和1500名老師提供日常英語教學和學習輔助服務，實現了統編教材、線上線下資源融通共享，并結合AI口語評測，組建常態化的聽讀訓練活動，構建了線上線下混合式閱讀學習新模式，提升學生的綜合表達能力和英語素養。
騰訊英語君已授權或公開專利四十余篇，涉及中英文口語評測、韻律度評測、口語考試系統NLP技術，口語考試系統語音技術、口語考試系統評測，作文批改，語法糾錯等多個領域，為科學高效的AI英語教學提供驅動力。
未來，騰訊英語君將繼續秉持形成性評價的教育理念，持續技術創新，并聯合生態伙伴不斷探索AI技術在教育領域中的應用邊界，在為更多孩子提供科學、高效創新英語教育模式的同時，為推動教育行業智慧化轉型和發展提供助力。
