近日,被譽為全球最具影響力的語音行業(yè)會議的INTERSPEECH揭曉收錄論文名單,騰訊英語君共有5篇口語測評論文入選,涵蓋準確度模型、韻律聲學探測、ASR文本后處理、共振峰預測等技術優(yōu)化,名列國內(nèi)企業(yè)前茅。
(論文入選INTERSPEECH 2020)
作為全球最大的綜合性語音信號處理領域的科技盛會,歷屆INTERSPEECH會議都備受深受行業(yè)關注,據(jù)主辦方數(shù)據(jù)顯示,INTERSPEECH 2020共收到數(shù)以千計的論文投稿。騰訊英語君在國際頂級會議上的杰出表現(xiàn),再次展示了其在AI語音科研領域強大的創(chuàng)新實力。
持續(xù)提升口語測評能力,助力科學英語口語教學
在此次騰訊英語君入選的論文中,《Automatic scoring at multi-granularity for L2 pronunciation》提出了一種多層級的口語評測準確度模型,可以較大地提高口語評測準確度,與人工打分相關度高達0.88。該模型可以同時對如音素、單詞、句子多個細粒度進行評測;并以半監(jiān)督學習對音素進行判錯,減少對音素人工標簽的依賴;并采用注意力機制,得到與人工打分相關度更高的單詞得分;另外還能夠多任務學習,共享發(fā)音特征,優(yōu)化句子評分與音素判錯。
論文《Joint detection of sentence stress and phrase boundary for prosody》則針對口語評測中韻律維度的核心技術進行優(yōu)化。通過提取音素級別、音節(jié)級別,單詞級別的聲學特征,利用序列網(wǎng)絡,獲得音素、音節(jié)、單詞與上下文相關的特征,對句重讀與句邊界調(diào)同時探測,配合多任務學習方式,以達到韻律聲學探測上更高的準確度。
論文《Joint prediction of punctuation and disfluency in speech transcripts》基于BERT模型,對ASR文本進行標點添加與不流利度去除,極大提升了ASR文本后處理的效果,為口語考試系統(tǒng)中不同題型提供了較好的文本特征基礎。
通過持續(xù)科研創(chuàng)新,騰訊英語君打造了特有的音素級AI口語評測功能,基于海量英語發(fā)音大數(shù)據(jù)的垂直研究,深挖中國學生發(fā)音習慣,打造獨家學生發(fā)音特征體系,針對中國學生提供糾正、提升和拓展訓練的遞進性學習方式,幫助學生全面提升英語口語能力,同時也提升了老師的教學效率。
打造K12領域AI教輔解決方案,讓英語學習更科學高效
騰訊英語君背靠騰訊三大AI實驗室技術能力,運用神經(jīng)網(wǎng)絡算法、圖像識別技術、語音識別和口語評測技術、自然語言處理、大數(shù)據(jù)應用等AI能力,為產(chǎn)品專屬開發(fā)多項功能,提高教學質(zhì)量和效率,幫助學生提高英語聽、說能力。
早在2019年11月,上海市松江區(qū)38所學校、7978名學生已在初中英語聽說考試使用騰訊英語君聽說考試平臺,在老師組卷、學生考試及考試監(jiān)控等聽說考試實施流程及機器評分驗證環(huán)節(jié),極大地提高了考務管理人員的工作效率和評分的精準度。
圖:上海對外經(jīng)貿(mào)大學附屬松江實驗學校考試現(xiàn)場
據(jù)介紹,該系統(tǒng)主要由考試系統(tǒng)、考務管理及監(jiān)考系統(tǒng)、AI評分系統(tǒng)構(gòu)成,涵蓋了出卷、組卷、學生考試、考試監(jiān)控等聽說考試實施流程及機器自動評分驗證的流程。例如,針對英語聽說考試中的單詞、句子、段落朗讀,快速應答、看圖作文5大題型,騰訊英語聽說考試系統(tǒng)能夠通過AI機器評分+專家抽樣/仲裁的形式進行打分,為考試提供專業(yè)服務。
除了深耕音素級口語評測技術,騰訊英語君還在多個維度應用AI能力,助力教學效率提升。比如,基于圖像識別技術的拍課本自學功能,學生通過手機攝像頭掃描即可準確識別課本內(nèi)容,提高自學便利性和效率;自動化批閱和統(tǒng)計,輔助老師實現(xiàn)數(shù)字化教學任務,多元化的學習資源幫助學生熟悉不同情景和模式;智能學情管理通過大數(shù)據(jù)追蹤、分析和統(tǒng)計,輔助教師進行教學質(zhì)量的跟蹤管理。
目前,騰訊英語君已授權(quán)或公開專利三十余篇,涉及中英文口語評測、韻律度評測、口語考試系統(tǒng)NLP技術,口語考試系統(tǒng)語音技術、口語考試系統(tǒng)評測,作文批改,語法糾錯等多個領域,為科學高效的AI英語教學提供驅(qū)動力。
未來,騰訊英語君將繼續(xù)秉持形成性評價的教育理念,持續(xù)技術創(chuàng)新,讓優(yōu)質(zhì)的英語教學內(nèi)容走進所有中國家庭,為更多孩子提供科學、高效的創(chuàng)新英語教育模式,成為每一個學生的“數(shù)字英語老師”。