近日，被譽為全球最具影響力的語音行業(yè)會議的INTERSPEECH揭曉收錄論文名單，騰訊英語君共有5篇口語測評論文入選，涵蓋準(zhǔn)確度模型、韻律聲學(xué)探測、ASR文本后處理、共振峰預(yù)測等技術(shù)優(yōu)化，名列國內(nèi)企業(yè)前茅。
（論文入選INTERSPEECH 2020）
作為全球最大的綜合性語音信號處理領(lǐng)域的科技盛會，歷屆INTERSPEECH會議都備受深受行業(yè)關(guān)注，據(jù)主辦方數(shù)據(jù)顯示，INTERSPEECH 2020共收到數(shù)以千計的論文投稿。騰訊英語君在國際頂級會議上的杰出表現(xiàn)，再次展示了其在AI語音科研領(lǐng)域強大的創(chuàng)新實力。
持續(xù)提升口語測評能力，助力科學(xué)英語口語教學(xué)
在此次騰訊英語君入選的論文中，《Automatic scoring at multi-granularity for L2 pronunciation》提出了一種多層級的口語評測準(zhǔn)確度模型，可以較大地提高口語評測準(zhǔn)確度，與人工打分相關(guān)度高達(dá)0.88。該模型可以同時對如音素、單詞、句子多個細(xì)粒度進(jìn)行評測；并以半監(jiān)督學(xué)習(xí)對音素進(jìn)行判錯，減少對音素人工標(biāo)簽的依賴；并采用注意力機制，得到與人工打分相關(guān)度更高的單詞得分；另外還能夠多任務(wù)學(xué)習(xí)，共享發(fā)音特征，優(yōu)化句子評分與音素判錯。
論文《Joint detection of sentence stress and phrase boundary for prosody》則針對口語評測中韻律維度的核心技術(shù)進(jìn)行優(yōu)化。通過提取音素級別、音節(jié)級別，單詞級別的聲學(xué)特征，利用序列網(wǎng)絡(luò)，獲得音素、音節(jié)、單詞與上下文相關(guān)的特征，對句重讀與句邊界調(diào)同時探測，配合多任務(wù)學(xué)習(xí)方式，以達(dá)到韻律聲學(xué)探測上更高的準(zhǔn)確度。
論文《Joint prediction of punctuation and disfluency in speech transcripts》基于BERT模型，對ASR文本進(jìn)行標(biāo)點添加與不流利度去除，極大提升了ASR文本后處理的效果，為口語考試系統(tǒng)中不同題型提供了較好的文本特征基礎(chǔ)。
通過持續(xù)科研創(chuàng)新，騰訊英語君打造了特有的音素級AI口語評測功能，基于海量英語發(fā)音大數(shù)據(jù)的垂直研究，深挖中國學(xué)生發(fā)音習(xí)慣，打造獨家學(xué)生發(fā)音特征體系，針對中國學(xué)生提供糾正、提升和拓展訓(xùn)練的遞進(jìn)性學(xué)習(xí)方式，幫助學(xué)生全面提升英語口語能力，同時也提升了老師的教學(xué)效率。
打造K12領(lǐng)域AI教輔解決方案，讓英語學(xué)習(xí)更科學(xué)高效
騰訊英語君背靠騰訊三大AI實驗室技術(shù)能力，運用神經(jīng)網(wǎng)絡(luò)算法、圖像識別技術(shù)、語音識別和口語評測技術(shù)、自然語言處理、大數(shù)據(jù)應(yīng)用等AI能力，為產(chǎn)品專屬開發(fā)多項功能，提高教學(xué)質(zhì)量和效率，幫助學(xué)生提高英語聽、說能力。
早在2019年11月,上海市松江區(qū)38所學(xué)校、7978名學(xué)生已在初中英語聽說考試使用騰訊英語君聽說考試平臺,在老師組卷、學(xué)生考試及考試監(jiān)控等聽說考試實施流程及機器評分驗證環(huán)節(jié),極大地提高了考務(wù)管理人員的工作效率和評分的精準(zhǔn)度。
圖:上海對外經(jīng)貿(mào)大學(xué)附屬松江實驗學(xué)校考試現(xiàn)場
據(jù)介紹,該系統(tǒng)主要由考試系統(tǒng)、考務(wù)管理及監(jiān)考系統(tǒng)、AI評分系統(tǒng)構(gòu)成,涵蓋了出卷、組卷、學(xué)生考試、考試監(jiān)控等聽說考試實施流程及機器自動評分驗證的流程。例如,針對英語聽說考試中的單詞、句子、段落朗讀,快速應(yīng)答、看圖作文5大題型,騰訊英語聽說考試系統(tǒng)能夠通過AI機器評分+專家抽樣/仲裁的形式進(jìn)行打分,為考試提供專業(yè)服務(wù)。
除了深耕音素級口語評測技術(shù)，騰訊英語君還在多個維度應(yīng)用AI能力，助力教學(xué)效率提升。比如，基于圖像識別技術(shù)的拍課本自學(xué)功能，學(xué)生通過手機攝像頭掃描即可準(zhǔn)確識別課本內(nèi)容，提高自學(xué)便利性和效率；自動化批閱和統(tǒng)計，輔助老師實現(xiàn)數(shù)字化教學(xué)任務(wù)，多元化的學(xué)習(xí)資源幫助學(xué)生熟悉不同情景和模式；智能學(xué)情管理通過大數(shù)據(jù)追蹤、分析和統(tǒng)計，輔助教師進(jìn)行教學(xué)質(zhì)量的跟蹤管理。
目前，騰訊英語君已授權(quán)或公開專利三十余篇，涉及中英文口語評測、韻律度評測、口語考試系統(tǒng)NLP技術(shù)，口語考試系統(tǒng)語音技術(shù)、口語考試系統(tǒng)評測，作文批改，語法糾錯等多個領(lǐng)域，為科學(xué)高效的AI英語教學(xué)提供驅(qū)動力。
未來，騰訊英語君將繼續(xù)秉持形成性評價的教育理念，持續(xù)技術(shù)創(chuàng)新，讓優(yōu)質(zhì)的英語教學(xué)內(nèi)容走進(jìn)所有中國家庭，為更多孩子提供科學(xué)、高效的創(chuàng)新英語教育模式，成為每一個學(xué)生的“數(shù)字英語老師”。
