2018年10月22日-23日期間,第六屆英國文化教育協會英語語言測評"新方向"研討會於馬來西亞吉隆坡召開,針對學習系統標準化議題展開探討。新東方教育科技集團國外考試推廣管理中心副主任, 口語寫作智能評分項目研發負責人宋鵬昊老師出席此次會議,並就"A.I如何在託福和雅思的口語測試中應用"主題研究進行會議報告,與現場嘉賓分享了在該領域研究中的主要發現,並向觀眾展示了RealSkill智能評分產品的實踐成果,獲得與會者的關注和讚譽。
英語語言測評"新方向"研討會是英國文化教育協會於東亞舉辦的年度會議,旨在為當地和全球英語語言測評趨勢和方法提供不同的視角及解讀,已分別於北京、東京、首爾、河內和上海成功舉行五屆研討會。該會議為區域和國際政策決定者、教育研究人員、學者及教師、以及測評從業者提供了探討教育領域最新發展動態的機會,和全球範圍互動、交流信息的平臺。
英語語言測評"新方向"研討會現場
多位全球語言學習領域專家出席會議,新東方宋鵬昊老師發表演講
本次"新方向"研討會圍繞"學習體系中的標準"這一議題展開深入探討與研究。全球多位語言學習領域專家學者針對在語言測試和評估中的語言標準和能力框架,以及其與教育背景之間的聯繫等一系列問題,提出了全球視角下的創新方法和研究。
本次大會從全球數百篇專業論文中選擇40篇論文進行主題演講。英國文化協會英語和考試測試研發主管Barry O'Sullivan教授,北京外國語大學中國外語教育研究中心專職研究員韓寶成教授,劍橋大學劍橋評核主管Hanan Khalifa博士,都就不同國家和地區的語言考試及教育問題發表演講,為語言教育研究提出了多元化的思考與方向。
多位語言學習領域專家學者出席會議並發表演講
其中,宋鵬昊老師的研究主題"A.I如何在託福和雅思的口語測試中應用"從數百篇學術研究中脫穎而出,受邀於會議首日進行主題發言。
會議現場,宋鵬昊老師詳細介紹了新東方在語言測評領域的思考與探索。該研究立足於新東方對語言測評與託福雅思考試的多年積累與實踐,將智能評分產品與託福雅思考試相結合,帶來更為專業的、人性化的測評與教學方法。宋鵬昊老師現場介紹了該研究的理論基礎,核心原理,實施方法,並分享了該領域研究中的主要發現與結論。
宋鵬昊老師進行會議報告
報告中,宋鵬昊老師介紹了中國英語學習者在口語學習中的主要問題及原因。他在發言中提到,"學員在學校情境下缺少針對性的學習,注重交際的教學方法在實際教學實踐中應用比較少,使學生用英語溝通交流和解決問題的機會非常少。"同時,在日常口語學習和託福雅思備考中,多數學生無法獲得對自己表現的即時反饋和相對應的提升建議,導致學習效率受到影響。
宋鵬昊老師認為對於託福雅思考生而言,這種情況對於學習者的學習效果和學習意願會產生負面影響;而即時反饋則會給學習者帶來更強的"correction memory",引導學生更好地學習這一內容,提升學習意願及自信心。而學習意願和自信心的提高,會對學習表現產生積極的促進作用。
多角度解讀口語智能測評,託福雅思應用優勢顯著
此外,宋鵬昊老師還深入介紹了口語智能測評研究對於託福雅思考試的實際應用價值。在研發過程中,口語智能測評可以根據託福雅思考試特徵,從不同評分角度建立特徵分析模型。
宋鵬昊老師介紹口語智能測評研究
以雅思口語分析為例,口語智能測評將以真實的答題音頻,從流利度與連貫性、發音、詞彙多樣性及準確性、語法多樣性及準確性四個類別建立模型,再通過能夠反映每一項表現的語言特徵進行分析。例如,通過"連續語音時長,每秒單詞數,每分鐘單詞數,停頓頻率,長停頓次數,平均停頓時長,回讀次數"等大量指標分析,來對一個學員的"語言流利度"進行建模。而這類針對語言特徵的分析,可以幫助教師設計更有針對性的教學活動。
智能評分產品研發過程公開,新東方以學術研究,人工智慧為產品賦能,推動教育領域的研究發展
新東方一直不斷在教育學術研究領域縱深發力,儘可能的為學生提供更加專業和多元的學習方式。宋鵬昊老師提到,該研究並不僅僅停留於理論階段,目前新東方已有多個項目應用了智能測評系統。其中RealSkill評分產品是人工智慧測評的一次突破性實踐,結合了科大訊飛人工智慧技術與新東方龐大的學生數據資源,RealSkill在語料分析和賦碼,機器學習,效果驗證等研究環節均取得了實質性突破。RealSkill的評分效果與考官打分高度接近,在學生端與教師端均反饋良好。目前實際應用中,能夠保持月均7000次以上的有效評分。智能測評產品的應用有助於建立完整高效的學習閉環,宋鵬昊老師提到,新東方在線通過將智能測評融入整體學習流程,使託福雅思"知心自適應學習系統"的學習流程和體驗更加完整。通過對學員入學測評,學習內容定製,交互內容推送,口語寫作測評,考前模擬等多個環節的設計和打磨,建立完整的學習閉環。
宋鵬昊老師介紹新東方在線案例
在研究發現和結論分享部分,宋鵬昊老師對業內關注的幾個核心問題給出了具有充分數據支持的結論。例如,智能評分在同一科目不同問題類型應用中的詳細數據分析,以及口語寫作智能評分研究中的難點對比,託福雅思智能評分研究中的難點對比等。參會嘉賓對宋鵬昊老師在該項目的研究表現出極大的興趣和關注,多位學者在現場提問並與宋鵬昊老師進行探討。
宋鵬昊老師與學者們現場探討
這些研究結論不僅僅給在場的優秀學者提供了很好的參考,也標誌著新東方將持續拓展語言測評領域的研究。我們也期待通過此次會議,可以使更多教育學者就語言測評問題展開探討,更好的推動該領域的學術研究。新東方也將利用自己在教育領域的優勢,依靠科學化管理和智能化學習平臺,結合新東方大量的學生學習數據,從教研培訓標準化,系統化,流程化等多方的經驗與大家進行更多的學術探討與交流,時刻專注教育領域的學術研究,不斷為教育領域帶來新的思考和方向,促進英語語言教育的發展與繁榮。