假如讓AI來批改英語作文……

2020-12-08 鈦媒體APP

圖片來源@視覺中國

在英語學習「聽說讀寫」四個環節中,中國學習者往往擅長「聽」和「讀」, 「說」和「寫」卻是典型的薄弱環節。

對於提升「說」的能力,我們有很多選擇,無論是口語學習的APP,還是真人授課服務,供給端競爭非常激烈。

但對於寫作的環節,我們卻很少有機會得到訓練。書面交流不僅更要比口語更遵守語法規則,還對一個人的詞句篇章、構思邏輯等有更高的要求。同時,寫作環節的反饋,會耗費更多的精力和時間。

為了解決英語學習者在寫作上的難點和痛點,近期,網易有道詞典上線了以人工智慧驅動的批改英文作文的功能——AI作文批改。據說,這位「AI老師」的專業程度,堪比四六級和高考閱卷老師。

有道 AI 作文批改功能體驗

打開網易有道詞典APP,「作文批改」功能已經在首頁顯示,一目了然。點擊之後,我們可以選擇可以批改的類型,範圍從K12到大學四六級,以及託福雅思等出國考試,非常全面。

有道AI作文批改上,有拍照批改模式和手動輸入模式兩種。鑑於目前大多數考試寫作的場景是基於手寫,我們選擇了主打手寫識別的拍照模式。

為了更沉浸式地感受AI老師,首先,我假裝自己是一名高三學生,寫(抄)了一篇150詞左右詞彙的英文作文。作文的大意是,李明向好友詹姆斯(James)寫了一封信,解釋為什麼不能陪他在暑期休假以及相關事情。

AI系統將圖片識別之後,首先會提示你,點擊屏幕可以編輯作文,還會告知你提交前可以再檢查一遍。此處估計是擔心人工智慧對於手寫體識別可能會出現的失誤。

這一提醒環節設置十分必要。鈦媒體在體驗過程中發現,即便是識別的準確率非常高,但也會有個別單詞,因為字跡潦草而出現失誤。

確認提交之後,有道AI作文批改給這篇小作文打了17分(總分25分),並且,細化到詞彙、結構、語法和內容方面均有評級。

更為重要的是,在點擊每一處標紅的地方,有道AI老師都詳細地指出了錯誤及其原因,還給出建議修正的意見。

為了讓作者的寫作水平更進一步,有道AI老師對這篇作文給出了如下嚴厲不失細緻的評語;

「文章字數疑似超出該考試字數要求;在高中級別下,有一定詞彙積累,能使用少量高級詞彙,但還需更多積累;文章語句生硬,需加強上下文聯繫;單詞拼寫基本正確,詞彙基礎紮實;存在較多語法錯誤。」

總的來說,有道的AI作文批改功能,針對不同學段和不同類別的考試水平進行相對專業的打分,並從詞、句、篇章進行點評和推薦,生成詳細的報告。在語法糾正方面,也給出了清晰的解析,直擊中國考試的痛點,非常適合備考的學員在日常的練習。

有道 AI 作文批改 VS 微軟愛寫作

除了有道之外,目前市面上由人工智慧驅動的英文改寫的產品,還有巨頭微軟旗下的微軟愛寫作(微軟小英),和估值已經超過10億美元的英文在線寫作工具「Grammarly」。

不過,很遺憾的是,目前Grammarly 沒有上線拍照識別手寫的功能,因而,為了相對客觀的對比,我們先體驗了微軟愛寫作的產品。

鈦媒體發現,微軟愛寫作目前主要是網頁版,還沒有上線中國區的App Store的相關APP。不過,它已經嵌入了「微軟小英」的公眾號內。該公眾號是微軟亞洲研究院打造的一款免費的英語學習公眾號,主打AI與英語學習相結合的體驗。

在公眾號內,選擇「搶先體驗」—「發現工具」—「作文打分」,入口相對隱蔽。並且,公眾號在提示用戶,更推薦大家使用web端,沒有切合當前移動網際網路的大趨勢。

同樣還是上述手抄作文,微軟愛寫作識別了之後,給出了23分(不過總分是多少不清楚),以及從詞彙句式、文章流暢性、文章內容和拼寫語法四個角度給出了評價。

微軟的系統對這篇作文評價還不錯。與有道AI老師比起來,微軟小英AI老師要溫和得多了,立馬讓人撿起來了剛被擊退的英文寫作的信心。

不過仔細一想,這更像是基於模板的「統一回復」,因為微軟愛寫作並沒有指出具體的語法和句法的錯誤,也沒有給出今後如何提高的針對性意見。

有道 AI 作文批改 VS Grammarly

體驗完微軟愛寫作,再看看改寫工具Grammarly,畢竟這是一款日活已經超過2000萬用戶的產品。雖然它不能手寫識別,但我們可以從挑選單句,進行語法錯誤糾正方面的對比。

例句1: Like students sing English song.

有道詞典

有道詞典:疑似動詞時態錯誤,建議將「sing」修正為「singing」;疑似名詞單複數錯誤,建議將「song」修正為「songs」.

Grammarly

Grammarly(免費版):名詞單複數錯誤,建議將「song」改為「songs」.

例句2:When the girl will leave, she fount an old begger in the tree and looked at angry and cold.

有道詞典

有道詞典:疑似用詞不當,建議將「will leave」修正為「left」;疑似動詞時態錯誤,建議將「fount」修正為「found」;疑似名詞誤用,建議將「begger」修正為「beggar」等.

Grammarly

Grammarly(免費版):建議將「begger」更改為「beggar」.

對比小結:我們發現,有道詞典更能識別出較複雜的語法錯誤,如時態錯誤(過去式居多),動詞原形與動名詞誤用。Grammarly偏向簡單的語法修改,如介詞誤用,名詞單複數錯誤等。

例句 3: Nest Tuesday, our class is going to a music camp.

有道詞典

有道詞典:疑似拼寫錯誤,建議將「Nest」修正為「Next」.

Grammarly

Grammarly(免費版):無錯誤。

對比小結:有道詞典更能識別不符合原文語境的單詞誤用。

總結:

經過對比體驗,我們發現,三款產品各有優劣。不過,綜合來看,有道AI作文批改,用起來更熟悉且順手——因為看上去它更理解中國學生的學習習慣、痛點與難點。

有道AI老師是如何做到的?這背後的核心邏輯又是什麼?

從網易有道詞典那裡,鈦媒體了解到,網易有道詞典AI作文批改功能主要由三個核心模塊構成:評分模塊、評語模塊和糾錯模塊。

有道AI作文批改評分模塊框架

其中,評分的模型框架結合了傳統的方法和深度學習的方法,以詞、句、篇章作為核心的評分維度;評語模塊提供全文評語、詞彙推薦、範文推薦;糾錯模塊提供14個類別的語法錯誤識別及修正,包括淺層的拼寫錯誤、深層的語法錯誤等。

同時,我們得到了一份測試報告顯示,與國際上較為知名的兩個引擎相比,在作文批改引擎方向,網易有道詞典的算法性能更好。

評測時間 2020-03-31; P值-Precision 精確率, R值-Recall 召回率, F0.5-P值與R值的調和平均,其值越高,通常表示算法性能越好。

以上表格的測試集來源於用戶日誌,具體來自三個方向,一是他們海外詞典批改服務的用戶請求日誌,二是考研用戶的請求日誌,三是來自有道智雲的行業數據集。有道團隊將這三個數據集中各抽出一部分來做測試集,抽選規則隨機。

經過如上體驗和對比,尤其是從一些細節方面,可以看出來,有道AI作文批改的研發團隊,是在了解了中國學生的難點和痛點之後,再進行了針對性和差異化的開發。

這在當前優質老師資源分布不均,且十分有限的情況下,有道AI作文批改老師的出現,無疑為大多數英語學習者,提供了一位免費的專屬私人教師。

更為重要的是,與真人老師比起來,有道AI作文批改老師在識別後,可以隨時隨地,在第一時間給出作業反饋,以及後續學習、提高的建議,更細緻且高效,這不僅可以幫助學生在備考之際給出「臨門一腳」的指導,還能在日常反覆訓練中起到重要的作用。(本文首發鈦媒體App,作者|李程程)

相關焦點

  • 1億中國人已被AI批改過作業 覆蓋了國內6萬所學校!
    你被機器批改過作業麼?最近,老外特別關注AI在中國教育界的進展,例如人臉識別進課堂、高中AI教材出版等等,這一次關注的焦點是:AI代替老師批作業。起因是,英文媒體《南華早報》最近有篇報導[1]說,中國有大約6萬所學校都在用人工智慧來批改學生的作業,每四所學校中就有一所在用。
  • 有道詞典推出全新AI技術 一鍵自動批改英語作文
    【環球網科技綜合報導 記者 樊俊卿】據搜狐網4月8日報導,網易旗下產品有道詞典推出全新AI技術,通過人工智慧自動批改英語作文。有道詞典表示,推出這一功能是希望能夠為各個學段的學生提供作文水平檢測的幫助,從而快速提升英語寫作能力。
  • 英語作文批改 到底哪家強?
    當時為了寫出一篇高質量的作文,簡直是頭昏腦脹苦不堪言。後來才發現有批改網這種神器。那麼問題來了,英語作文批改,到底哪家強?,包括高校、中小學、培訓機構等,通過輔助老師批改作文來提高學生的英語寫作能力,屬國內首款。
  • 積極適應「AI批改作文」的潮流
    近日,有媒體報導國內外教育系統都開始把AI打分應用在作文打分上,僅國內就已經有超過1.2億人次被AI批改過作文。這引發了人們一連串的質疑。據筆者了解,目前AI改作文,主要運用在第二語言學習的寫作者上,比如中國人學英語,或者母語是英語者學習中文。語言學習,需要大量的反覆練習,而最難練習的是寫作能力。眾所周知,作文批改的人力成本非常高,不僅費時,而且對批改者專業素養有要求,這就在提高寫作能力方面形成了巨大的教育鴻溝。
  • 考研英語作文批改服務
    ,畢竟考研英語一、英語二作文的分數比值還是很大的,英一大小作文30分,英二大小作文25分呢。 微信公眾號-世紀高教在線,上線了考研英語作文批閱服務,英一,英二都有,幫助你批改英語作文,無論你是自己寫的,還是套模板的,都可以通過這項服務來進行日常寫作的提高與練習,只有這樣你才能真正的提高寫作分數。
  • 網易有道詞典上線AI作文批改功能 可自動批改雅思、四六級英語作文
    近日,網易有道詞典推出全新功能——AI作文批改,通過人工智慧技術自動批改英語作文,幫助各個學段學習者更好地檢測作文水平,快速有效地提升英語寫作能力。據了解,該功能是繼有道神經網絡翻譯後,網易有道推出的又一重要的人工智慧技術應用。
  • 網易有道詞典上線AI作文批改功能,可自動批改雅思、四六級英語作文
    藍鯨教育4月8日訊,近日,網易有道詞典推出新功能「AI作文批改」,通過人工智慧技術自動批改英語作文,幫助各個學段學習者檢測作文水平,提升英語寫作能力。使用者可直接拍照或手動輸入需批改的作文,以拍照批改為例,可選擇照片庫中提前拍好的作文圖片,或直接對手寫作文進行拍照。系統會錄入和識別具體內容,識別後也支持手動修改調整後再做批改。有道詞典AI作文批改會從詞、句、篇章多個維度,對英語作文進行打分和批改,並生成報告便於後續學習提高。
  • 用機器批改英語作文替代人工批改,「句酷批改網」想讓大學生以最高...
    而從去年到今年,似乎教育領域也在接受這一趨勢,原本重度依賴人工的作文批改,現在網際網路人也想將它們自動化——比如申論作文的批改,比如英語作文批改。句酷批改網就是提供英語作文批改服務的公司。那麼批改網可以讓計算機來批改作文的原理是什麼呢?其實說起來不很複雜,針對不同的考試類型,他們會寫出不同的打分公式,每個打分公式有192個獨立可測量的參照指標,最終系統會選擇十幾個和作文分數相關性最高的指標來打分。
  • 網易有道推AI作文批改功能 可自動批改英語作文
    近日,有消息稱,網易有道詞典推出了AI作文批改新功能,其可自動批改英語作文。據了解,網易有道詞典的AI作文批改功能主要是由評分模塊、評語模塊和糾錯模塊三個模塊構成。這三個模塊構成了AI作文批改的檢測、批改、生成報告等多個功能。在網易有道詞典APP中,使用者可以拍照或手動輸入需要批改的作文。
  • 用機器批改英語作文?「句酷批改網」做的就是這樣的事
    而從去年到今年,似乎教育領域也在接受這一趨勢,原本重度依賴人工的作文批改,現在網際網路人也想將它們自動化——比如申論作文的批改,比如英語作文批改。  句酷批改網就是提供英語作文批改服務的公司。(批改體驗可以看這裡)  如此一來,學生可以利用自動化的批改不斷訓練自己的寫作水平,不必再等待老師每周一次作文批改的長時間間隔,老師們的時間資源也可以被節省下來,把更多的精力放在掌握學生學習情況、思考如何輔導學生提升寫作水平上。   那麼批改網可以讓計算機來批改作文的原理是什麼呢?
  • 讓英語作文更精彩的智能批改工具
    點擊左上角關注我們 在英語學習中,寫作是對詞彙、語法、閱讀、表達的全方位考察,可以很好地反映學習者的語言綜合素養。然而,如何實現對英語作文快速準確地評判並給予反饋,成為學生、老師、家長們共同面臨的難題。現在,小編為你介紹一種新方法:讓 AI 來批改你的作文。
  • AI作文批改 科大訊飛英語通支持一鍵拍照上傳即刻獲得批改報告
    學好英語對於加強國際交流的作用是顯而易見的。而有些孩子在學習階段,非常厭煩英語這門學科,上課毫無興趣,英語作業更是草草了事,長此以往,英語成績下降也是必然的。想要學好英語其實並不難,找對方法很重要!今天要為各位同學介紹的這款科大訊飛英語通就非常適合在校學生,尤其是中小學生。
  • 網易有道AI作文批改入選2020機器之心
    此次入選機器之心2020 人工智慧金煉獎的AI作文批改功能,是網易有道在軟體附加內容布局上繼神經網絡翻譯後,推出的又一重要的人工智慧技術應用。AI作文批改,顧名思義,是通過人工智慧技術自動批改英語作文,使用者可以通過直接拍照或者手動輸入需要批改的作文,系統可以自動錄入和識別具體作文內容完成批改,幫助各個學段的學習者更好地檢測作文水平,快速有效地提升英語寫作能力。
  • 猿輔導推出智能批改 拍照可批改英語作文
    12月7日,在線教育創業公司猿輔導發布一項教育領域的黑科技「英語作文智能批改」產品。在紙上寫完一篇英語作文,拿出手機拍下作文,智能批改會即時自動識別其中的手寫單詞,顯示作文評分,並對語法、單詞等錯誤和亮點進行一一批註。
  • 內大試水英語作文網上批改
    文/本報記者 李 麗近日,內蒙古大學為了提高學生的英語寫作水平,率先引進了英語作文網上批改系統。「電腦老師」軟體的應用,可以及時批改英語作文,時時糾錯。
  • 有道詞典上線AI作文批改功能 可自動批改雅思、四六級作文
    DoNews 4月8日消息(記者 向密) 網易有道詞典推出全新功能——AI作文批改,通過人工智慧技術自動批改英語作文。據悉,有道AI作文批改基於網易有道神經網絡機器翻譯,使用Transformer架構等核心技術,建立複雜模型實現針對不同場景進行性能調優。通用的評價標準可從批改精確率、召回率等關鍵數據進行測評。網易有道詞典AI作文批改功能主要由三個核心模塊構成:評分模塊、評語模塊和糾錯模塊。
  • 網易有道AI作文批改入選2020機器之心「金煉獎」
    6月19日,機器之心2020人工智慧金煉獎評選結果發布,網易有道的「AI作文批改」入選了助力產業復甦的最佳賦能AI解決方案。
  • 2021屆高三年級蘇州八校聯盟英語作文批改
    假如你是李華,你的英國筆友Chris聽說中國的太極拳申遺成功了,他對這項獨特的中國功夫很感興趣,請給他回一封電子郵件,為他介紹一下太極拳的相關信息。內容包括:聯合國教科文組織非物質文化遺產名錄 the UNESCO List of Intangible Cultural Heritage
  • AI作文批改好在哪?有道詞典和訊飛智能學習機誰更高效?
    現如今,英語在我們的工作生活學習中顯得愈發重要,如何學好英語成為了困擾萬千學子的難題。近日有道詞典推出了AI作文批改新功能,幫助考生練習英語作文,通過智能批改,幫助考生分析作文中出現的問題。其實這一功能,在訊飛智能學習機的英語學習板塊早已上線,而且更懂考生。
  • AI批改英語作文行不行?雅思考研四六級,打分評語糾錯都得有
    那麼,問題來了:寫的好不好,誰來幫我批改呢? 其實,打從小學開始學英語,小學、中學、四六級、雅思託福……英語作文怎麼提高從來都是一個難題。 尤其是各類考試,有嚴格的評分標準,可身邊哪能時時有經驗豐富的閱卷老師幫忙有針對性地修改提高呢?