以语言模型评价学习者文句修改前後之流畅度Usinglanguagemodel.PDF

The 2016 Conference on Computational Linguistics and Speech Processing ROCLING 2016, pp. 103-114  The Association for Computational Linguistics and Chinese Language Processing 以語言模型評估學習者文句修改前後之流暢度 Using language model to assess the fluency of learners sentences edited by teachers 蒲冠穎 Guan-Ying Pu ,陳柏霖 Po-Lin Chen, *吳世弘 Shih-Hung Wu 朝陽科技大學資訊工程系 Department of Computer Science and Information Engineering Chaoyang University of Technology sweetmilk425@ *shwu@.tw (contact author) 摘要 因應自動化作文教學系統之需求，我們開發了一個偵測學生作文句子的通順度的系統 此系統基於語言模型（language model ）方法 ，結合新聞語料及國中生作文語料訓練而成 [1] 此句子通順度的偵測系統 ，我們蒐集了339 句國中生所寫出來的句子 339 關鍵詞：中文，作文，語言模型，N 元語言模型，句子流暢度 一、簡介 隨著科技的發展，現在3C 產品可說是非常的普遍，也因為如此現在非常多的孩子從小就 接觸電腦、手機、平板等 3C 產品，使得現在學生更有可能以電腦作為寫作文的工具。雖 然教育政策將作文納入考試評分項目，使得學生跟家長再度重視寫作能力 ，但是受限於 教學時數，可以練習寫作的時間實在是不足以將那些寫作能力較弱的學生作有效提升。 因此我們認為未來可以藉由自動化的作文教學系統幫助學生在家自學作文。而我們所開 發作文教學之句子流暢度偵測系統，經由系統回傳的診斷結果，幫助學生提升詞句組合 的理解能力以寫出較順暢的句子，藉此提升他們作文的分數。本系統依賴N-gram 的語言 模型[1] ，其特色是計算字詞間組合的機率，機率越高字詞組合的正確性就越高句子也就 越順暢，然而語言模型其效果相當依賴大型的訓練語料，這是語言模型仍待克服的問題， 而且如果訓練語料的性質跟要測試的文章性質越不相關，效果就會越差，因此語料庫需 要根據測試文章做改變。 系統需要知道如何判斷出一篇作文是好的，藉此才能幫助學生寫好作文，國中基測作文 評分主要分為四個面向:立意取材、結構組織 、遣詞造句、錯別字、格式及標點符號等四 項核心技巧。這四項面向是依照作文構成過程所需要的元素所決定，這些作文評分範疇 不容易被變更。以下是作文評分為六種不同等級的說明(如表一 [2] ) ，本系統是針對四個 範疇中的遣詞造句的句子流暢度作為研究目標。 103 本文主要的研究在於偵測句子的流暢度，正確的判斷句子是否通順，系統設計用於解決 一般性問題，隨著訓練集增加，可增強對句子的判斷。雖然現在系統只算是一個起步， 在未來此系統將整合到電腦作文自動評分系統，在學校時一名老師需要面對多名學生， 學生難以得到即時的評價，而作文自動評分系統能全天不間斷地提供服務，提供可以隨 時學習的機會。自動化作文系統是由多個診斷模組所構成(本文中的系統為其中一個診斷 模組) ，作文會經由這些分散是診斷模組分別診斷個面向的優缺點，之後產生一份可擴展 的診斷清單，此清單整合各面向的診斷結果，產生評分模組以及