未來基測作文電腦評分
陳至中╱台北報導
電腦不只會選「土豆」，還能改作文！ 台灣師範大學心測中心 研發出一套「中文寫作自動化評分系統（ＡＣＥＳ）」，能自動 分析國中基測考生的作文程度，並給予一至六等第，實測結果與閱卷老師評分的一致性高達九十％，目前已準備開發第二代 系統。這也是全球第一套「中文作文 電腦閱卷系統」。
心測中心再三強調，ＡＣＥＳ是「科技新知」，不是「 教育政策」，是否會 應用在正式基測考試，仍在評估中。但 未來若研究結果認為成效良好，不排除加入基測國文作文的「評分陣容」。
ＡＣＥＳ由心測中心與交大資訊 工程系合作，歷經四年開發。外國托福作文考試已使用電腦閱卷多年，有效提高信度、降低人工閱卷成本。ＡＣＥＳ則是針對中文寫作的特性 設計，處理中文的效能可媲美 英文系統。心測中心表示，若研究過程順利，可作為基測兩名評分老師之外的「第三評分者」， 協助監控人工評分品質。
目前第一代系統，研發單位先以「下課十分鐘」為題，由六百名國三應屆畢業生寫作，並由 學校老師改出等第，用來「訓練」電腦，歸納出分段數、字數、名詞數、平均段落字數、句號數、口語化程度等量化指標。再用來評量其他 學生以同樣題目寫的作文，高達九十％的評分結果與人工閱卷老師無異，僅約千分之一試卷差距超過三級分。
心測中心研究員張道行表示，第一代系統已有一定水準，但評分原理易被破解、產生僥倖。例如，考生已知寫多少字數、多少名詞數等，會有較好分數，就可能「依規格」寫文章。
第二代系統將依照文章取材、組織結構、修辭技巧等方面評分，使結果更接近思考模式。
張道行舉例，文章取材上，若電腦歸納出好的文章常會提到一些「植物」名稱，顯示作者思考較廣；較差的文章則多半是口語化語詞，如「我今天出去玩…」電腦可依此作為判別優劣的一項因素。
張道行說，國中基測作文目的在測試基本寫作能力，因此電腦評分已大致堪用，未來將導入語料庫，繼續進行大規模測試。
--
[垃圾桶] 裡沒有會話群組。 當您有超過 5718.752806 MB (還在增加中) 的免費儲存空間時，誰還需要刪除郵件？！
沒有留言:
張貼留言