Go to contents

韓國開發出大規模考試主觀題自動打分程式

韓國開發出大規模考試主觀題自動打分程式

Posted September. 21, 2017 08:32   

Updated September. 21, 2017 08:50

한국어

  雖然一直以來有呼聲要求在大學修學能力考試(高考)等各種考試中採用主觀題,但一直以來存在難以打分的瓶頸。但是,現在已經具備了在大規模考試中給主觀題打分的技術支持。

 韓國教育課程評價院20日宣佈,新近開發出“韓國語主觀題作答自動打分程式”,可在大規模考試中有效地給學生們書寫的主觀題答案打分,並在不久前獲得了四項專利。

 韓國語可以利用不同的助詞和詞尾來表達多種型態的類似意思,語順比較自由,而且經常出現省略,被認為是難以用機器打分的語言。評價院表示,“利用積累的韓國語自然語言處理技術和機器學習基礎自動分類原理設計了程式,達到了可以給一句句子長度的答案打分的水準。”

 評價院開發的自動打分程式,曾被用來在2016年國家水準學業成就評估的中抽樣打分,結果證明比人直接打分更為正確。在學業成就評估中,對要求單詞和句子程度答案的問題,由多名打分人利用自動打分程式,對打分結果進行比較後發現,各打分人結果一致的答案的比例,國語和科學科目為100%,社會科目為99.6%。

相反,對由多名打分人直接打分的結果進行比較發現,一致率反而更低,國語僅為97.5%,科學為99.3%。分析認為,這是因為,打分人在大量打分之後會感覺疲勞,以至於出現主觀判斷的介入,一貫性有所降低。評價院研究委員盧恩姬表示,“如果採用平板電腦等來書寫答案,在高考中完全可以出主觀題和自動打分。”



柳德泳 firedy@donga.com