Go to contents

韩国开发出大规模考试主观题自动打分程序

韩国开发出大规模考试主观题自动打分程序

Posted September. 21, 2017 08:32   

Updated September. 21, 2017 08:47

한국어

  虽然一直以来有呼声要求在大学修学能力考试(高考)等各种考试中采用主观题,但一直以来存在难以打分的瓶颈。但是,现在已经具备了在大规模考试中给主观题打分的技术支持。

 韩国教育课程评价院20日宣布,新近开发出“韩国语主观题作答自动打分程序”,可在大规模考试中有效地给学生们书写的主观题答案打分,并在不久前获得了四项专利。

 韩国语可以利用不同的助词和词尾来表达多种型态的类似意思,语顺比较自由,而且经常出现省略,被认为是难以用机器打分的语言。评价院表示,“利用积累的韩国语自然语言处理技术和机器学习基础自动分类原理设计了程序,达到了可以给一句句子长度的答案打分的水平。”

 评价院开发的自动打分程序,曾被用来在2016年国家水平学业成就评估的中抽样打分,结果证明比人直接打分更为正确。在学业成就评估中,对要求单词和句子程度答案的问题,由多名打分人利用自动打分程序,对打分结果进行比较后发现,各打分人结果一致的答案的比例,国语和科学科目为100%,社会科目为99.6%。

相反,对由多名打分人直接打分的结果进行比较发现,一致率反而更低,国语仅为97.5%,科学为99.3%。分析认为,这是因为,打分人在大量打分之后会感觉疲劳,以至于出现主观判断的介入,一贯性有所降低。评价院研究委员卢恩姬表示,“如果采用平板电脑等来书写答案,在高考中完全可以出主观题和自动打分。”



柳德泳 firedy@donga.com