自动标记使教师脱离了循环

日期:2019-01-23 05:10:00 作者:敖徐 阅读:

吉姆吉尔斯软件现在可以标记论文,但它会让学生像机器人一样写作吗这是一个想法,任何过度劳累的老师都会欢迎 - 计算机自动标记成堆的考试和家庭作业美国各地的数万名学生已经被这些系统评估过但是,我们能否相信人工智能能够让他们做出适当的判断两项新的实际测试表明它可以出色地工作在今年1月至5月期间在奥兰多中佛罗里达大学进行的一项实验中,Pam Thomas在她的第一年生物课上追踪了自动分级系统对1000名左右学生表现的影响学生们使用SAGrader回答了问题,这是一种由密苏里州哥伦比亚的Idea Works开发的在线服务 SAGrader使用旨在从文本中提取意义的人工智能技术解析了他们的答案,这些答案可能有几段长例如,给定短语“心脏泵血”,SA Grader将识别文本中的两个实体 - “心脏”和“血液” - 以及它们之间的关系然后使用Thomas编辑的量规分析这些细节她说她的学生喜欢SAGrader,因为它提供了不到一分钟的工作反馈然后他们可以重新提交他们的工作,考虑到反馈,并可能获得更高的分数该软件还有一个附带的好处在期末多项选择测试中,托马斯学生的平均分数比前几年高出12.5% “我们很惊讶,”她说她将改进归功于SAGrader,鼓励学生多次解决问题 “它告诉他们如何思考测试题”Andrew Klobucar在纽约州新泽西理工学院的30名学生使用一种叫做电子评估员的工具后观察了类似的观察结果该系统由新泽西州普林斯顿的ETS开发,分析论文并提供从语法和拼写到段落使用的所有内容的反馈像托马斯一样,Klobucar说软件的反馈鼓励学生制作每个作业的几个草稿使用电子评估者的学生写的字数几乎是没有使用电子评价者的同学的三倍,并且表现出“实质性改善”但Klobucar表示,经过短短两年的试验,将推动力归功于电子评估者还为时尚早 Klobucar补充说,学生可能更容易接受来自软件的批评反馈,因为它似乎不那么惩罚他还说学生喜欢电子评估者的“游戏化”方面,将系统视为一种游戏,其中表现良好意味着重新起草工作以获得更高的分数 ??学生可能更容易接受软件的批评性反馈,因为它似乎不那么惩罚 e-rater和SAGrader,以及位于新泽西州Upper Saddle River的Pearson Education开发的广泛使用的工具,在公司内部测试中表现良好在某些情况下,这些工具甚至比人类评分者产生更一致的评分,这可能是因为人们可能会厌倦并犯错误这些系统也越来越受欢迎 - Pearson的软件已用于评估马里兰州70,000名学生的全州测试但是一些老师认为自动化打标工具教会学生写作风格差在麻省理工学院任教的莱斯佩雷尔曼说,这些工具经常忽略论文中论证的结构,而是奖励那些把信息打包成长片的学生佩雷尔曼说,自动分级员也使用过于简单的规则例如,学生可能因使用“恶劣”而不是“坏”而获得奖励,或者使用三个例子来讨论一个主题 - 一种常见的修辞手段麻省理工学院的新生经常不得不忘记这种做法 “我们要做的第一件事就是对它们进行去编程,”佩雷尔曼说更多关于这些主题: