天道首页 > 托福考试 > 托福写作

决定你托福写作命运的阅卷师——E-rater

责任编辑:ada.kang来源:互联网时间:2019-01-04 16:11:08点击:

备考生一定都了解托福写作的修改是人机结合模式,那么什么机器系统能如此智能担此重担呢?它就是E-rater,下面我们就来了解下掌握你作文命运的另一个老师吧。

关键词: 托福备考托福写作托福写作备考

  备考生一定都了解托福写作的修改是人机结合模式,那么什么机器系统能如此智能担此重担呢?它就是E-rater,下面我们就来了解下掌握你作文命运的另一个老师吧。

  1.E-rater是做什么的?

  当考生完成托福考试后,作文部分(包括综合写作和独立写作)的分数将由接受过ETS培训的老师和E-rater共同批改(见下面官网截图,截图来源:https://www.ets.org/toefl/ibt/scores/)。在批改过程中,机器和人工独立评分,互相不知道彼此的分数,人和机器的评分范围都是0-5分,最终系统会对这两个分数进行加权平均。值得一提的是,为了保证分数的公平有效,人工给分和机器给分的误差不得超过1分(如人工给出3分,机器给出4分为正常;人工给出2分,机器给出4分则为异常分数);若两者分数误差超过1分,将由ETS的专业阅卷者进行再次评分。

  2.E-rater是如何做到准确阅卷的?

  E-rater通过计算机数据功能对于考生写作文本的相关信息进行一定的标签匹配,结合ETS的过往的写作数据库来审核考生的写作质量。它利用的是计算机语言学中的自然语言处理(Natural Language Process,简称NLP)方法。其中E-rater最擅长捕捉的是考生的语言使用,E-rater系统将考生考场作文的语言与数据库中不同分数段的文章的语言进行比对,判断考生的写作语言质量;同时,E-rater还可以通过检测逻辑连接词的使用来大致判断考生文章的逻辑衔接情况,通过匹配主题关键词来检测考试的文章发展是否出现跑题。简单来说,像手机软件“唱吧”一样,E-rater就是把考生的作文与数据库里的文章进行比对,从而给出系统判断的分数。

  3.E-rater能关注到写作的哪方面?

  许多人认为E-rater只能检查语法错误,这样想可就错了。作为ETS开发的几大数据引擎之一,E-rater可以依据托福写作评分标准,审核考生作文的五个方面:Organization & Development(文章组织和发展),Grammar(语法),Usage(用词),Mechanics(格式),Style(语言风格).

  可以详细介绍一下E-rater如何按照托福写作要求进行评分吗?

  我们知道,托福独立写作从三个维度去考量考生的作文:Development(内容发展)、Organization(结构组织)和Language Use(语言使用),E-rater读不懂我们的文章内容,那么它是如何做到精准判分的呢?

  Development这个维度要求考生在文章发展中做到内容充实,而E-rater并不能读懂考生的文章内容表达,因此它采取的方式是评估考生文章的The Length of Discourse Element(话语元素长度)。简单来说,话语元素长度从两个方面进行评估:

  1. 平均句长(也就是说,如果全文的句子写的都很短,则证明考生的思想内容很简单,没有能够有效表述清楚自己的论述。托福官方建议一篇托福写作的平均句长应该在15-20词左右)

  2. 正文段句子数量(也就是说在中间发展段中,如果句子数量过少,证明考生没有话说,因此也就无法有效展开自己的观点)

  我们可以这样理解,两个人文字聊天过程中,如果彼此有话说,那么双方发出去的句子一定不会很短,内容也不会很少;如果彼此发出去的文章都是“嗯”、“哈哈”、“哦”、“呵呵”之类的,那么就基本上进入了尬聊的阶段。

  当然,E-rater也会检测与话题相关的语言内容来确保考生是否出现跑题的现象,因此,紧扣主题,不断出现与主题相关的词汇和表达对于托福独立写作非常重要。

  Organization这个维度要求考生合理组织段落,并且注意文章内容的逻辑衔接。读不懂考生的E-rater很是聪明地从这两个角度去评估:

  1. The Number of Discourse Elements(话语元素数量,也就是合理分段。E-rater会检测考生是否在文章中呈现了Thesis Statement、Main Ideas、Supporting Ideas、Conclusion等。一般来说,建议考生的文章为4-5个自然段)

  2. The Use of transitions(逻辑连接词的使用。机器通过检测考生句子之间的逻辑连接词去判断文章的逻辑是否存在以及是否合理)

  Language Use这个维度是E-rater最擅长的,因为它可以通过对考生的语言表达进行数据分析,并匹配以往数据库里的语言数据,从而对考生的文章语言质量进行审核。在语言层面,E-rater会从Grammar角度去审核考生文章中的Fragments(句子碎片)、主谓一致(Subject-verb agreement)等;会从Usage角度去审核考生文章中的Missing or Extra Article(冠词错误)、Preposition Error(介词错误)、Wrong Part of Speech(词性错误)等;会从Mechanics角度去审核考生文章中的Spelling(单词拼写)、Missing Comma(逗号缺失)等;会从Style角度去审核考生文章中的Repetition of Words(词汇重复)、Short Sentences(过多短句使用)、Passive Voice(过多被动语态使用等).

  如果大家想要进一步去了解Language Use的细节,建议大家去阅读《托福官方指南(第5版)》第669页到731页的第10章Writer’s Handbook for English Language Learners的具体内容。

  其实,E-rater功能再怎么强大,它也是以人工阅卷模型来进行设计的,这就是为什么人机阅卷能够达到高度一致性。只要同学们满足了人工阅卷的要求,E-rater同样也会给出一个高分。

  以上就是对E-rater的介绍,好了,还是磨炼自己的写作水平才是硬道理!

同学托福100+ 用这招超过他

大家都在关注

分享到:

  • 天道第11年常春藤大满贯达成!
  • 考试系列APP上线
  • 2018托福考试攻略

请输入验证码关闭

  • 考试系列APP上线

免责声明:①凡本站注明“本文来源:天道教育”的所有文字、图片和音视频稿件,版权均属本网所有,任何媒体、网站或个人未经本网协议授权不得转载、链接、转贴或以其他方式复制发表。已经本站协议授权的媒体、网站,在下载使用时必须注明“稿件来源:天道留学”,违者本站将依法追究责任。②本站注明稿件来源为其他媒体的文/图等稿件均为转载稿,本站转载出于非商业性的教育和科研之目的,并不意味着赞同其观点或证实其内容的真实性。如转载稿涉及版权等问题,请作者在两周内速来电或来函联系。

关于天道 天道历史 资质荣誉 特色优势 媒体报道 企业招聘 更多
培训服务 北美课程 北美课程特色 英联邦课程 英联邦课程特色 天道培训优势 更多
培训课程 SAT课程 托福课程 雅思课程 GRE课程 GMAT课程 更多
高分学员榜 SAT高分学员 托福高分学员 雅思高分学员 GRE高分学员 GMAT高分学员 更多
名师风采 五星名师 多对一教学加辅导 海归+名校 多年教学经验 内部教材独家研发 更多
");}(document);