请问托福口语考试打分是人工还是机器打分?打分标准是怎么制定的?

157 2024-01-15 19:58

一、请问托福口语考试打分是人工还是机器打分?打分标准是怎么制定的?

19年托福改革后,我们可以非常肯定地告诉大家,托福口语一定是机器批改,至少机器批改参与了每一位同学的评分过程。

ETS官方公布的数据,最新版本的托福口语机器评分系统Speech Rater与人工评分的相关性系数是0.81。

说实话,官方单纯的拿这么一个统计学系数摆在我们的面前,对于考生或者是托福资深教师而言是没有感觉的,这个系数到底是偏高还是偏低,究竟什么数值范围值得我们进行参考,根本就无从比较。

因此,我们与ETS几位资深的语言测评老师进行了访谈,为大家整理了这篇ETS口语机评的干货。

此段来自于ETS的官方报告:

随着越来越多的年轻学生在世界范围内学习英语作为第二语言(English as a Foreign Language),为青少年语言学生(Young Language Students)设计的标准化语言考试 (比如托福考试)。变得越来越受欢迎。

鉴于这一快速增长的趋势,需要更好地理解年轻学生的语言发展模式和语言表现的语言特征成为语言学教师的需求。根据2014年,两位口语测评学者Bailey&Heritage的研究,语言发展模式和语言表现对于语言学评估的创建提供指导和指导至关重要。

ETS于是系统地进行实证研究:在青少年语言学生中检查其英语语言能力(English Language Proficiency)的进展以便验证青少年语言学生评估任务和评分标准,并为基于测试结果的提供有效性证据(Kane,2013)。

在了解托福口语的机批原理之前,我们先了解一下什么是口语流利度。

何为流利度Fluency?

Lennon (2000) stated that fluency “can be measured both impressionistically and instrumentally by speech rate, and by such dysfluency markers as filled and unfilled pauses, false starts, hesitations, lengthened syllables, retraces, and repetitions” (p. 25)

简而言之的流利度有几个衡量的维度:

  • 速度(Rapidness)
  • 流畅性(Smooth)
  • 准确性(Accuracy)
  • 易懂性(Lucidity)
  • 思维的高效转换(Efficient translation of thought)以交流为目的 (Communicative intention)

流利度同时也能细分成三个方面去进行深入分析:

停顿性流利度(breakdown fluency) : 在连续话语中的暂停特征(the pausing features of continuous speech);

速度性流利度(speed fluency) : 话语演讲过程中的速度( the rate of speech delivery (Ginther et al., 2010 );

修复性流利度 (repair fluency):在话语中的自我更正、重复以及重述的频率( the number of selfcorrections and repetitions or reformulations present in speech (Iwashita, Brown, McNamara, & O’Hagan, 2008))

在目前ETS采用的机改Speech Rater的系统中,对于托福口语测评是何以科学、公正以及客观地对考生们进行评价的呢?

根据ETS最新的一项研究, 自1996年就有语言学学者(Ginther et al., 2010; Towell, Hawkins, & Bazergui, 1996) 使用平均话语长度(mean length of run) 这项指标来对考生们的流利度进行测评,通俗易懂的说法,就是在托福考试中你的所有"huh", "uh", "erm", "um", and “well" (filled pause)都会被计数,当频率高到一定程度,就会被认为是弱流利度,另一种就是沉默(silent pauses), 在整个口语回答的过程中如果出现长间断,那么系统会自动把你的口语归为弱流利度

而托福口语考试的不同任务(task)其对考生们的语言能力和认知能力都有所不同,因此在进行口语独立任务(independent speaking task)设计和口语综合任务(integreated speaking task)设计的过程中,在这项研究中,青少年(YLS)与成人考生(Adult learner)的流利度水平在两个任务的机评效果中都出现了较为稳定的表现。

因此我们可以得出客观结论,在口语流利度方面,考生们在口语独立任务和口语综合任务之间较少会出现流利度偏差。

何为语法Grammar ?

自1999年,在第二语言习得(Second Language Acquisition)的理论中(Norris & Ortega, 2009; Skehan & Foster, 1999; Wigglesworth & Elder, 2010),与语言测试相关的语法方面研究主要关注于两个方面:

语法准确性(Grammar Accuracy)

语法复杂性(Grannar Complexity)

针对语法准确性,最新的研究报告给出了两个标准维度:

整体准确性(Global Accuracy),在习者的语言中有任何的语法错误(Grammatical Errors)都会纳入考量范围;

特定种类错误(Specific Types of Error),2015年的语言学研究者Brown已经将该种类进行了详细描述:动词时态(Verb tense)

  • 主谓一致(Subject-verb agreement)
  • 冠词使用(Article use)
  • 介词使用(Prepositions)

针对语法复杂性,最新的研报的结果(McNamara, & Elder, 2001), 表现为

  • 句式(Syntactic patterns)的呈现性(Elaboration)
  • 句式(Syntactic patterns)的多样性(Variation)

在托福口语测试中,机器会针对各位同学的语法呈现,比如:

  • 时态的丰富性(一般过去式,现在完成时,现在进行时等多个时态的呈现);
  • 同时较多中国考生在语法呈现的过程中会出现主谓不一致的现象 (例如:information加s, they doesn’t 这样的常见主谓不一致的问题);
  • 针对介词的使用: 较多同学在口语回答中会出现简单句的堆砌,缺乏定语从句、状语从句、宾语从句或是表语从句的使用;

无论是曾经的人批还是现如今的机器批改,托福口语考试的评分标准都是不变的,大家都要针对性地训练自己的口语能力。

福利:托福口语2019上半年的口语合集以及相应的高分参考答案

你离托福口语满分之间, 只差这么一份参考答案合集!

二、口语考试打分吗?

既然是考试就肯定会打分,口语考试会打分

三、科二机器判断原理?

有电子感应器及摄像头,压线,超过边线范围,刹车停车超过2秒。

四、科二考试顺序?

上车后,学员调好座椅,系好安全带,调好反光镜,按照要求,输入指纹。当语音提示开始考试时,放下手动制动器,开始考试。

考试过程中按照倒车入库 侧方位停车 曲线行驶 直角转弯 半坡停车与起步的顺序依次进行(不同地区会存在差异,具体可询问驾校的教练)。

五、科二几次考试?

1、考试时有两次机会,要求每次机会五个项目都要合格,如果有一项不合格,则五个项目都要重考。

2、如果第一次机会考试不合格,接着就进行第二次考试,考试流程跟第一次相同,而且是同一辆车、同一条考道,须重新验证指纹。

六、科二考试规则?

科目二考试规则

1、大部分地区科目二考试主要考倒车入库、坡道定点停车和起步、直角转弯、侧方位停车、曲线行驶五个项目;五个考试项目必须全部一次性合格,考试才能过关。

2、考试总共有两次机会,即考一补一;第一次考试不合格,当即进行补考,补考不合格者,需10天后再次预约考试。

3、考试结束后,考生应迅速离开考场,不得干扰他人考试,之后还需按工作人员指引,到指定位置签字确认考试成绩,不签字的,成绩作废。

七、科二考试全程?

科二考试包括五个项目:上坡定点,直角转弯,S线行驶,倒车入库,侧方停车。每个地方考场不一样,顺序也不一样。

八、忻州科二考试流程?

首先要自己练习合格,然后预约考试时间。进去入考场后~倒车入库…侧方位停车……S弯路…半坡停车起步…直角转弯。…把车开回交于考官!

九、科二考试时间?

驾校考完科目一,取得学习驾驶证明后,报考C证的10日后可预约科目二考试,考A证或B证要20天后预约科目二考试。

正常的安排,一般练三周左右可以参加考试,即在车上操作12-15课时,而这15小时分散在每一天里,就需要三周左右。

一个教练至少带三个到四个学员,一天下来,既要讲解又要换项目,一个人最多在车上操作1个课时左右,所以,需要分布两三周时间。

拉长时间主要是为了提高熟练度,科目二倒车入库、侧方停车、陡坡定点停车和起步、直角转弯、曲线行驶,有五六个项目,时间太短不容易掌握,致使不熟练,而不熟练是很难通过科目二的考试。

十、科二循环考试规则?

你指的循环考试应该是五个项目连一起连贯考下去。科目二是场内考,共有倒车入库,侧方停车,曲线行驶,直角转弯,半坡停车起步这五个项目,一般都是由倒车入库开始考,连贯考完五个项目,八十分及格,满分一百分。可能有些考场条件不同,项目先后会有调整。但是你在满被扣分到低于八十分之前就可以继续考下去,直到完成所有项目或中途不及格了被叫停。

顶一下
(0)
0%
踩一下
(0)
0%
相关评论
我要评论
点击我更换图片