BEC口试的信度评估

2022-10-06 22:56:15   第一文档网     [ 字体: ] [ 阅读: ] [ 文档下载 ]
说明:文章内容仅供预览,部分内容可能不全。下载后的文档,内容与下面显示的完全一致。下载之前请确认下面内容是否您想要的,是否完整无缺。下载word有问题请添加QQ:admin处理,感谢您的支持与谅解。点击这里给我发消息

#第一文档网# 导语】以下是®第一文档网的小编为您整理的《BEC口试的信度评估》,欢迎阅读!
口试,评估,BEC

龙源期刊网 http://www.qikan.com.cn

BEC口试的信度评估

作者:郭丽

来源:《新课程·教研版》2011年第14

要:口语考试的主观性给提高口试信度带来了很大的难度。BEC口试以其设计的标准化和实施的规范化在亚太地区获得了良好的声誉。从BEC口试的形式、结构、实施过程、评分标准等方面对BEC口试的信度做了较为详细的分析和评价,希望为外语教师和测试专业人员开发高质量的口试提供有益的启示。

关键词:信度;BEC口试;口试设计;口试实施 一、引言

近年来,英语口语能力的测量受到越来越多的关注。如何提高口试的信度是口试设计与实施的难点,也是口试研究的焦点之一。笔者认为由剑桥大学考试委员会(University of Cambridge Examinations Syndicate,简称UNCLES)开发的BEC考试可以给我们提供许多可以借鉴的做法。

BEC考试的全称为剑桥商务英语证书考试(Cambridge Business English Certificates),在我国实施已有十余年。此考试的目的在于测量考生在商务环境下的英语交际能力,每个级别都包含笔试(听力、阅读、写作)和口试。本文将分析UNCLES为提高BEC口试信度而采用的各种方法和举措。

二、BEC口试的特征与实施 1.口试长度

从理论上讲,考试越长,其信度就越高。然而,在实际操作时,考试的长度是受可行性因素制约的。在20023BEC考试修改之前,BEC初、中、高三个等级的口试长度分别是101214分钟。修改之后,各级口试均增加了2分钟,这样虽然增加了考试成本,但是可以采集到更长的话语样本。由此改动可以看出UNCLES在提高信度上所作出的努力。鉴于BEC考生人数众多、培养高质量考官队伍的难度以及费用等方面的现实因素,这样的口试长度是切合实际的。 2.口试形式


龙源期刊网 http://www.qikan.com.cn

BEC三个级别的口试都采用面对面的直接考试形式,由两个考官同时测试两个考生,主考官(interlocutor)主持口试,副考官(assessor)不参与交际,专事评分。二对二的形式除有利于效度之外,对提高信度有以下益处:

1)与考生单个应考的方法相比,增加了互动的形式,使考官能够采集到更多种类的话语样本。

2)朋友或同学结伴应试可以减少考试带来的紧张感,口试的气氛会轻松许多。考生不必自始至终以低人一等的身份同权威人物讲话,相反,考官可以扮演相对被动的角色,而让考生以较为自然的方式更自由地交谈。考生会使用他们在现实生活中多数对话场景里使用的正常语言。

3)双人评分可以减少冗长、乏味的面谈所带来的压力和疲劳。对一个考官来讲,同时完成发出指令、参与交际和评分的多重任务,难度相当之大。双人评分可以使主考官集中精力主持口试、副主考则给出细致的单项分,这样考官主持口试的表现会更稳定,评分也会更准确。

3.口试结构

BEC口试每个级别都包含三个独立的部分,每个部分都涉及不同的交互形式,旨在引发不同形式的话语。

第一部分是提问(Interview),交互形式为考官←→考生,考官向考生提问,引发简要的、事实性的个人信息。这一部分测试的重点是:自我介绍,谈论家庭、爱好、工作等话题,表达同意、不同意、喜好等方面的简单功能。第二部分为个人简短陈述(Individual mini-presentations),主考官给每个考生分配一张任务卡,考生根据自己选定的话题做一个连续的陈述,然后由考官或另一位考生提一个相关的问题。这一部分的交互形式为考生←→考生+官。这种个人陈述题型的交互程度较低,但优点是可以采集到较长的话语样本,可以测量考生的语篇能力,即表达的连贯性、逻辑性以及准确性、得体性等。第三部分是合作任务Collaboration task and follow-up questions),主要是由两位考生按照主考官描述的情景和所给的提示进行讨论,然后主考官提出一两个相关问题以扩展讨论,并给说话较少的考生更多的发言机会。这一部分互动程度最高,互动形式为考生←→考生,考官←→考生。这里测量考生运用功能性语言和策略进行得体交际的能力。

可以看出,口试的每一部分都是一个新的开始fresh start),都采用不同的题型,使用不同的互动形式,测量口语能力的不同方面,这种多部分的结构设计确保了考生语言行为采样的广度和多样化,起到了提高口试信度的作用。 4.可选试题


龙源期刊网 http://www.qikan.com.cn

由于全体考生不能在同一时间参加考试,口试题目必须保密。如果考生在考试前获得了有关口试题目的信息,他们的分数便会偏离其真实能力,造成测量的不准确。

这种保密工作总是需要不小的人力投入。UNCLES的措施是:提供多套可选的题目,要求考官在每场口试时都尽量使用多种不同的试题。这样就没有必要阻止已完成口试的考生向其他考生泄题,因为他们碰到同样考题的可能性极小。这种做法的好处在于不用封闭备考考生,他们不必在备考室滞留。这样既减少了口试组织者监考方面的麻烦,也防止考生因等待过久而产生疲劳和焦虑。但是设计多套难度对等的题目,对出题者的专业水平要求很高,且需要较大的人力财力的投入,另外也给考官的评分增加了一定的难度。使用多套可选题目是否会影响考生答案的可比性,或者造成其口试表现的差异呢?UNCLES声明,他们的研究显示多套考题的使用没有给考生的口试表现带来显著的影响。 5.考官指令(interlocutor frame

主考官在主持口试即发出指示、分派任务时必需严格遵照考官指令。主考官不可以随意以自己的方式讲话。当考生出现理解困难时,考官可使用备用问题(back-up questions)。官指令使口试过程规范化,使每个考生都得到公平的、同等的对待。严格遵守考官指令以避免任务焦点的转移和任务难度的变化。 三、BEC口试的评分程序

BEC口试中两位考官都参与评分,主考官打总体分,副考官打分项分。两名考官从不同的角度、彼此独立地评判考生的表现。按照规定,他们不相互商量,不受同伴判断的影响。 由于主考官的主要责任是主持口试和参与交际,所以按要求他(她)不必关注考生话语的某些特定方面,只需根据考生整体表现的有效程度给出一个总体分数(0~5分)。副考官的任务则是仔细倾听,并按照4个详细的分项评分标准(analytical scales)打出4个分数(0~5分)。这4个分项标准是:(1)语法与词汇:即语法与词汇形式的广度、精确度和得体程度;(2)语篇处理:即话语的连贯性、深度以及与主题的相关性;(3)语音语调:考生话语的流利及标准。在考试允许的范围内使考生保持良好的心理状态,双人、独立评分以及总体、分项评分的结合可以有效地提高评分信度。 四、结束语

考试从本身来讲并无”“之分,最好的考试是不存在的(Bachman6)。我们在动手设计考试之前,应该对有关具体情况有一个全面的了解。口试的设计和实施是权衡各种因素并做积极妥协的过程。

BEC口试在考试设计、开发和实施等诸多方面为我们提供了很好的启示,笔者希望本文的讨论有助于语言教师们设计出符合各自具体情况的高质量的口试。


龙源期刊网 http://www.qikan.com.cn

参考文献:

1BachmanLyle F and Palmer, Adrian S. Language Testing in Practice M.Oxford: Oxford University Press.

2 UNCLES EFL. BEC Handbook. Revised Syllabus. (作者单位 广东省深圳市深圳大学)


本文来源:https://www.dywdw.cn/900870ab72fe910ef12d2af90242a8956becaadb.html

相关推荐
推荐阅读