托福听力测试的有效性研究
2011年10月11日 16:42 作者:lunwwcom托福听力测试的有效性研究
□ 杨 青
摘要:如今,新托福作为一种英语水平的测试,其权威性被越来越多人推崇。本儿从语言测试学的角度,对新托福听力测试的变化进行了进一步总结,分析和解释了其再效度,信度和测试反拨作用上的优势和贡献。
关键词:托福听力测试 总效用度 信度 效度 反拨作用
托福(TOFLE)考试是美国教育考试服务处举办的为申请去美国或者加拿大等国家上大学或入研究生院学习的非英语国家学生提供的一种英语水平考试,它的权威性近年来被全世界越来越多的人所证实和推崇,对托福考试所进行的研究也是层出不穷。随着2006年新托福考试,即TOEFLIBT(Internet Based Test)的出现,对托福研究的角度更加多样化、立体化。本文主要从语言测试学的角度,对新托福听力考试进行研究,对新托福听力的变化及其测试的有效性进行分析,总结。
Bachman和Palmer(1996)认为评价英语测试最重要的原则是总效用度(overall usefulness), 那么试卷设计者在设计试卷时最重要的考虑就是其有效性,它通过以下六方面内容体现出来:信度(Reliability)、效度(Validity)、真实性(Authenticity)、互动性(Interactiveness)、反拨作用(backwash)、和可行性(Practicality)。然而,在试卷设计的实际运作过程中很难让每一方面都达到最佳,只能在当中寻求最佳平衡点。在大规模考试当中,考试策划者在试卷设置要着重考虑信度、效度和考试对教和学的冲击力,即反拨作用。以下部分就着重从测试学效度、信度、反驳作用三方面对新托福听力测试进行分析。
2. 托福听力有效性
(1)听力测试的效度
Clark(1979)把效度(validity)定义为“成功地实现测试目的的程度”。Arthur Hughes把测试的效度分成内容效度(content validity),表面效度(face validity),构建效度(construct validity),和标准效度(Criterion-related validity)。其中,内容效度作为测试效度的一个重要指标,尤为重要。 它指的是测试是否考查了测试者想要测试的语言方面的内容,即试卷的试题内容是否与考试细则,考试大纲相一致。
托福听力测试委员会以交际语言学为理念,模拟北美大学校园真实的生活和学习环境,全面考查学生的语言综合技能和沟通能力。新托福听力测试不但能检验出学生的真实英语听力水平,还能够指导学生在备考过程中提高个人的交际能力。
其中最为突出的表现是听力材料贴近学生的真实生活,同时具有较强的时代气息以及教育意义。ETS为新托福听力建立了一个大型语料库,其中内容符合学生在校园学习生活中即将要面临的真实环境,尤其是lecture部分材料来源于北美大学许多专业入门课程,真实反映北美大学课堂的学习氛围。新托福听力材料来源广泛,除了生活对话外,还包括解决学习生活中的问题。选材的丰富广博既给考生们普及科学知识,也让他们从中获得了教育,在生活学习中真正使用所学语言。
此外,考试题型多样化也是保证听力测试效度的一个重要方面。新托福听力部分包含两个对话和四段演讲,共34道试题。为全面考查学生综合能力,新托福听力题型设置丰富,包括General Questions(考查学生对材料主题,主要态度,重要观点的理解),Pragmatic Understanding Questions(考查学生对语言交际交流的掌握能力),Connecting Information Questions(考查学生对文章前后逻辑关系的掌握)和Detailed Questions (考查学生对文章细节的把握)。这些丰富的题型设置也充分保证了听力测试的内容效度,
(2)听力测试的信度
Bachman(1996)把信度(reliability)定义为“测试的一致性”(Consistency of measurement),也就是所谓的测试的可信度、可靠度。缺乏信度的试卷是没有使用价值的,同时不具备测试有效性。事实上,听力测试的信度受到多种因素的影响,其中试题本身的信度至关重要。而事实上,充分保证听力测试试题的内容效度对于提高听力测试信度是至关重要的,托福听力测试习题较高的内容效度保证了学生在答同一份试题时,不会受到场合,环境,时间间隔的影响。听力测试信度的另一方面主要体现在评分标准方面,ETS也有着自己一套严格公正的评判体系。新托福听力以单选题为主、复选题和表格题为辅,按正确题目个数给分。新托福听力计分的一共六篇文章,34道题,其中回答正确的题目数量加起来就是最后分数参考值。因为仍然是以客观题为主,所以评分标准的信度得到了保证,从而进一步保证了听力测试本身的信度。
(3)听力测试的反驳作用
教育界把测试对教学和学习的影响称为反拨作用 (backwash) 。Arthur Hughes认为任何一种考试都会对其教学产生反拨作用。而通常情况下包含了真实语言(下转第84页)