语言测试的有效性

单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,*,交际法英语考试设计的基本要求：,1.,信度,2.,效度,3.,真实性,4.,互动性,5.,可行性,6.,后效作用,Practicality,可行性,Practicality pertains primarily to the ways in which the test will be implemented,and to a large degree,whether it will be developed and used at all.,可行性主要指考试在现实的条件下能否行得通，即可操作性，主观愿望是否符合客观条件的问题。,If the resources required for implementing the test exceed the resources available,the test will be impractical,。,如果测试所需的资源超出现实可利用的资源，那么这一测试不切实际，不能实施。,Available resources,Practicality =-,Required resources,If practicality,1,the test development and use is practical.,（分子大于分母，即可利用资源要大于考试所必需资源）,If practicality,1,the test development and use is not practical.,制约施考过程的因素有三方面：,人力资源：命题人员、考官、监考人员、阅卷人员等。（足够数量的精通业务的人员）,物质资源：考试场地、考试所需的设备,(,录音机、计算机、阅卷机,),、印制考卷的纸张和设备等。,财力：钱。测试对于人力和物力的要求都要有财力的支持才能满足。,命题人不仅要命好一套题，还需要设计、编排好试卷，以方便考生、阅卷老师和工作人员。对于重要的测试要编排,A,、,B,卷,，大规模的测试，要控制题量，尤其是,主观题,的数量。要制定详尽的,评分标准,，答案要明确、全面,;,尽可能使主观题的评价客观化；对于人数多的考试，要考虑使用,答题卡,，提高阅卷效率。重要的考试要考虑到,试卷的安全性,问题,.,考试时间的限度,也要考虑进去，过长或过短都不利于有效地测试学生的真实水平。,命题人在测试的准备阶段、施测阶段、评分阶段必须尽可能考虑周到一些，明确时间、人力、物力的有限性，在条件容许下做事情，使测试切实可行。,例,1,一个学期的口语课结束后，教师要通过考试检查学生的学习进度，同时教师希望考试具有真实性。这个班级有,10,个同学，考试可用总时间是,2,小时，场地是本教室，考官是两位教师。考虑到考试要有真实性充分利用现有的人力、物质资源和时间限度，最后这位教师决定用现实生活法，设计两种考试任务：情景对话和小组讨论。,例,2,同样是一个学期的口语课结束后，教师希望通过考试检查学生学习进度，同时这位教师也希望考试具有真实性。这个班级有,60,人，考试可用时间是,2,小时，考官为教师本人，考试可借用系里的语音实验室。鉴于以上客观条件，这位老师最后决定用录音口试，包括,2,项任务：,retelling and short talk.,实际考试时间是,30,分钟。,从中我们可以看出，在力求达到,真实性,这点上这两位教师都考虑到一些实际的人力、物质因素。在达到考试同样目的的情况下，设计的了不同的考试方式。例,1,中的施考制约因素相对有利，教师就可以选择较为,贴近现实且交互性强的任务,。例,2,的施考制约因素相对不利，所以教师只好通过,录音口试,来了解学生的口语进步情况。这就告诉我们考试设计要考虑现有的资源，考试应该在已有客观条件下进行。,Washback,Effect,后效作用,考试的后效作用简单的来说就是,考试所产生的影响,。任何一种考试都会在不同方面和不同程度上对考试所涉及的学生和他们的学习、教师和教学，产生影响和作用。而且，考试规模越大，影响程度也相应地增加。,考试对,教与学,的影响称为,反拨效应,（,backwash or,washback,effect,）,(Hughes,2003:1-2),。,根据考试对教学和学习产生的积极或消极影响，考试反拨效应可分为,正面效应,和,负面效应,。,正面效应对课程的完善、教材或教法的更新起到积极的推动作用；,而负面效应不仅不会对教与学起到推动作用，而且还可能会使教与学走入歧途。,Bachman,和,Palmer,总结前人研究的基础上提出一个,测试影响度框架,（,test impact,），更为全面的探讨了后效作用的性质。,Impact can be defined broadly in terms of the various ways in which test use affects society,an education system,and the individuals within these.,他们试图在一个较为广泛的框架里予以定位，测试影响度指,考试对社会、教育体系以及处于这些体系中的个体（考生和教师）所产生的影响,。测试对教学的影响是作为测试影响度的一个方面。考试的反拨作用已,不是一种孤立的现象,，它对教学的影响也扩大到教育体系甚至社会中。,Impact operates at two levels:a macro level and micro level.,Macro:Society,Education system,Micro:Individuals,（考生和教师）,A Basic Model of Test Backwash,participants process products,TEST,Students,Learning,Teachers,Teaching,Researchers,Research results,Materials,Writers&,Curriculum,designers,New materials,And,New curricula,Backwash mechanism,by,Alderson&Wall,Washback,on teaching:,A test will influence teaching;,A test will influence what teachers teach;,A test will influence how teachers teach;,A test will influence the rate and sequence of teaching,A test will influence the degree and depth of teaching;,A test will influence attitudes to the content,method,etc.of teaching and learning;,Washback,on learning:,A test will influence learning;,A test will influence what learners learn;,A test will influence how learners learn;,A test will influence the rate and sequence of learning;,A test will influence the degree and depth of learning;,attitudes to the attitudes to the content,method,etc.of teaching and learning;,Strength of,washback,:,Tests that have important consequences will have,washback,;and conversely,Tests that do not have important consequences will have no,washback,;,Test will have,washback,on all learners and teachers;,Test will have,washback,effects for some learners and some teachers,but not for others;,考试对学生的影响可以归纳为,3,个方面：,1.,考试结果的使用,不同的目的和用途的考试会对考生产生不同的影响和作用。例如，分班考试、诊断考试和学习进展考试对会对学生的,情绪,和自尊心产生影响，最多影响他们对学习的,态度,。相反，重要的学业考试、选拔考试和水平考试决定考生是否能获得,证书,、是否,留级,、是否有资格进入大学或出国、是否适合某项,工作,等等。对于这些重要考试，在设计时，必须尽可能考虑周到一些，保证考试的公正合理。,2.,考试的内容和形式,考试发展到今天已经很难完全说是教学的,“,仆人,”,了，即,教什么，考什么,。相反，一些事关重大的,考试已经成了教学的主人,。对学生而言，,考什么学什么,。我国的高考就是一个很好的例子。这种给学习带来负面影响的考试完全是,考试设计,的缺失造成的。其实考试可以成为促进学习的工具。关键是首先改变观念。,3,.,考试分数的报告,当一名考生拿到的分数是,80,时，他不明白这算是好还是坏。如果全班的平均分为,90,分时，这,80,就可能不怎么好，相反，如果全班的平均分是,70,，那,80,算不错了。,科学的考试分数报告是对考生权益的尊重，也拉近了考生和考试的距离。例如，,美国的托福,考试的分数报告，说明某个分数表示有百分之多少的人在这一分数之下，使人明白自己处于说明,位置,。,英国的国际英语考试,的分数报告，用文字说明某一段成绩表示什么样的,语言能力,，是考生了解自己的,英语水平达到,了什么程度和能够用英语办什么事。,考试对教师和教学的影响有正负两方面。,负的方面是对教学造成冲击，迫使,教师为考试而教学,。例如，现在在新编英语的教材中虽然增加了听说的练习内容，但是高考不考，这样教师处于两难的境地。事实上学生的成绩和大学的录取率仍然是评估教师,工作业绩,的一项重要指标，于是，为了,提高成绩,，只能去强化学生的,语法能力,，忽略听说能力的培养，结果就造成了,“,高分低能,”,的现象。,另一方面，考试也能帮助教师,了解学生、了解自己,工作效果，,改进教学方法提高教学效率,。比如，分班考试有助于教师了解学生水平，诊断性考试有助于学生发现学习上的具体问题，教师可以有针对性的辅导学生。,此外，考试还可以,给教学带来积极地推动作用,。就拿高考英语来说，如果能在高考中增加口语和听力，并且成绩计入高考录取分数，那么学生和老师必然会重视听说的练习。这是利用考试的正面影响教学的一个好例子。,总之，设计考试时不仅需要考虑,考试本身的质量,，还需考虑考试将会产生的,可能影响,。考试可能产生好的影响，也可能产生坏的影响。如何,扩大好的影响、减少坏的影响,，是考试设计者的任务之一。,考试的,“,指挥棒,”,作用,是客观存在的。在社会上存在着一种观点，认为由于考试的,“,指挥棒,”,作用，引导学生,为考试而学习,，不利于学生能力的培养，所以应该淡化甚至取消考试。这种观点是对考试作用的,误解,。考试的,“,指挥棒,”,作用只是工具而已，如果说工具本身有问题，那责任应该是工具的,制造者,；如果说使用错了，也应该追究,使用者,的责任。关键在于考试设计的,指导思想,，我们要把考试设计成引导学生和教师朝着培养能力的方向而行动的,“,指挥棒,”,。这时考试就会对教学产生好的影响。,参考书目,1,徐强,交际法英语教学和考试评估，上海外语教育出版社，,2000,2,邹申,简明英语测试教程,.,高等教育出版社,2