英语考试命题的原则和方法介绍课件

英语考试命题的原则和方法英语考试命题的原则和方法12019-2-24英语考试命题的原则和方法12019-2-24主要内容主要内容1.如何评价一套试题如何评价一套试题2.如何命制试题如何命制试题3.试题各部分设计要领试题各部分设计要领4.试卷分析与质量报告的撰写提纲试卷分析与质量报告的撰写提纲2主要内容1.如何评价一套试题2如何评价一套试题如何评价一套试题VRIP（Cambridge ESOL)英国剑桥大学外语考试部质量控制指标英国剑桥大学外语考试部质量控制指标“VRIP”：效度效度 Validity信度信度 reliability后效后效 impact实用性实用性 practicality3如何评价一套试题VRIP（Cambridge ESOL)3 Ensure the reliability of a test(Hughes 2000)Take enough samples of behavior收集收集样本样本Do not allow candidates too much freedom不不让受试者有太多的让受试者有太多的自由发挥自由发挥Write unambiguous items 不不要出现要出现歧义歧义Provide clear and explicit instruction指指引清晰简洁引清晰简洁4 Ensure the reliability oEnsure the reliability of a testEnsure that the test are well laid out and perfectly legible 命题清晰命题清晰Candidate should be familiar with format and testing techniques 受试者对格式和测试手段清受试者对格式和测试手段清晰晰Provide uniform and un-distracting conditions of administration确保不受干扰确保不受干扰Use items that permit scoring which is as objective as possible评分标准清晰，保证评分评分标准清晰，保证评分客观客观Make comparisons between candidates as direct as possible确保受试者竞争的公平性确保受试者竞争的公平性5Ensure the reliability of a teHow to ensure the vadility严格按照严格按照义务教育英语课程标准义务教育英语课程标准（2011版）的要求版）的要求6How to ensure the vadility严格按照77听听1能根据能根据语调和重音理解和重音理解说话者的意者的意图；2能听懂有关熟悉能听懂有关熟悉话题的的谈话，并能从中，并能从中提取信息和提取信息和观点；点；3能借助能借助语境克服生境克服生词障碍、理解大意；障碍、理解大意；4能听懂接近正常能听懂接近正常语速的故事和叙述，理速的故事和叙述，理解故事的因果关系；解故事的因果关系；5能在听的能在听的过程中用适当方式做出反程中用适当方式做出反应；6能能针对所听所听语段的内容段的内容记录简单信息。信息。8听1能根据语调和重音理解说话者的意图；8说说1能就简单的话题提供信息，表达简单的观点能就简单的话题提供信息，表达简单的观点和意见，参与讨论；和意见，参与讨论；2能与他人沟通信息，合作完成任务能与他人沟通信息，合作完成任务3能在口头表达中进行适当的自我修能在口头表达中进行适当的自我修4能有效地询问信息和请求帮助；能有效地询问信息和请求帮助；5能根据话题进行情景对话；能根据话题进行情景对话；6能用英语表演短剧；能用英语表演短剧；7能在以上口语活动中做到语音、语调自然，能在以上口语活动中做到语音、语调自然，语气恰当。语气恰当。9说1能就简单的话题提供信息，表达简单的观点和意见，参与讨论读读1能根据上下文和构词法推断、理解生词能根据上下文和构词法推断、理解生词的含义；的含义；2能理解段落中各句子之间的逻辑关系；能理解段落中各句子之间的逻辑关系；3能找出文章中的主题，理解故事的情节，能找出文章中的主题，理解故事的情节，预测故事情节的发展和可能的结局；预测故事情节的发展和可能的结局；4能能读懂常见体裁的阅读材料；读懂常见体裁的阅读材料；5能根据不同的阅读目的运用简单的阅读能根据不同的阅读目的运用简单的阅读策略获取信息；策略获取信息；6能利用字典等工具书进行学习；能利用字典等工具书进行学习；7课外阅读量应累计达到课外阅读量应累计达到15万词以上。万词以上。10读1能根据上下文和构词法推断、理解生词的含义；10写写1能根据写作要求，收集、准备素材；能根据写作要求，收集、准备素材；2能独立起草短文、短信等，并在教师的能独立起草短文、短信等，并在教师的指导下进行修改；指导下进行修改；3能使用常见的连接词表示顺序和逻辑关能使用常见的连接词表示顺序和逻辑关系；系；4能简单描述人物或事件；能简单描述人物或事件；5能根据所给图示或表格写出简单的段落能根据所给图示或表格写出简单的段落或操作说明。或操作说明。11写1能根据写作要求，收集、准备素材；11命制试题的步骤命制试题的步骤编写试题说明编写试题说明制定考试双向细目表制定考试双向细目表12命制试题的步骤编写试题说明12试题说明试题说明考查的目的考查的目的考查的范围考查的范围受试者受试者考查内容考查内容考查方法考查方法考查的任务和题型考查的任务和题型考查的组织机构考查的组织机构考查实施考查实施考查能力发展表格考查能力发展表格13试题说明考查的目的131414考试试题各部分的设计要领考试试题各部分的设计要领听读任务的设计要领听读任务的设计要领说写任务的设计要领说写任务的设计要领情感态度，学习策略，文化意识任务的设情感态度，学习策略，文化意识任务的设计要领计要领15考试试题各部分的设计要领听读任务的设计要领15听读任务的设计要领听读任务的设计要领1.语言输入：文章体裁，内容话题和语言难度语言输入：文章体裁，内容话题和语言难度(阅读文段阅读文段不一定适用于听力）不一定适用于听力）2.试卷整体设计：权重与任务类型试卷整体设计：权重与任务类型3.任务类型：任务类型：选择性反应选择性反应评价任务：是非题，单选题，匹配题，排评价任务：是非题，单选题，匹配题，排序题序题构建性反应构建性反应评价任务：根据文章内容填空，根据文章评价任务：根据文章内容填空，根据文章内容转换信息填写表格，问答题，翻译题。阅读测试内容转换信息填写表格，问答题，翻译题。阅读测试中还经常使用完形填空题型。中还经常使用完形填空题型。4.考点设置：与听力和阅读材料的考点设置：与听力和阅读材料的关键信息关键信息密切相关，密切相关，主要选取与主要选取与what，who，when，where，how等引等引导的问题相关的信息。导的问题相关的信息。5.试题的编写：单选题，完形填空题，干扰项，表格题试题的编写：单选题，完形填空题，干扰项，表格题16听读任务的设计要领1.语言输入：文章体裁，内容话题和语言难度1.语言输入语言输入话题：话题：课标课标中的话题，有教育意义的，适合中的话题，有教育意义的，适合 中学生的语言特征，思维水平和心理特征的。中学生的语言特征，思维水平和心理特征的。体裁：阅读理解的文体选择范围较广，体裁较体裁：阅读理解的文体选择范围较广，体裁较 多，但多，但完形填空完形填空和和语法选择语法选择较常用较常用夹叙夹叙 夹议夹议的文章。说明文和议论文较少使用。的文章。说明文和议论文较少使用。难度：难度：词语词语的复杂性（的复杂性（低频单词低频单词的占比，的占比，新单新单 词词不超过不超过3%）句子句子的复杂性（的复杂性（从句从句的数量和复杂程度）的数量和复杂程度）篇章篇章的长度的长度 narrative 可上可上400词词 议论性的不能超过议论性的不能超过350词词171.语言输入话题：课标中的话题，有教育意义的，适合 案例分析单选第六小题A tired B forgot C remember D tried hard but was unable18案例分析单选第六小题18说写任务的设计要领说写任务的设计要领1.确定考试类型：直接，半直接，间接确定考试类型：直接，半直接，间接2.确定确定口试口试任务类型：根据考试答题时的人数任务类型：根据考试答题时的人数可分为单向型，双向型和多向型。可分为单向型，双向型和多向型。3.确定确定写作写作任务类型：自由写作，控制性写作任务类型：自由写作，控制性写作和指导性写作和指导性写作4.写作任务的编写：写作任务由写作任务的编写：写作任务由情景描述情景描述，写写作提示作提示（prompts)和和写作要求写作要求组成组成19说写任务的设计要领1.确定考试类型：直接，半直接，间接19第三节第三节 书面表达书面表达为弘扬广府文化，你校在上周六举行了一次为弘扬广府文化，你校在上周六举行了一次“Guangzhou Culture Festival”的活动，请根据的活动，请根据以下提示写一篇英语短文，介绍活动的情况并提以下提示写一篇英语短文，介绍活动的情况并提出你对下一年文化节的建议。出你对下一年文化节的建议。情景描述情景描述20第三节 书面表达为弘扬广府文化，你校在上周六举行了一次“GuGuangzhou Culture Festival活动名称活动名称活动情况活动情况粤剧歌唱比赛粤剧歌唱比赛Cantonese Opera Competition学生感兴趣，积极参与；学生感兴趣，积极参与；音乐动听，服饰美丽音乐动听，服饰美丽图片展图片展picture show展示了广州的变化展示了广州的变化从中了解广州的历史和文从中了解广州的历史和文化化美食展美食展（请你补充）（请你补充）你对下一年文化节的建议（你对下一年文化节的建议（1-2点）点）写作提示写作提示21Guangzhou Culture Festival活动名称注意：注意：1.词数词数80左右（文章开头已给出，不左右（文章开头已给出，不计入字数）计入字数）2.不得透露学校，姓名等任何个人信息，否不得透露学校，姓名等任何个人信息，否则不予评分。则不予评分。写作要求写作要求22注意：1.词数80左右（文章开头已给出，不计入字数）写作要求2014佛山题俗话说俗话说”入乡随俗入乡随俗“从以上报道可见，去另一个从以上报道可见，去另一个国家前，先了解其习俗和历史是很有必要的。请国家前，先了解其习俗和历史是很有必要的。请你根据初中阶段所学的关于英国的习俗和历史，你根据初中阶段所学的关于英国的习俗和历史，写出一篇文章，投稿到某英文版的旅游文化刊物。写出一篇文章，投稿到某英文版的旅游文化刊物。情景描述情景描述232014佛山题俗话说”入乡随俗“从以上报道可见，去另一个国家礼仪礼仪第一次见面通常握手第一次见面通常握手跟年长的人说话要用跟年长的人说话要用Mr或或Mrs饮食饮食在茶会（在茶会（tea party)只能喝茶，不喝咖啡只能喝茶，不喝咖啡或果汁或果汁城市城市伦敦（伦敦（London）约两千年历史）约两千年历史利物浦（利物浦（Liverpool），在），在18世纪以工业世纪以工业闻名闻名注意事项注意事项 在公共场合不要大声说话在公共场合不要大声说话.（请在列举（请在列举1-2点）点）写作提示写作提示24礼仪第一次见面通常握手跟年长的人说话要用Mr或Mrs饮食在茶词数词数90左右左右短文的开头和结尾已给出，不计入词数。短文的开头和结尾已给出，不计入词数。文章需包括所有写作要点，但不要逐字翻文章需包括所有写作要点，但不要逐字翻译。可适当加入过渡语句，使短文通顺，译。可适当加入过渡语句，使短文通顺，连贯。连贯。不要照抄短文，文中不能出现考生真实姓不要照抄短文，文中不能出现考生真实姓名和学校名称。名和学校名称。写作要求写作要求25词数90左右写作要求25情感态度，学习策略，文化意识任情感态度，学习策略，文化意识任务设计思考要点务设计思考要点情感态度可以结合情感态度可以结合听力考试听力考试考查考生对说考查考生对说话人情感、态度的理解来进行。话人情感、态度的理解来进行。学习策略评价可以结合学习策略评价可以结合阅读理解阅读理解测试进行。测试进行。文化意识评价可以结合文化意识评价可以结合口语测试口语测试（如对话、（如对话、情景反应），情景反应），阅读理解阅读理解和和写作题写作题进行。进行。26情感态度，学习策略，文化意识任务设计思考要点情感态度可以结合试卷分析与质量报告的撰写提纲试卷分析与质量报告的撰写提纲一、试题命制情况一、试题命制情况二、答卷总体情况描述二、答卷总体情况描述1.成绩分布成绩分布2.统计量描述统计量描述3.分布形态判断分布形态判断4.由样本统计量推断总体参数由样本统计量推断总体参数三、信效度分析三、信效度分析四、项目分析（每道题的参数分析）四、项目分析（每道题的参数分析）五、干扰性评估五、干扰性评估六、试题分析（考点分析，选择项分析，作文描六、试题分析（考点分析，选择项分析，作文描述性分析和错误分析）述性分析和错误分析）七、建议（期待的测试反拨作用）七、建议（期待的测试反拨作用）27试卷分析与质量报告的撰写提纲一、试题命制情况27统计数据分析统计数据分析1.平均分平均分2.标准差标准差3.难度系数难度系数4.区分度区分度28统计数据分析1.平均分2850 70 9040 70 1002950 70 90293030标准差标准差可以反映分数的可以反映分数的离散离散趋势趋势离差平方和的算术平均数的方根离差平方和的算术平均数的方根31标准差可以反映分数的离散趋势离差平方和的算术平均数的方根3150 70 9040 70 100标准差越高，离散程度越大标准差越高，离散程度越大3250 70 90标准差越高，离散程度越大难度系数难度系数做对的人数除以总人数做对的人数除以总人数难度系数越高，题目越容易难度系数越高，题目越容易33难度系数做对的人数除以总人数难度系数越高，题目越容易33区分度低分组做对人数减高分组做对人低分组做对人数减高分组做对人数除以任意组人数数除以任意组人数34区分度低分组做对人数减高分组做对人34好可以接受要调整要去除35好35Thanks for listening!36Thanks for listening!36