教育心理学12学习结果的评价与测量ppt课件

教育心理学 第十二章 学习结果的测量与评价 教育心理学 第十二章 学习结果的1一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行本章学习目标n定义测量、测评和评价定义测量、测评和评价n指出测验与其他测量工具的区别指出测验与其他测量工具的区别n指出信度和效度的区别指出信度和效度的区别 n定义档案袋定义档案袋n定义真实测验定义真实测验n什么是常模参照测验与标准参照测验什么是常模参照测验与标准参照测验n测验选择的原则测验选择的原则n评定测量信度的方法评定测量信度的方法n效度的类型有哪些效度的类型有哪些n说明客观测验与主观测验说明客观测验与主观测验n对传统测验的革新对传统测验的革新本章学习目标定义测量、测评和评价2一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行测量和评价n测量测量指收集信息，并用数字表示的过程。指收集信息，并用数字表示的过程。q如如表表示示距距离离，我我们们用用3米米，5公公里里，1光光年年。表表示示时时间间，用用15秒，秒，30分钟等。分钟等。n测测评评是是包包含含测测量量的的更更大大的的概概念念。即即它它要要用用数数字字表表示示，还还 要要 形形 成成 判判 断断 和和 决决 策策。前前 者者 是是 指指 测测 量量（measurement），后者指评价（），后者指评价（evaluation）。）。n测测量量的的结结果果是是测测评评的的依依据据，测测评评过过程程就就是是依依据据测测量量的的结结果果，对对学学生生的的反反应应行行为为及及其其原原因因进进行行分分析析和评价。和评价。n测量、测评和测验这三个过程解决了不同的问题：测量、测评和测验这三个过程解决了不同的问题：测量是用量化资料来描述学生的学习情况；测评测量是用量化资料来描述学生的学习情况；测评是根据量化的资料作出判断。是根据量化的资料作出判断。测验测验(test)是指测是指测量的活动或工具。量的活动或工具。测量和评价测量指收集信息，并用数字表示的过程。3一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行常模参照测验与标准参照测验n常模常模是指有代表性的被试样本在测验上的分是指有代表性的被试样本在测验上的分数模式。大多数的测验常模就用平均数和标数模式。大多数的测验常模就用平均数和标准差来描述。准差来描述。n常模参照性测验（常模参照性测验（Norm-referenced test）是将测验分数参照常模加以解释，也就是是将测验分数参照常模加以解释，也就是将每一个人的分数同团体中的其他人进行比将每一个人的分数同团体中的其他人进行比较，这是一种相对的比较。较，这是一种相对的比较。n标准参照性测验（标准参照性测验（Criterion-referenced testing）是将测验结果同事先规定的标准是将测验结果同事先规定的标准进行比较，对被试个体的分数作出解释。进行比较，对被试个体的分数作出解释。常模参照测验与标准参照测验常模是指有代表性的被试样本在测验上4一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行测验的类型2.情感测验情感测验 Affective Instruments3.投射测验投射测验 Projective Instruments1.认知测验认知测验 Cognitive Instruments测验的类型2.情感测验 Affective Instru5一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行认知测验n测验学生在学业方面达到的程度。测验学生在学业方面达到的程度。n学业成绩测验学业成绩测验（achievement tests）n能力测验能力测验 （aptitude tests）认知测验测验学生在学业方面达到的程度。6一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行测验的选择 2.需要具体哪种测验需要具体哪种测验1.需要哪种类型的测验需要哪种类型的测验 3.对测验分析、比较对测验分析、比较 4.选择最好的测验选择最好的测验 测验的选择 2.需要具体哪种测验1.需要哪种类型的测验7一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行测验选择的原则2.要有最好的效度要有最好的效度 1.要有最好的信度要有最好的信度3.施测、计分、解释分数方便施测、计分、解释分数方便4.被测者没有做过该测验被测者没有做过该测验测验选择的原则2.要有最好的效度 1.要有最好的信度3.8一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行测验的施测 2.确保良好的测验环境确保良好的测验环境 1.事先做好安排事先做好安排 3.准备所有可能的费用准备所有可能的费用测验的施测 2.确保良好的测验环境 1.事先做好安排9一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行一个好的测验的两个特性n1.效度效度：指能否测出所要测量内容的程度。指能否测出所要测量内容的程度。Validity:Validity:the degree to which the instrument measures what it purports to measure。n2.信度信度：指测验的一致性程度。指测验的一致性程度。Reliability:Reliability:the degree to which the instrument consistently measures what it purports to measure。一个好的测验的两个特性1.效度：指能否测出所要测量内容的程10一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行评定测量信度的方法n重测信度重测信度Test-retest reliabilityn等值复本信度等值复本信度Equivalent forms reliabilityn内部一致信度内部一致信度Internal reliabilityn折半信度折半信度/分半信度分半信度Split-half methodn评分者信度（评分者信度（inter-scorer）Inter-rater reliability评定测量信度的方法重测信度Test-retest relia11一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行重测信度/再测信度（test-retest reliability）n用同一种测验，对同一组受试者，前后施测两用同一种测验，对同一组受试者，前后施测两次，再根据受试者两次测验分数计算其相关系次，再根据受试者两次测验分数计算其相关系数，即得数，即得再测信度再测信度。n两次测验分数的误差变异主要来自测验条件和两次测验分数的误差变异主要来自测验条件和受试者身心状况的改变。再测信度高，说明分受试者身心状况的改变。再测信度高，说明分数受被试状况和测验情境变化的影响小。数受被试状况和测验情境变化的影响小。n初测与再测的间隔最好不超过初测与再测的间隔最好不超过 6 个月。个月。重测信度/再测信度（test-retest reliabi12一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行等值复本信度(equivalent forms reliability)n任何测验只是所有可能题目中的一份取样，所任何测验只是所有可能题目中的一份取样，所以编制许多平行的等值测验，叫做复本。以编制许多平行的等值测验，叫做复本。n等值：题目内容，数量，形式，难度，区分度，等值：题目内容，数量，形式，难度，区分度，指导语，时限，所用的例题、公式，测验的其指导语，时限，所用的例题、公式，测验的其他方面都应该相同或相似。他方面都应该相同或相似。n一种测验有两个以上的复本，根据一群受试者一种测验有两个以上的复本，根据一群受试者接受两个复本测验的得分计算相关系数，即得接受两个复本测验的得分计算相关系数，即得等值复本信度等值复本信度。n两个等值测验可同时连续施测或相距一段时间两个等值测验可同时连续施测或相距一段时间分两次施测。分两次施测。等值复本信度(equivalent forms relia13一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行折半信度/分半信度(split-half method)n折半信度折半信度是在测试以后对测验项目按奇项、偶是在测试以后对测验项目按奇项、偶项或其他标准分成两半，分别记分，以两半分项或其他标准分成两半，分别记分，以两半分数之间的相关系数作为信度系数。数之间的相关系数作为信度系数。n折半信度折半信度split-half reliability n斯皮尔曼斯皮尔曼布朗公式布朗公式Spearman-Brown correction formula。折半信度/分半信度(split-half method)14一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行内部一致信度(internal consistent reliability)n构成测验的各测题间的相互关系，即测验内部一致性。构成测验的各测题间的相互关系，即测验内部一致性。n不是题目内容或形式的一致，是指分数的一致。不是题目内容或形式的一致，是指分数的一致。n测验的各个题目得分有较高的正相关，不论题目内容和形测验的各个题目得分有较高的正相关，不论题目内容和形式如何，测验的内部一致性高。式如何，测验的内部一致性高。n测验题目看来好象一致，但相关为零或复值，测验的内部测验题目看来好象一致，但相关为零或复值，测验的内部一致性低。一致性低。n内部一致性的测量：内部一致性的测量：q库德库德理查森（理查森（Kuder-Richardson）公式）公式20 q克劳伯克（克劳伯克（Cronbacks Alpha）系数系数内部一致信度(internal consistent re15一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行评分者信度(inter-scorer/inter-rater reliability)n心理测验一般都有一套标准化的评分程序，采用客心理测验一般都有一套标准化的评分程序，采用客观性题目，由评分引起的误差变异是可以忽略的。观性题目，由评分引起的误差变异是可以忽略的。n对一些无法完全客观记分的测验来说，评分者之间对一些无法完全客观记分的测验来说，评分者之间的变异会带来误差。的变异会带来误差。q如创造性思维测验，人格测量投射测验。如创造性思维测验，人格测量投射测验。n方法：随机抽取相当份数的试卷，由两位评分者按方法：随机抽取相当份数的试卷，由两位评分者按记分规则分别给分。然后根据每份试卷的两个分数记分规则分别给分。然后根据每份试卷的两个分数计算其相关系数，即得评分者信度。计算其相关系数，即得评分者信度。n评分者之间平均一致性达到评分者之间平均一致性达到.90以上，才认为评分以上，才认为评分是客观的。是客观的。评分者信度(inter-scorer/inter-rat16一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行效度类型 2.效标关联效度效标关联效度Criterion-related validity 3.构思效度构思效度 Construct validity1.内容效度内容效度Content validity效度类型 2.效标关联效度Criterion-relat17一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行内容效度内容效度：指测验项目在多大程度上表示了所指测验项目在多大程度上表示了所指测验项目在多大程度上表示了所指测验项目在多大程度上表示了所要测定的特征范畴。要测定的特征范畴。要测定的特征范畴。要测定的特征范畴。要决定学生某一学科学的怎样，首先要知道学要决定学生某一学科学的怎样，首先要知道学要决定学生某一学科学的怎样，首先要知道学要决定学生某一学科学的怎样，首先要知道学科的内容是什么？如果把学科内容理解为是有科的内容是什么？如果把学科内容理解为是有科的内容是什么？如果把学科内容理解为是有科的内容是什么？如果把学科内容理解为是有知识和技能组成的话，学业成就测验就是编制知识和技能组成的话，学业成就测验就是编制知识和技能组成的话，学业成就测验就是编制知识和技能组成的话，学业成就测验就是编制一些项目，这些项目是所覆盖的全部知识和技一些项目，这些项目是所覆盖的全部知识和技一些项目，这些项目是所覆盖的全部知识和技一些项目，这些项目是所覆盖的全部知识和技能的一系列样本。能的一系列样本。能的一系列样本。能的一系列样本。内容效度内容效度：指测验项目在多大程度上表示了所要测定的特征范畴。内18一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行例：n“电电”这个单元包括的主题有：这个单元包括的主题有：q导体（导体（10%），电阻（），电阻（5%），电流（），电流（20%）、）、电极（电极（10%），电磁（），电磁（5%）、电解质（）、电解质（20%），），绝缘材料（绝缘材料（15%）发电方法（）发电方法（15%）。）。q编制这部分学业成就测验，就要按比例编制测编制这部分学业成就测验，就要按比例编制测验项目。如果能按比例编制，你所编项目是所验项目。如果能按比例编制，你所编项目是所覆盖内容的样本，那么具有覆盖内容的样本，那么具有内容效度内容效度。例：“电”这个单元包括的主题有：19一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行预测效度预测效度（predictive validity）指测验分数）指测验分数对于未来的行为或作业测量能够预测得多么对于未来的行为或作业测量能够预测得多么好。如用学习能力测验预测大学生的平均成好。如用学习能力测验预测大学生的平均成绩。这种预测的准确性的指标就是测验的效绩。这种预测的准确性的指标就是测验的效度。度。与预测效度有关的最重要方面是标准，因而与预测效度有关的最重要方面是标准，因而又称为又称为效标关联效度效标关联效度。效标关联效度预测效度（predictive validity）指测验分数20一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行构思效度构思效度:涉及的是一个测验所测量的心理特质涉及的是一个测验所测量的心理特质或属性。或属性。构思效度就是要检验是不是测量了人们提出的理构思效度就是要检验是不是测量了人们提出的理论构思。论构思。如如智智力力测测验验的的编编制制。理理论论认认为为：智智力力随随年年龄龄而而增增长长；与与学学业业成成绩绩密密切切相相关关；智智商商相相对对稳稳定定；受受遗遗传传影影响响。如如果果测测验验的的分分数数随随年年龄龄而而增增加加；智智力力与与学学业业成成绩绩有有正正相相关关，智智商商在在一一定定时时间间保保持持相相对对稳稳定定，同同卵卵双双生生子子的的智智力力的的相相关关高高于于一一般般兄兄弟弟姐姐妹妹，这些材料成为肯定测验构思效度的证据。这些材料成为肯定测验构思效度的证据。构思效度构思效度:涉及的是一个测验所测量的心理特质或属性。构思效度21一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行客观测验与主观测验n多项选择题，匹配题，判断题，简答题和填空多项选择题，匹配题，判断题，简答题和填空题都属于题都属于客观测验客观测验（Objective Testing），其特点是答案确定，评分不需要解释。其特点是答案确定，评分不需要解释。n论述题属于论述题属于主观测验主观测验（Subjective Testing）,其特点是要求学生创造性地写出自其特点是要求学生创造性地写出自己的答案。己的答案。客观测验与主观测验多项选择题，匹配题，判断题，简答题和填空题22一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行客观测验项目的编制n题干要明确、简洁题干要明确、简洁n题干中的问题用肯定表述题干中的问题用肯定表述n不要写明显错误的选项不要写明显错误的选项n避免使用一些具有绝对意义的词避免使用一些具有绝对意义的词n避免出现两个相同意义的干扰项避免出现两个相同意义的干扰项n避免按原样使用课本中的表达词避免按原样使用课本中的表达词客观测验项目的编制题干要明确、简洁23一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行主观测验的编制n适合对复杂学习成果的评估适合对复杂学习成果的评估n测验要有足够的答题时间测验要有足够的答题时间n主观题和客观题相结合主观题和客观题相结合主观测验的编制适合对复杂学习成果的评估24一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行对传统测验的革新n真实测验（真实测验（Authentic tests）n档案袋（档案袋（Portfolios）对传统测验的革新真实测验（Authentic tests）25一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行真实测验（Authentic test）n真实测验真实测验是指是指 测试学生在实际生活中的技巧和能力的一种评估方测试学生在实际生活中的技巧和能力的一种评估方法。法。n真实测验的一些特点：真实测验的一些特点：n1.1.更开放更开放n2.2.不受时间限制不受时间限制n3.3.提供已知的问题提供已知的问题n4.4.更象一系列作业更象一系列作业n5.5.需要与他人的一些合作需要与他人的一些合作n6.6.评分体系是多维的评分体系是多维的n7.7.给学生的学习风格、学习态度和学习兴趣留下空间给学生的学习风格、学习态度和学习兴趣留下空间真实测验（Authentic test）真实测验是指 测试26一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行档案袋（Portfolio）n档案袋档案袋是指体现学生某些方面的成长、自我反思是指体现学生某些方面的成长、自我反思和成绩的作业集。和成绩的作业集。n例：例：q“今天看了作文本里从今天看了作文本里从9 9月份以来自己写的所有月份以来自己写的所有故事，觉得有所提高。现在对它们做了修订，故事，觉得有所提高。现在对它们做了修订，加了句号和引号。过去有的故事写得比较长，加了句号和引号。过去有的故事写得比较长，有错别字，现在我查字典和问朋友。能写出激有错别字，现在我查字典和问朋友。能写出激动人心的、让人害怕的故事，故事的结尾也写动人心的、让人害怕的故事，故事的结尾也写得不错了。得不错了。”档案袋（Portfolio）档案袋是指体现学生某些方面的成27一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行档案袋的创建原则n1.学生参与学生参与n2.包含反思和自我批评包含反思和自我批评n3.反映学习活动反映学习活动n4.在不同的阶段，起不同作用在不同的阶段，起不同作用n5.体现学生的成长体现学生的成长n6.教会学生如何建立和使用教会学生如何建立和使用档案袋的创建原则1.学生参与28一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行Chapter12EndChapter12End谢谢29