测量信度的种类及估计方法课件

,测量信度的种类及估计方法,测量信度的种类及估计方法,1,重测信度,目,录,CONTENTS,2,复本信度,3,内部一致性信度,4,评分者信度,5,信度系数及其估计方法总结,重点掌握各种信度估计方法的,含义及其适用条件,1重测信度目 录CONTENTS2,一、重测信度,（一）含义和估计方法,同一个测量工具在两个不同时间对同一组被试施测所得结果的一致性程度。,重测信度的大小可以通过计算测量工具的,重测系数（,test-retest coefficient,）或叫稳定性系数（,coefficient of stability,）,来标志。,具体来说，就是求取同一组被试在两个不同时间施测同一个测量工具所得结果分数的,相关系数,。,一、重测信度（一）含义和估计方法同一个测量工具在两个不同,1,重测信度主要考察了一个测量工具是否能够保证在不同时间测量结果的一致性，他反映了测量工具的结果受到,时间间隔因素影响,的大小。,2,重测信度系数较大时，说明该测量工具前、后两次的测量结果比较一致。结果具有较好的,跨时间上的稳定性。,3,一般来说，重测的时间间隔越短，那么各种施测情境的变化就越小，重测信度系数就会越高。,一、重测信度,1重测信度主要考察了一个测量工具是否能够保证在不同时间测量结,（二）使用的条件,1,测量工具所测量的个体心理特质在时间上应该是相对稳定的。,2,测量工具所测量的个体心理特质应该不存在明显的练习效应和遗忘效应。,3,在两次施测间隔期间不应该进行专门的训练和培训，以保证重测信度反映的是随机因素的影响效应。,一、重测信度,（二）使用的条件1测量工具所测量的个体心理特质在时间上应该是,4,使用重测信度时需要注意的问题,两次施测时间间隔的长短会影响重测信度系数估计值的大小，因此，在报告重测信度系数时应该报告间隔的时间长度。,应根据已有的相关研究结论考虑所测心理特质本身的稳定性程度，以确定前后两次施测时间的间隔究竟应该多长比较合适时，不应该随便选择间隔时间的长短。,一、重测信度,4使用重测信度时需要注意的问题两次施测时间间隔的长短会影响重,二、复本信度,（一）含义和估计方法,1,两个平行的测验（复本测验）测量同一批被试所得结果的一致性程度。,2,复本信度的估计过程就是计算同一批被试在两个平行的复本测验上所得分数的相关系数，也叫作等价系数（,coefficient of equivalence,）。,二、复本信度（一）含义和估计方法1两个平行的测验（复本测,3,平行测验或复本测验指的是两个在题目内容、数量、形式、难度、区分度、指导语、时限以及所用的例题、公式和测验等其他方面都相同或相似的测验。,4,也就是用不同的题目测量同样的内容而且其测验结果的平均值和标准差都相同的两个测验。,平行测验或复本测验,二、复本信度,3平行测验或复本测验指的是两个在题目内容、数量、形式、难度、,5,在估计测验的复本信度时，可以根据两个平行测验间的时间间隔分为同时测试和延时测试两种设计。,6,同时测试可能会存在作答疲劳的效应，而延时测试则可能会存在学习或培训效应。,7,复本信度反映了由于题目的不同以及时间间隔所导致的测量误差。,二、复本信度,5在估计测验的复本信度时，可以根据两个平行测验间的时间间隔分,（二）使用的条件,01,要构造出两份或两份以上真正平行的测验,;,02,计算复本信度需要对同一批被试测试两份平行测验，这就需要掌握一个合理的时间安排。,03,应该尽量在测试结果报告中，详尽地说明两次测试的时间间隔、测试顺序安排、测试过程中被试的有关测验经历等。,二、复本信度,（二）使用的条件01要构造出两份或两份以上真正平行的测验;0,三、内部一致性信度,内部一致性信度估计方法主要包括分半信度估计法、库德,-,理查森信度估计法、克龙巴赫,Alpha,系数估计法。,在估计测验的内部一致性信度时，只要用同一个测验对一批被试测试一次。,内部一致性信度主要评价了测验各随机组成部分之间是否测量了相同的心理特质，因此，它反映的是题目内容的抽样一致性程度。,三、内部一致性信度内部一致性信度估计方法主要包括分半信度,三、内部一致性信度,（一）分半信度,1,含义和估计方法,把一个测验的所有题目随机地划分成对半的两个部分，然后估计所有被试在这两个部分题目上得分的一致性程度，这样得到的测验一致性估计称为分半信度。,分半信度评价了,测验两个随机组成部分的题目是否测量了相同的心理特质。,三、内部一致性信度（一）分半信度1 含义和估计方法把一个,三、内部一致性信度,常用奇偶分半的方式，求分半相关系数，并用,Spearman-Brown,公式进行校正。,也可以采用,Rulon,公式估计分半信度。,三、内部一致性信度常用奇偶分半的方式，求分半相关系数，并,三、内部一致性信度,分半信度通常是在测验只能施测一次或没有复本的情况下使用，而且要求被试在两个分半测验上得分平均数和方差相等。,对一个测验进行分半的方式很多，所以，同一个测验通常会有多个分半信度值。,一般来说，如果其他条件不变，那么测验长度越长，测验结果将越稳定、信度越高。,2,使用的条件,三、内部一致性信度分半信度通常是在测验只能施测一次或没有,三、内部一致性信度,（,二）库德,理查森信度,在估计分半信度时，把一个测验的题目分成两半的方式是非常多的。而每种分半方式得到的信度估计值总会存在一些差异，但我们无法知道究竟哪种分半结果所得到的信度估计值是最合适的。,估计所有可能的分半信度系数的平均数，作为完整测验的内部一致性最佳估计值。,1,含义和估计方法,三、内部一致性信度（二）库德理查森信度在估计分半信度,三、内部一致性信度,评估方法：,所有分半信度系数的平均数的估计方法。,三、内部一致性信度评估方法：所有分半信度系数的平均数的估,三、内部一致性信度,只要求测验对一批被试测试一次。,只能针对,1,、,0,记分题型，对于其他题型需要使用更加一般化的估计方法。,2,使用的条件,三、内部一致性信度只要求测验对一批被试测试一次。2 使用,（三）,Cronbachs Alpha,系数,三、内部一致性信度,是一种比,Kuder-Richardson,信度估计方法更加一般化的方法，它可以针对各种计分方式的题型进行信度估计。,估计方法：,公式（,2-9,）,1,含义和估计方法,（三）Cronbachs Alpha系数 三、内部一致性,三、内部一致性信度,只要求测验对一批被试测试一次，因此，在测试安排上比较方便。,可以估计各种计分方式的测验内部一致性信度系数，是更一般化的测验内部一致性信度系数估计方法。,2,使用的条件,三、内部一致性信度只要求测验对一批被试测试一次，因此，在,四、评分者信度,一般的客观型题目在评分时很少出现误差，然而，对于诸如作文测验、语言类测验、以及其他的评价性测验（如人格特质评级、投射测验评分等），这些测验,类型的评分过程就显得非常主观。,在评价通过主观评分方式得到的分数时，我们必须了解,不同的评分者在评价被试作答反应时给的分数值的一致性程度。,1,含义,四、评分者信度一般的客观型题目在评分时很少出现误差，然而,四、评分者信度,两个评分者时：,计算这两个评分者评定分数之间的相关系数。,多个评价者评价同一批被试：,计算和谐系数。,2,评估方法,四、评分者信度两个评分者时：计算这两个评分者评定分数之间,五、信度系数及其估计方法总结,1.,各种信度估计方法的误差方差来源,信度估计方法,误差方差来源,重测信度,复本信度（同时测试）,复本信度（延时测试）,分半信度,Kuder-Richardson,和,Alpha,系数,评分者信度,时间间隔,题目内容,时间间隔与题目内容,题目内容,题目内容与心理行为特质的同质性,评分者间差异,表,2-2,各种信度估计方法的误差方差来源,五、信度系数及其估计方法总结1.各种信度估计方法的误差方,2.,各类测验的信度系数,人格、兴趣等类型测验的信度低于能力类型测验。,测验类型,信度系数,低,中,高,学业成就测验,0.66,0.92,0.98,学术能力测验,0.56,0.90,0.97,特殊能力倾向测验,0.26,0.88,0.96,人格测验,0.46,0.85,0.97,兴趣测验,0.42,0.84,0.93,态度测验,0.47,0.79,0.98,表,2-3,各种心理评估工具的信度,注：表中数据来源，,Lewis R.Aiken:Psychological testing and assessment(eighth edition),Allyn and Bacon,Inc,1994.,五、信度系数及其估计方法总结,2.各类测验的信度系数人格、兴趣等类型测验的信度低于能力类型,测验信度多高才有应用价值,，这关键取决于我们究竟想要用这个测验干什么。,至少,0.85,以上,个体比较,0.60-0.70,群体比较,信度系数,五、信度系数及其估计方法总结,测验信度多高才有应用价值，这关键取决于我们究竟想要用这个测验,共同学习，未来可期,共同学习，未来可期,