资源描述
第六章第六章 项目分析项目分析第六章 项目分析n n项目分析就是根据试测结果对组成测验项目分析就是根据试测结果对组成测验的各个题目(项目)进行分析,从而评的各个题目(项目)进行分析,从而评价题目好坏、对题目进行筛选。价题目好坏、对题目进行筛选。n n包括质的分析和量的分析,如表包括质的分析和量的分析,如表6.1 6.1 项目分析就是根据试测结果对组成测验的各个题目(项目)进行分析表表表表6.1 6.1 6.1 6.1 研究生入学考试英语近研究生入学考试英语近研究生入学考试英语近研究生入学考试英语近3 3 3 3年数据对比分析年数据对比分析年数据对比分析年数据对比分析 项项目目1999年年2000年年2001年年平均分平均分43.1056.6145.31标准差标准差12.0013.5013.10难难度度0.430.570.45表6.1 研究生入学考试英语近3年数据对比分析 项 目1本章目的本章目的n n掌握难度的估计方法掌握难度的估计方法n n了解测验难度水平的确定依据了解测验难度水平的确定依据n n掌掌握握项项目目区区分分度度的的求求法法及及区区分分度度对对测测验验质质量的影响量的影响n n了解难度与区分度的关系了解难度与区分度的关系本章目的掌握难度的估计方法一、一、项目难度项目难度(一)(一)定义定义(二)(二)估计难度的方法估计难度的方法(三)(三)选择题的难度修正选择题的难度修正(四)(四)项目难度的等距量表项目难度的等距量表(五)(五)测验难度的确定测验难度的确定go一、项目难度(一)定义go(一)定义(一)定义n n难度就是指测验项目的难易程度。难度就是指测验项目的难易程度。能力测验:项目的难易水平能力测验:项目的难易水平能力测验:项目的难易水平能力测验:项目的难易水平 非非非非能能能能力力力力测测测测验验验验:“通通通通俗俗俗俗性性性性”或或或或者者者者“流流流流行行行行性性性性”水水水水平平平平(popularity levelpopularity level)。)。n n难难度度分分析析,是是对对项项目目的的难难度度进进行行估估计计以以确确定适宜的难度。定适宜的难度。back(一)定义难度就是指测验项目的难易程度。back(二)估计项目难度的方法(二)估计项目难度的方法 测验的计分方法不同,项目难度测验的计分方法不同,项目难度的计算方法也不同。的计算方法也不同。1 1、二值记分项目的难度、二值记分项目的难度 2 2、多值记分项目的难度、多值记分项目的难度(二)估计项目难度的方法 测验的计分方法不同1 1、二值计分项目的难度、二值计分项目的难度(1 1 1 1)通过率)通过率)通过率)通过率n n二值计分:项目的计分只有答对和答错两种情况,二值计分:项目的计分只有答对和答错两种情况,二值计分:项目的计分只有答对和答错两种情况,二值计分:项目的计分只有答对和答错两种情况,计为计为计为计为1 1 1 1或或或或0 0 0 0n n通过率:以答对百分比(或比率)通过率:以答对百分比(或比率)通过率:以答对百分比(或比率)通过率:以答对百分比(或比率)n n当项目以当项目以当项目以当项目以1 1 1 1、0 0 0 0计分时,难度等于通过率计分时,难度等于通过率计分时,难度等于通过率计分时,难度等于通过率n n例例例例如如如如:在在在在200200200200个个个个学学学学生生生生中中中中,答答答答对对对对某某某某题题题题的的的的人人人人数数数数为为为为120120120120人人人人,则该项目的难度为则该项目的难度为则该项目的难度为则该项目的难度为1、二值计分项目的难度(1)通过率1 1、二值计分项目的难度、二值计分项目的难度(2 2 2 2)极端分组法极端分组法 当项目以当项目以当项目以当项目以1 1 1 1、0 0 0 0计分,而人数较多时,难计分,而人数较多时,难计分,而人数较多时,难计分,而人数较多时,难度等于度等于度等于度等于总分总分总分总分上高分组与低分组通过率的平均数上高分组与低分组通过率的平均数上高分组与低分组通过率的平均数上高分组与低分组通过率的平均数 1、二值计分项目的难度(2)极端分组法例:例:n n假设有假设有370370个被试,取其中成绩最高的个被试,取其中成绩最高的27%27%(100100)人定为高分组,成绩最低的)人定为高分组,成绩最低的27%27%(100100)人定为低分组,对于某一道)人定为低分组,对于某一道试题,若高分组有试题,若高分组有6060人答对,低分组有人答对,低分组有3030人答对,则:人答对,则:n nPh=60/100=0.60 Ph=60/100=0.60 Pl=30/100=0.30Pl=30/100=0.30n n所以该题的难度为所以该题的难度为n nP=P=(0.6+0.30.6+0.3)/2=0.45/2=0.45例:假设有370个被试,取其中成绩最高的27%(100)人定2 2、多值计分项目的难度、多值计分项目的难度n n当项目以多值计分时,难度等于平均分当项目以多值计分时,难度等于平均分与满分之比。与满分之比。例如:设某一问答题满分是例如:设某一问答题满分是2020分,全体考分,全体考生在该题上所得的平均分为生在该题上所得的平均分为1010分,则该分,则该题的难度为:题的难度为:P=10/20=0.50 P=10/20=0.50 2、多值计分项目的难度当项目以多值计分时,难度等于平均分与n n当当当当测测测测验验验验不不不不是是是是二二二二值值值值记记记记分分分分,且且且且受受受受测测测测者者者者人人人人数数数数很很很很多多多多时时时时,难难难难度度度度等等等等于于于于总总总总分分分分上上上上高高高高分分分分组组组组与与与与低低低低分分分分组组组组平平平平均均均均分分分分之之之之和和和和与与与与2 2 2 2倍满分之比。倍满分之比。倍满分之比。倍满分之比。P=P=2 2、多值计分项目的难度、多值计分项目的难度back当测验不是二值记分,且受测者人数很多时,难度等于总分上高分组(三)选择题的难度修正(三)选择题的难度修正n n在选择题测验中,猜测的成功概率受项目备选在选择题测验中,猜测的成功概率受项目备选在选择题测验中,猜测的成功概率受项目备选在选择题测验中,猜测的成功概率受项目备选答案数目(答案数目(答案数目(答案数目(K K K K,选项数目)的影响(,选项数目)的影响(,选项数目)的影响(,选项数目)的影响(P=P=P=P=),),),),n n为平衡机遇对难度的影响,采用下矫正公式:为平衡机遇对难度的影响,采用下矫正公式:为平衡机遇对难度的影响,采用下矫正公式:为平衡机遇对难度的影响,采用下矫正公式:n n如果要比较两个选项数目不同的测题难度,必如果要比较两个选项数目不同的测题难度,必如果要比较两个选项数目不同的测题难度,必如果要比较两个选项数目不同的测题难度,必须应用以上矫正公式分别将两个测题的难度进须应用以上矫正公式分别将两个测题的难度进须应用以上矫正公式分别将两个测题的难度进须应用以上矫正公式分别将两个测题的难度进行矫正,然后才能进行比较分析。行矫正,然后才能进行比较分析。行矫正,然后才能进行比较分析。行矫正,然后才能进行比较分析。(三)选择题的难度修正在选择题测验中,猜测的成功概率受项目备例例例例如如如如:一一一一个个个个五五五五择择择择一一一一的的的的测测测测题题题题难难难难度度度度指指指指数数数数为为为为0.500.500.500.50,一一一一个个个个四四四四择一的测题难度指数为择一的测题难度指数为择一的测题难度指数为择一的测题难度指数为0.530.530.530.53,哪一题的难度大?,哪一题的难度大?,哪一题的难度大?,哪一题的难度大?五择一的测题矫正后难度指数为五择一的测题矫正后难度指数为五择一的测题矫正后难度指数为五择一的测题矫正后难度指数为CP=CP=CP=CP=四择一的测题矫正后难度指数为四择一的测题矫正后难度指数为四择一的测题矫正后难度指数为四择一的测题矫正后难度指数为CP=CP=CP=CP=可以看到,和未矫正前相反,五择一的测题更难一些。可以看到,和未矫正前相反,五择一的测题更难一些。back例如:一个五择一的测题难度指数为0.50,一个四择一的测题难(四)(四)项目难度的等距量表项目难度的等距量表 通过率是以何种量表水平表示难度通过率是以何种量表水平表示难度通过率是以何种量表水平表示难度通过率是以何种量表水平表示难度?1 1 1 1、使用项目难度等距量表的理由、使用项目难度等距量表的理由、使用项目难度等距量表的理由、使用项目难度等距量表的理由 第一,测题的难度一般用答对某题的人数比率或第一,测题的难度一般用答对某题的人数比率或第一,测题的难度一般用答对某题的人数比率或第一,测题的难度一般用答对某题的人数比率或百分比表示。百分量表是等级量表,不是等距百分比表示。百分量表是等级量表,不是等距百分比表示。百分量表是等级量表,不是等距百分比表示。百分量表是等级量表,不是等距量表。因此不能比较题目之间的具体差异。量表。因此不能比较题目之间的具体差异。量表。因此不能比较题目之间的具体差异。量表。因此不能比较题目之间的具体差异。第二,难度量表是反序而行的,第二,难度量表是反序而行的,第二,难度量表是反序而行的,第二,难度量表是反序而行的,P P P P值越大,项目值越大,项目值越大,项目值越大,项目越容易,转换成等距量表后更清晰明了。越容易,转换成等距量表后更清晰明了。越容易,转换成等距量表后更清晰明了。越容易,转换成等距量表后更清晰明了。(四)项目难度的等距量表 通过率是以何种量表水平表示难度?2 2、转换为等距量表的方法、转换为等距量表的方法n n查标准正态分布表,将以等级量表表示的查标准正态分布表,将以等级量表表示的P P值转换成具有相等单位值转换成具有相等单位的等距量表的等距量表Z Z值。值。n nP P值作为正态曲线下面积时,要从右向左值作为正态曲线下面积时,要从右向左而行。而行。n n转换好的转换好的Z Z值在平均数以下是负数。为了值在平均数以下是负数。为了避免负号出现的情况,使用避免负号出现的情况,使用 。2、转换为等距量表的方法查标准正态分布表,将以等级量表表示的例例n n在正态分布中,平均数之上或之下一个标准差在正态分布中,平均数之上或之下一个标准差在正态分布中,平均数之上或之下一个标准差在正态分布中,平均数之上或之下一个标准差的距离约占全体人数的的距离约占全体人数的的距离约占全体人数的的距离约占全体人数的34%34%34%34%n n如果在一个测验中某项目如果在一个测验中某项目如果在一个测验中某项目如果在一个测验中某项目A A A A通过率为通过率为通过率为通过率为84%84%84%84%(0.840.840.840.84),那么这项目的难度),那么这项目的难度),那么这项目的难度),那么这项目的难度n n-1-1-1-1n n如果某项目如果某项目如果某项目如果某项目B B B B的通过率只有的通过率只有的通过率只有的通过率只有16%16%16%16%,则这个项目的,则这个项目的,则这个项目的,则这个项目的难度为难度为难度为难度为n n+1+1+1+1n n若某题若某题若某题若某题C C C C恰好有恰好有恰好有恰好有50%50%50%50%的人通过,则此题的难度为的人通过,则此题的难度为的人通过,则此题的难度为的人通过,则此题的难度为n n0 0 0 0 back例在正态分布中,平均数之上或之下一个标准差的距离约占全体人数=13+4Z=13+4Z=13+4Z=13+4Z:常态化等距难度指标,:常态化等距难度指标,:常态化等距难度指标,:常态化等距难度指标,13131313为平均数,为平均数,为平均数,为平均数,4 4 4 4为标为标为标为标准差,准差,准差,准差,Z Z Z Z为以为以为以为以为单位的为单位的为单位的为单位的Z Z Z Z值。值。值。值。如,上面所举的例中,其如,上面所举的例中,其如,上面所举的例中,其如,上面所举的例中,其难度值为:难度值为:难度值为:难度值为:题目题目题目题目A A A A:通过率:通过率:通过率:通过率P=0.84 P=0.84 P=0.84 P=0.84 Z=-1 =13+4(-1)=9 Z=-1 =13+4(-1)=9 Z=-1 =13+4(-1)=9 Z=-1 =13+4(-1)=9 题目题目题目题目B B B B:通过率:通过率:通过率:通过率P=0.16 P=0.16 P=0.16 P=0.16 Z=1 =13+41=17 Z=1 =13+41=17 Z=1 =13+41=17 Z=1 =13+41=17 题目题目题目题目C C C C:通过率:通过率:通过率:通过率P=0.50 P=0.50 P=0.50 P=0.50 Z=0 =13+40=13 Z=0 =13+40=13 Z=0 =13+40=13 Z=0 =13+40=13 如果一个题目几乎所有被试都通过(如果一个题目几乎所有被试都通过(如果一个题目几乎所有被试都通过(如果一个题目几乎所有被试都通过(99.8%99.8%99.8%99.8%),则其则其则其则其Z=-3,=13+4(-3)=1Z=-3,=13+4(-3)=1Z=-3,=13+4(-3)=1Z=-3,=13+4(-3)=1 如果一个题目答对的人很少(如果一个题目答对的人很少(如果一个题目答对的人很少(如果一个题目答对的人很少(0.13%0.13%0.13%0.13%),则其则其则其则其Z=3,=13+43=25Z=3,=13+43=25Z=3,=13+43=25Z=3,=13+43=25back=13+4Zback(五)测验难度水平的确定(五)测验难度水平的确定1 1、项目难度的确定、项目难度的确定2 2、测验难度的水平的确定测验难度的水平的确定(五)测验难度水平的确定1、项目难度的确定1 1、项目难度的确定、项目难度的确定 难度分析的主要目的是筛选项目,难度分析的主要目的是筛选项目,项目的难度水平取决于:项目的难度水平取决于:n n测验的目的测验的目的n n测验的作用测验的作用n n项目形式项目形式back1、项目难度的确定 难度分析的主要目的是筛选项目,项目2 2、测验难度水平的确定、测验难度水平的确定n n整个测验的难度取决于组成这个测验的整个测验的难度取决于组成这个测验的各个试题的难度。整个测验难度水平的各个试题的难度。整个测验难度水平的确定,需要根据测验分数的分布作出。确定,需要根据测验分数的分布作出。2、测验难度水平的确定整个测验的难度取决于组成这个测验的各个n n正偏态正偏态 由于缺少难度低的项目,所以大由于缺少难度低的项目,所以大部分被试分数会集中于左侧低分端,说部分被试分数会集中于左侧低分端,说明测验过于困难明测验过于困难 。n n负偏态负偏态 大多数被试集中在右侧高分端,大多数被试集中在右侧高分端,接近满分,这说明测验很多项目太容易接近满分,这说明测验很多项目太容易了,缺少难的项目。了,缺少难的项目。n n正态正态 假如在难度中等(假如在难度中等(P P为为0.500.50)并且)并且项目组间相关为零的条件下,分数的分项目组间相关为零的条件下,分数的分布将为正态。布将为正态。back正偏态 由于缺少难度低的项目,所以大部分被试分数会集中于左侧二、项目区分度二、项目区分度(一)区分度的定义(一)区分度的定义 (二)区分度的估计方法(二)区分度的估计方法(三)区分度的相对性(三)区分度的相对性二、项目区分度(一)区分度的定义 三、项目分析的特殊问题三、项目分析的特殊问题(一)(一)选择题的项目分析选择题的项目分析(二)标准参照测验的项目分析(二)标准参照测验的项目分析三、项目分析的特殊问题(一)选择题的项目分析(一)区分度的定义(一)区分度的定义n n项目区分度项目区分度(item discriminationitem discrimination)是指测验项目对于所测量的心理属是指测验项目对于所测量的心理属性的鉴别能力和区分程度,也称鉴性的鉴别能力和区分程度,也称鉴别力。别力。(一)区分度的定义项目区分度(item discrimina(二)区分度的估计方法(二)区分度的估计方法 1 1、鉴别指数法、鉴别指数法 2 2、方差法、方差法 3 3、相关法、相关法 (二)区分度的估计方法 基本概念基本概念 :难度难度 通过率通过率 区分度区分度 项目鉴别指数项目鉴别指数 练习与思考练习与思考 :1 1、测验项目分析的作用是什么?、测验项目分析的作用是什么?2 2、设受测者在某题上的通过率为、设受测者在某题上的通过率为10%10%,试求,试求该题的常态化等距难度该题的常态化等距难度 指标指标。基本概念:难度 通过率 区分度 项目鉴3 3、对于一个、对于一个5 5中选中选1 1的选择题,的选择题,120120人中有人中有8080人人通过了,试求该题的难度(通过率),并作矫通过了,试求该题的难度(通过率),并作矫正。正。4 4、设一次数学测验题目的区分度以统计学成绩、设一次数学测验题目的区分度以统计学成绩为效标。统计学成绩满分为为效标。统计学成绩满分为100100分,数学测验第分,数学测验第1212题以题以1 1、0 0计分。试求数学测验第计分。试求数学测验第1212题的区分题的区分度。在数学测验第度。在数学测验第1212题上的题上的1 1分者、得分者、得0 0分者的分者的统计学成绩如下:统计学成绩如下:3、对于一个5中选1的选择题,120人中有80人通过了,试求项目分析中的难度分析与区分度课件推荐阅读推荐阅读n n大学生艾滋病知识问卷的难度和区分度分析大学生艾滋病知识问卷的难度和区分度分析大学生艾滋病知识问卷的难度和区分度分析大学生艾滋病知识问卷的难度和区分度分析.中国学校卫生,中国学校卫生,中国学校卫生,中国学校卫生,2004200420042004,01010101n n画人智力测验评分项目的再确定画人智力测验评分项目的再确定画人智力测验评分项目的再确定画人智力测验评分项目的再确定.应用心理学应用心理学应用心理学应用心理学,1998,4(2):9-141998,4(2):9-141998,4(2):9-141998,4(2):9-14推荐阅读大学生艾滋病知识问卷的难度和区分度分析.中国学校卫生1 1、鉴别指数法、鉴别指数法 比较测验总分高和总分低的两组被试比较测验总分高和总分低的两组被试在项目通过率上的差别在项目通过率上的差别n n例例例例如如如如:某某某某高高高高中中中中物物物物理理理理测测测测验验验验,高高高高分分分分组组组组在在在在第第第第5 5 5 5题题题题上上上上的的的的通通通通过过过过率率率率为为为为0.750.750.750.75,低低低低分分分分组组组组的的的的通通通通过过过过率率率率为为为为0.350.350.350.35,则则则则该该该该项目的鉴别指数为:项目的鉴别指数为:项目的鉴别指数为:项目的鉴别指数为:n nD=0.75-0.35=0.40D=0.75-0.35=0.40D=0.75-0.35=0.40D=0.75-0.35=0.401、鉴别指数法 比较测验总分高和总分低的两组被试在项目n n续上续上续上续上n n1965196519651965年,美国测验专家伊贝尔(年,美国测验专家伊贝尔(年,美国测验专家伊贝尔(年,美国测验专家伊贝尔(L.EbelL.EbelL.EbelL.Ebel)根据)根据)根据)根据长期的经验提出用鉴别指数评价项目性能的标长期的经验提出用鉴别指数评价项目性能的标长期的经验提出用鉴别指数评价项目性能的标长期的经验提出用鉴别指数评价项目性能的标准,如下表所示。准,如下表所示。准,如下表所示。准,如下表所示。续上n n区分度与难度有密切关系区分度与难度有密切关系区分度与难度有密切关系区分度与难度有密切关系 backback区分度与难度有密切关系 back2 2、方差法、方差法n n当当n30n30时,属于统计上的小样本,改用时,属于统计上的小样本,改用n n实际进行项目分析时,被试不能少于实际进行项目分析时,被试不能少于3030人,提到该公式是由于练习的需要。人,提到该公式是由于练习的需要。backback2、方差法back3 3、相关法、相关法 以项目分数与效标分数或测验总分以项目分数与效标分数或测验总分的相关作为项目区分度的指标的相关作为项目区分度的指标 3、相关法 以项目分数与效标分数或测验总分的相关作为项项目分析中的难度分析与区分度课件续表续表续表(1 1)二列相关)二列相关n n二列相关适用于两个连续变量,但其中二列相关适用于两个连续变量,但其中一个变量被人为分成两类。公式为:一个变量被人为分成两类。公式为:n n 或或(1)二列相关二列相关适用于两个连续变量,但其中一个变量被人n n例:下表有例:下表有例:下表有例:下表有20202020个学生语文测验总分以及在作文题个学生语文测验总分以及在作文题个学生语文测验总分以及在作文题个学生语文测验总分以及在作文题和一个选择题上的得分情况,假设作文和一个选择题上的得分情况,假设作文和一个选择题上的得分情况,假设作文和一个选择题上的得分情况,假设作文37373737分(包分(包分(包分(包括括括括37373737分)算通过,试计算作文题的区分度。分)算通过,试计算作文题的区分度。分)算通过,试计算作文题的区分度。分)算通过,试计算作文题的区分度。例:下表有20个学生语文测验总分以及在作文题和一个选择题上的n n解:解:解:项目分析中的难度分析与区分度课件(2 2)点二列相关)点二列相关n n点点二二列列相相关关适适用用于于一一个个变变量量为为连连续续变变量量,另另一一个个变变量量为为二二分分变变量量的的数数据据资资料料。公公式为:式为:n n (2)点二列相关n n例如:例如:例如:例如:根据上例的资料根据上例的资料根据上例的资料根据上例的资料,计算选择题的区分度。,计算选择题的区分度。,计算选择题的区分度。,计算选择题的区分度。n n解:解:解:解:backback例如:根据上例的资料,计算选择题的区分度。back(三三)区分度的相对性区分度的相对性1.1.不同的计算方法,所得的区分值不同不同的计算方法,所得的区分值不同 两种相关值的比较两种相关值的比较2.2.样本容量的大小影响相关法区分度值的样本容量的大小影响相关法区分度值的大小大小 3.3.分组标准影响鉴别指数分组标准影响鉴别指数4.4.被试样本的同质性程度影响区分度值的被试样本的同质性程度影响区分度值的大小大小 backback(三)区分度的相对性1.不同的计算方法,所得的区分值不同 (一)多重选择题的项目分析(一)多重选择题的项目分析n1 1、步骤、步骤 n2 2、对选择项的反应模式注意从、对选择项的反应模式注意从 以下几方面进行分析以下几方面进行分析 n3 3、项目分析实例、项目分析实例 back(一)多重选择题的项目分析1、步骤 back1 1、步骤、步骤 1 1 1 1)选取有代表性的样本)选取有代表性的样本)选取有代表性的样本)选取有代表性的样本370370370370人,按规定的程序,进人,按规定的程序,进人,按规定的程序,进人,按规定的程序,进行预测工作;行预测工作;行预测工作;行预测工作;2 2 2 2)把)把)把)把370370370370份试卷按测验总分的高低次序排列,然后份试卷按测验总分的高低次序排列,然后份试卷按测验总分的高低次序排列,然后份试卷按测验总分的高低次序排列,然后从最高分数的人开始向下取足从最高分数的人开始向下取足从最高分数的人开始向下取足从最高分数的人开始向下取足27%27%27%27%(100100100100人)为高人)为高人)为高人)为高分组,再从最低分数的人开始向上取足分组,再从最低分数的人开始向上取足分组,再从最低分数的人开始向上取足分组,再从最低分数的人开始向上取足27%27%27%27%(100100100100人)为低分组;人)为低分组;人)为低分组;人)为低分组;3 3 3 3)计算高分组与低分组通过每一题的比率,分别以)计算高分组与低分组通过每一题的比率,分别以)计算高分组与低分组通过每一题的比率,分别以)计算高分组与低分组通过每一题的比率,分别以P P P Ph h h h和和和和P P P Pl l l l表示;表示;表示;表示;4 4 4 4)按照区分度与难度的公式,分别求出每一测题的)按照区分度与难度的公式,分别求出每一测题的)按照区分度与难度的公式,分别求出每一测题的)按照区分度与难度的公式,分别求出每一测题的难度与鉴别力指数;难度与鉴别力指数;难度与鉴别力指数;难度与鉴别力指数;5 5 5 5)比较高分组、低分组在测题不同答案上的反应;)比较高分组、低分组在测题不同答案上的反应;)比较高分组、低分组在测题不同答案上的反应;)比较高分组、低分组在测题不同答案上的反应;6 6 6 6)根据测题统计分析的结果,修改测题或选择适当)根据测题统计分析的结果,修改测题或选择适当)根据测题统计分析的结果,修改测题或选择适当)根据测题统计分析的结果,修改测题或选择适当的测题。的测题。的测题。的测题。back1、步骤 1)选取有代表性的样本370人,按规定的程序,进行2 2、对选择项的反应模式注意从、对选择项的反应模式注意从以下几方面进行分析以下几方面进行分析1.1.1.1.如果正确的备选答案被所有的受测者选择,说如果正确的备选答案被所有的受测者选择,说如果正确的备选答案被所有的受测者选择,说如果正确的备选答案被所有的受测者选择,说明该项目太容易,或者可能是项目中提供某种明该项目太容易,或者可能是项目中提供某种明该项目太容易,或者可能是项目中提供某种明该项目太容易,或者可能是项目中提供某种暗示,使正确答案过于明显。暗示,使正确答案过于明显。暗示,使正确答案过于明显。暗示,使正确答案过于明显。2.2.2.2.如果某个错误答案没有任何被试选择,说明该如果某个错误答案没有任何被试选择,说明该如果某个错误答案没有任何被试选择,说明该如果某个错误答案没有任何被试选择,说明该选项不具有迷惑性,错得过于明显,除了增加选项不具有迷惑性,错得过于明显,除了增加选项不具有迷惑性,错得过于明显,除了增加选项不具有迷惑性,错得过于明显,除了增加阅读时间外,不起任何作用。阅读时间外,不起任何作用。阅读时间外,不起任何作用。阅读时间外,不起任何作用。3.3.3.3.如果所有被试都选择了同一个错误答案,可能如果所有被试都选择了同一个错误答案,可能如果所有被试都选择了同一个错误答案,可能如果所有被试都选择了同一个错误答案,可能是编制测验时把正确答案搞错了,也可能是在是编制测验时把正确答案搞错了,也可能是在是编制测验时把正确答案搞错了,也可能是在是编制测验时把正确答案搞错了,也可能是在教学中发生了错误。教学中发生了错误。教学中发生了错误。教学中发生了错误。2、对选择项的反应模式注意从以下几方面进行分析1.如果正确的4.4.4.4.如果高分组被试的选择集中在两个答案上,二如果高分组被试的选择集中在两个答案上,二如果高分组被试的选择集中在两个答案上,二如果高分组被试的选择集中在两个答案上,二者选择率相近,说明该题可能者选择率相近,说明该题可能者选择率相近,说明该题可能者选择率相近,说明该题可能 、本来就有两、本来就有两、本来就有两、本来就有两种正确答案,或者在某种意义上另一个选择项种正确答案,或者在某种意义上另一个选择项种正确答案,或者在某种意义上另一个选择项种正确答案,或者在某种意义上另一个选择项也有一定道理。也有一定道理。也有一定道理。也有一定道理。5.5.5.5.如果高分组对正确答案的选择率与低分组相等如果高分组对正确答案的选择率与低分组相等如果高分组对正确答案的选择率与低分组相等如果高分组对正确答案的选择率与低分组相等或低于后者,说明该题所考查的东西与被试水或低于后者,说明该题所考查的东西与被试水或低于后者,说明该题所考查的东西与被试水或低于后者,说明该题所考查的东西与被试水平无关,即不具有鉴别力。平无关,即不具有鉴别力。平无关,即不具有鉴别力。平无关,即不具有鉴别力。6.6.6.6.如如如如果果果果一一一一个个个个题题题题目目目目被被被被试试试试未未未未作作作作答答答答的的的的人人人人数数数数较较较较多多多多(速速速速度度度度性性性性测测测测验验验验除除除除外外外外),或或或或者者者者选选选选择择择择各各各各个个个个备备备备选选选选答答答答案案案案的的的的人人人人数数数数相相相相等等等等,说说说说明明明明该该该该项项项项目目目目可可可可能能能能过过过过难难难难或或或或题题题题意意意意不不不不清清清清,被被被被试试试试无无无无法作答或凭猜测作答。法作答或凭猜测作答。法作答或凭猜测作答。法作答或凭猜测作答。back接上4.如果高分组被试的选择集中在两个答案上,二者选择率相近,说3 3、项目分析实例、项目分析实例3、项目分析实例1 1 1 1)区分度)区分度)区分度)区分度 取舍题目时,首先看区分度,低区分度的题目取舍题目时,首先看区分度,低区分度的题目取舍题目时,首先看区分度,低区分度的题目取舍题目时,首先看区分度,低区分度的题目不能有效鉴别被试。不能有效鉴别被试。不能有效鉴别被试。不能有效鉴别被试。2 2 2 2)难度)难度)难度)难度 P P P P值一般在值一般在值一般在值一般在0.350.350.350.35到到到到0.650.650.650.65之间为好,但就整个测之间为好,但就整个测之间为好,但就整个测之间为好,但就整个测验而言,难度为验而言,难度为验而言,难度为验而言,难度为0.50.50.50.5的测题应占多数,同时也需的测题应占多数,同时也需的测题应占多数,同时也需的测题应占多数,同时也需要一些难度较大或者较小的题目。要一些难度较大或者较小的题目。要一些难度较大或者较小的题目。要一些难度较大或者较小的题目。3 3 3 3)选项)选项)选项)选项 第一题:正误答案配比较好。第二题:除第一题:正误答案配比较好。第二题:除第一题:正误答案配比较好。第二题:除第一题:正误答案配比较好。第二题:除C C C C答答答答案缺乏鉴别能力外,其余都不错。第三题:未答案缺乏鉴别能力外,其余都不错。第三题:未答案缺乏鉴别能力外,其余都不错。第三题:未答案缺乏鉴别能力外,其余都不错。第三题:未答的人数比例过大,且答案的人数比例过大,且答案的人数比例过大,且答案的人数比例过大,且答案B B B B、C C C C、D D D D均属于负向的均属于负向的均属于负向的均属于负向的 。第四题:。第四题:。第四题:。第四题:A A A A项选答的人数较少,项选答的人数较少,项选答的人数较少,项选答的人数较少,D D D D项也有负向项也有负向项也有负向项也有负向性性性性 。1)区分度 4 4 4 4)找出原因,对各题进行修改)找出原因,对各题进行修改)找出原因,对各题进行修改)找出原因,对各题进行修改 不要丢弃不符合要求的项目,因为不要丢弃不符合要求的项目,因为不要丢弃不符合要求的项目,因为不要丢弃不符合要求的项目,因为n n用内部一致性分析所求得的鉴别力不一定能代用内部一致性分析所求得的鉴别力不一定能代用内部一致性分析所求得的鉴别力不一定能代用内部一致性分析所求得的鉴别力不一定能代表试题的效度。表试题的效度。表试题的效度。表试题的效度。n n鉴别力指数低的试题不一定表示该试题有缺点。鉴别力指数低的试题不一定表示该试题有缺点。鉴别力指数低的试题不一定表示该试题有缺点。鉴别力指数低的试题不一定表示该试题有缺点。n n课堂测验的项目分析资料的有效性是随时空而课堂测验的项目分析资料的有效性是随时空而课堂测验的项目分析资料的有效性是随时空而课堂测验的项目分析资料的有效性是随时空而变化的,并非固定不变。变化的,并非固定不变。变化的,并非固定不变。变化的,并非固定不变。n n有有有有研研研研究究究究表表表表明明明明,编编编编制制制制新新新新的的的的项项项项目目目目需需需需要要要要的的的的时时时时间间间间几几几几乎乎乎乎比比比比修订现存项目长修订现存项目长修订现存项目长修订现存项目长5 5 5 5倍。倍。倍。倍。back4)找出原因,对各题进行修改 back表表表表1 1 1 1 四种测量水平和量表对应数据特征四种测量水平和量表对应数据特征四种测量水平和量表对应数据特征四种测量水平和量表对应数据特征量表名称量表名称有有无无相相等单位等单位有有无无绝绝对对参照点参照点数的特性数的特性可进行的运算可进行的运算适用的统计方法适用的统计方法实实 例例类别量表类别量表无无 无无同一性同一性区分性区分性 不不能能加加减减乘乘除除,不不能能排排序序计算次数、百分比、计算次数、百分比、列联相关、列联相关、2 2检验、检验、比率差异检验。比率差异检验。(男男)(女)(女)等级量表等级量表无无无无还有还有等级性等级性可可以以排排序序,不不能能加加减减乘乘除除还可求中位数、百还可求中位数、百分位数、斯皮尔曼分位数、斯皮尔曼相关系数、肯德尔相关系数、肯德尔和谐系数、符号检和谐系数、符号检验、等级方差分析。验、等级方差分析。第名第名第名第名等等距距量量表表有有无无还有还有等距性等距性可以加减可以加减不可乘除不可乘除还可求平均数、标还可求平均数、标准差、方差、积差准差、方差、积差相关、作检验、相关、作检验、检验、方差分析。检验、方差分析。温度温度比比率率量量表表有有有有还有还有等比性等比性可以加减可以加减乘除乘除还可几何平均数、还可几何平均数、差异系数。差异系数。长度长度GO表1 四种测量水平和量表对应数据特征量表名称有无相等单位有测验目的测验目的n n教育工作中,若测验的目的是为了了解教育工作中,若测验的目的是为了了解被试在某方面知识技能掌握的情况,可被试在某方面知识技能掌握的情况,可以不必过多的考虑难度。以不必过多的考虑难度。n n大多数测验希望能较准确地测量个体之大多数测验希望能较准确地测量个体之间的差别,选择题目时,最好使试题的间的差别,选择题目时,最好使试题的平均难度接近平均难度接近0.500.50,而各题难度在,而各题难度在0.500.200.500.20之间。之间。back测验目的教育工作中,若测验的目的是为了了解被试在某方面知识技n n一般能力测验和成就测验的平均难度在一般能力测验和成就测验的平均难度在0.500.50左右比较合适。左右比较合适。n n筛选性测验(选拔性,竞争性测验)则要采筛选性测验(选拔性,竞争性测验)则要采用难度接近录取率的项目。用难度接近录取率的项目。back测验的作用测验的作用一般能力测验和成就测验的平均难度在0.50左右比较合适。ban n对于选择题而言,对于选择题而言,P P值一般应大于概率水平值一般应大于概率水平n n对于是非题而言,其难度值应该为对于是非题而言,其难度值应该为0.750.75最为最为合适合适n n对于四择一题目,其难度值约为对于四择一题目,其难度值约为0.630.63时最为时最为合适合适项目的形式项目的形式back对于选择题而言,P值一般应大于概率水平项目的形式back1 12 21 13 34 45 56 6back1213456back
展开阅读全文