人员素质测评（PPT 115页）

,单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,*,*,人 员 素质测 评,1,问题：下面这个图形是用砖堆起来的，还需要几块砖，才能使它成为一个三角锥？,2,最大多数人的答案：5,3,另一种答案：0,4,引导案例,请思考并回答下面的问题：,1 你对你的工作满意吗？表现在哪些方面？请具体说明。,2 一个合格的人力资源部经理应具备什么条件（请列出5条最重要的）？,5,讨论题,1 这两个问题的回答难度一样吗？为什么？,2 如何测量一个概念？,3 测评要解决什么问题？,6,第一章 素质测评概述,一 为什么要测评？,二 测评什么？,三 测评的含义与特性及其原理,四 测评的一般原则,五 测评的主要类型,六 测评的基本方法,七 测评方法的标准,7,一 为什么要测评,工作特性,个人特点（个别差异）,“面目仅半尺，竟无一人肖”；,“人心不同，恰如其面”,人与工作的匹配（人适其事，事宜其人）,是否需要测评（效用）？,8,国内的调查报告：,对6000名经理人的调查：,认为公司吸引了有才能的人：23,认为 公司留住了有才能的人：10,认为公司明白哪些是有才能的人：16,认为公司有效地开发了员工的潜能的人：3,9,二 测评什么测评的内容,素质,行为,10,素质分析,素质：个体完成一定活动（工作）和任务所具备的基本条件和基本特点。,身体素质,知识技能素质,个性素质（个性倾向性和个性特征）,综合素质,11,知识（,knowledge,）,经学习获得的对事实,的认识,技能（,Skills,）,经学习获得的完成活动的,操作方式,动作操作技能,心智操作技能,12,心理现象,心理过程,个性心理,认识过程（记忆、思维、想象、语言等）,情感过程（情绪、情感和情操）,意志过程（克服困难、完成任务）,个性倾向性需要、动机、兴趣、理想、信念、价值观、世界观,个性心理特征 能力、气质和性格,13,个性： 个人所具有的区别于他人的独特而稳定的思维方式和行为风格。,影响人在工作中对事物的理解,影响人处理事物的方式,影响人和他人沟通的方式,影响工作绩效（任务绩效和关系绩效）,14,行为分析,行为的特点,行为分析的维度,15,行为的特点,人的行为是动态的,人的行为是可控制的、可改变的,人的行为是多样的,人的行为是有原因（动机）的,人的行为受环境的制约,B=F（P，E）,16,三 测评的含义与特性,测评是测量与评价的简称,测量,用数字或符号对人的特点进行,描述,， 而不论其价值的大小,评价,是依据定量描述或直觉经验来确定某种特点的,价值,。,测量和评价都要依赖某种法则,17,测量,测量：,根据一定的法则对事物用数字加以确定。,测量的三个元素：,法则；,数字或符号；,事物,测量的两个要素：参照点与单位,18,素质测量：,用数字或符号按照一定法则对人的特点进行,描述,，是一种间接的测量。用,定量分析描述个体差异的方法。,“权，然后知轻重；度，然后知长短。物皆然，心为甚。”,19,物理测量 心理测量（对抽象概念的测量）,直接测量 间接测量（借助测量另一事物来推知所要测量事物的属性）,20,测量与测验：,心理测验,：是测量的一种工具和手段。通过观察、调查人的少数有代表性的行为，对于贯穿在人的行为活动中的心理特征，依据确定的原则进行推论和数量化分析的一种科学手段。,行为样本的客观的和标准化的测量。,安娜斯塔西,21,评价（评定）,评价是一种价值判断,评价的三个要素：,搜集信息并定量描述；加权；价值判断,22,测评的原理,人的素质是有差异的,人的素质是稳定的,人的素质是可以测量的,人的素质会影响工作绩效,23,刺激反应,心理反应,行为反应,情境反应,惯常反应,投射,24,四 测评的一般原则,普遍性与特殊性相结合,测量和评定相结合,主观与客观相结合,精确与模糊结合,静态与动态结合,25,测评的一般原则（续）,科学性和实用性结合,公正，标准化（方法、程序、评分，解释）,测评与开发结合,26,有待解决的几个问题,全时空与有限性,精确与模糊,量化的必要性与困难性,主观与客观,描述与预测,经验与科学,真实与虚假,27,五 测评的主要类型,选拔性测评（差异性）,预测性测评（有效性）,配置性测评（合适性）,诊断性测评（准确性）,开发性测评（实用性）,考核性测评（公正性）,28,选拔性测评,：选拔优秀人员为目的。,特点：,强调测评的区分功能,测评标准刚性最强,强调客观性（公平，公正）,测评指标具有可选择性,测评结果或是分数或是等级,预测性测评,：,以预测为目的，强调测评指标具有预测性,29,配置性测评,：以人事合理配置为目的。,针对性：以事择人,客观性：测评以职位的客观要求为标准,严格性：,诊断性测评,：,了解素质现状或者素质开发中的问题为目的,测评内容或者精细，或者全面,诊断过程寻根究底,测评结果不公开,具有较强的系统性,30,开发性测评,：,以开发人员素质为目的。,勘探性,配合性,促进性,考核性测评,（鉴定性测评）： 以鉴定与验证某种（某些）素质是否具备或者具备程度大小为目的。结合选拔性测评和配置性测评。,全面性,充足性：评介结论有充足证据,可信性,权威性或者公众性,31,六 测评的基本方法,心理测验（能力测验，人格测验，职业兴趣测验，动机测验等）,面试（结构化面试和非结构化面试等）,评价中心（无领导小组讨论，角色扮演，公文筐测验，演讲，面谈等）,32,七 测评方法的标准,信度,效度,普遍适用性,效用,合法性,33,第二章 测评的基本理论,测量水平,误差,信度与效度,项目分析,常模与常模参照,效标参照,34,测量的水平与量表分类,命名量表 （Nominal scale）,顺序量表 (Ordinal scale),等距量表（Interval scale）,比率量表(Ratio scale),35,命名（名义）量表,归类时用,要求：一个集合中所有成员都应分派到相同的数字，且没有两个集合被分派给相同的数字；标准必须明确。,适用的统计方法：分布次数检验；百分比；点二列相关；X 检验,36,顺序（等级）量表,对一个集合中的成员排列顺序,没有相等的单位，没有绝对零点,不提供等级间的距离或差距,原则上不能进行加减乘除，但是有时为了方便，假定等级数据近似于等距数据,统计分析：中位数；百分位数；等级相关系数,37,等距尺度,有相等的单位，但无绝对零点,只能做加减运算，不能做乘除运算,统计分析：平均数、标准差、积差相关、F检验；T检验；方差分析等,38,比率（等比）尺度,有绝对零点，是最高级别的测量尺度,具有所有其他尺度的功能,可以加减，也可以乘除,统计分析：全部适用,39,什么是误差,误差是在测量中与目的无关的变量（原因）所产生的不准确或不一致效应。,任何测量都不是绝对准确的，不准确的数据就有误差。,40,误差的两层含义,由与测量目的无关的变因引起,系统误差、随机误差和过失误差,会导致不准确或不一致的测量结果,41,准确性与一致性的关系,不准，不一致 不准，一致 准，一致,42,随机误差（可变误差）,由与测量目的无关的偶然因素引起，不易控制，使多次测量产生了不一致的结果。,例如：称重量的时候，不同人对秤杆高度的掌握不同。,43,系统误差（恒定误差）,由与测量无关的变量引起的一种恒定而有规律的误差，稳定地存在于每一次测量中，测值一致，但不准。,在秤砣上搞鬼，就形成了系统误差,。,44,过失误差,不正确使用测量工具、记录错误、仪器失灵等失误造成的误差称为过失误差。,收集资料时，避免过失误差；,处理数据时，必须把包含过失误差的数据去除。,45,不同误差的影响,系统误差只影响测值的准确性，与效度有关,随机误差既影响准确性，又影响一致性。与效度和信度都有关。,46,误差的来源,测验内部（测量工具本身）引起的误差,施测过程引起的误差,被试本身引起的误差,主试本身引起的误差,主被试交互作用引起的误差,47,被试本身引起的误差,测验的技巧与练习因素,焦虑和动机因素：,焦虑：状态焦虑和特质焦虑,48,反应定式,（独立于测验内容的反应倾向）,求“快”和求“精确”的反应定式,偏好正面描述的反应定式,偏好特殊位置的反应定式,偏好较长选项的反应定式,猜测的反应定式,49,主试对测验结果的影响,主试的态度,主试的动机,主试的人格,主试的期望,罗森塔尔效应,50,协调关系,：,指主试和被试之间一种友好、合作、能促使被试最大限度的做好测验的一种关系,51,真分数,定义：一个测量工具在测量没有误差时所得到的值。,操作定义：经过无数次测量所得到的平均值。,真分数是构想出来的一个概念，实际上得不到。,52,真分数的意义,一个人在某测验上的分数，是其真分数和误差之和。,X=T+E,这里的误差指随机误差，因为系统误差不影响分数的改变。,53,关于偶然误差的假设,如果对一个人接受无数次测量，其平均误差为零。,许多人的一次测验分数加以平均，平均误差为零。,真分数和测量误差是相互独立的。,54,信度的含义,测量结果的一致性程度,能够回答：测量工具是否稳定；测量结果是否可以推论（概化能力），即从一次测量来推论总体的正确程度。,信度只受随机误差的影响,55,操作定义,在测量理论中，信度是指一组测验分数的真变异数与总变异数的比率。,r,XX,=r,XT,2,=S,T,2,/ S,X,2,1S,E,2,/ S,X,2,r,XT,也称为信度指数,在实际应用中，通常以同一样本所得的两组资料的相关作为测量一致性的指标,56,信度的作用,解释真实分数与实得分数的相关（信度系数）,比较信度可以接受的水准（信度系数）,解释个人分数的意义（测量标准误）,57,信度系数,同一样本所得的两组资料的相关,信度系数（,r,XX,）表示真分数与实得分数之间的决定系数，可以解释为在实得分数的变异数中有多大比例是由真分数的变异引起的。,58,信度系数的意义,一般能力和学绩测验 0.9,个性、价值观 .75 - .85, .75时，可用于团体间的比较。, .85时，可用于鉴别个人。,59,测量标准误,误差分数分布的标准差,估计真实分数的范围，了解实得分数再测时可能的变化情形。,SE S,X,(1-r,xx,),1/2,X1.96SE,X,T,X+1.96SE,真实分数是在其分数附近变化的一段数值,。,60,信度的种类,重测信度 （稳定性系数）,复本信度 （等值性系数）,分半信度 （内部一致性系数）,同质性信度 （同质性系数）,评分者信度 （肯德尔和谐系数）,61,重测信度,：,对同一测验，在不同时间对同一群体施测两次， 两次测验分数的相关系数（采用积差相关系数） 就是重测系数，又称稳定性系数。,重测间隔,62,复本信度（等值性系数）,：,以两个测验,复本,（功能等值但题目内容不同） 来测量同一群体，然后求应试者在这两个测验上得分的相关系数。,63,分半信度（内部一致性系数）,：,通过将测验分成等值的两半，计算这两半测验之间的相关性而获得的信度系数。,分半信度的矫正,：,斯皮尔曼布朗公式： r,tt,= 2r,hh,/ 1+r,hh,卢伦公式 ： r,xx,1S,d,2,/ S,x,2,64,同质性信度(库德理查逊信度）：,测验内部的各个题目在多大程度上考察了同一内容。,同质性：指所有测验题目测量的只是单一内容或者特质，表现为所有测验题目得分的一致性。,65,Note：,所有测验都应该保证只测量一种特质或内容；如果需要在一个测验中测量不同的内容，就应该将测验分成几个分测验，每个分测验测量一种内容。,66,评分者信度,：,指对不同评分者对同样对象进行评定时的一致性。,可以用积差相关，也可以用斯皮尔曼等级相关,评分者三人以上，又采用等级计分，需要用肯德尔和谐系数,67,各种信度系数相应的误差来源,信度系数类型,误差方差来源,重测信度,时间取样,复本信度,内容取样,分半信度,内容取样,同质性信度,内容的异质性,评分者信度,评分者之间的差异,68,影响信度的因素,样本团体的性质,相关系数受到团体中分数分布（个体差异范围）的影响,信度系数受到团体异质性的影响（异质，高估信度）,不同团体间能力水平的影响,69,测验的长度,测验越长，则试题取样或内容取样越恰当,测验越长，测验结果越不易受猜测的影响,测验的难度,70,效度,效度的含义,效度的特性,效度的种类,71,效度的含义,效度是指测量的正确性，即一个测量能够测出所要测的东西的程度。,能够回答：一个工具测评什么东西？对于所要测评的东西测得有多准？,72,效度的操作定义,在一系列测量中，与测量目的有关的真实变异数（与测量目的有关的有效变异）与总变异数（实得变异数）的比率 。r,XY,=r,XT,2,=S,V,2,/ S,X,2,一组测验分数的总变异包括：真实的、与测量目的有关的变异；真实的、出自无关来源的变异；随机误差的变异,S,X,2,=S,T,2,+S,E,2,=S,V,2,+S,I,2,+S,E,2,73,效度的特性,效度具有相对性,效度都是针对特定用途而言的，效度并没有普遍意义上泛指的效度值。,效度具有连续性,效度不是,“,全,”,或,“,无,”,的离散变量，它只是一个连续变量，测验的有效性只有程度上的差别,。,74,效度的类型,内容效度,构想效度,效标关联效度,聚合效度,辨别效度,75,内容效度(专家效度和逻辑效度),：,系统检查测验的内容，从而确定测验是否是所预测量的行为领域的代表性取样。主要是用于成就测验。,回答两个问题：,该测验是否包括某种技能知识的代表性 样本,测验的成绩是否受无关因素的影响,76,内容效度的确定方法,专家判断；,确定测验内容的总体范围；,编制双向细目表，确定内容的具体细节各自所占的比例；,制定评定量表，由专家在评定表上作出判断，来测量测验的整个效度。,统计分析法：,评分者信度、复本信度,经验的方法,77,78,表面效度,：,并非真正的测验效度，而是外行人对测量对象的臆断，可用来操作施测对象的测验动机。,最高作为测量，表面效度越高越好,典型作为测量，表面效度越低越好,79,构想效度：,它主要涉及的是心理学的理论概念问题，指心理测验对某一理论概念或特质测量的程度。,80,确定构想效度的,步骤,：,建立理论框架，以解释被试在测验上的表现,依据理论框架，推演出各种有关测验成绩的假设,以逻辑和实证的方法来验证假设,81,常用指标：,发展变化,与其它测验的相关,相容效度：一个新测验与相似的旧,测验之间的相关。,82,因素分析,内部一致性,会聚效度（,convergent validity,）,和区分效度（,discriminant,validity,）,83,会聚效度与区分效度,相同的特质用不同的方法施测所得结果的相关程度。,不同特质用相同方法施测所得结果的相关程度。,MTMM（Multi-trait-multi-methods）,84,方法一 方法二 方法三,特质 A,1,B,1,C,1,A,2,B,2,C,2,A,3,B,3,C,3,方法一,A,1,B,1,C,1,方法二,方法三,A,2,B,2,C,2,A,3,B,3,C,3,85,效标效度,指测验总分与外在标准（效标）的相关程度，,一个测验对处于特定情境中的个体行为进行预测时的有效性（准确性）。,衡量测量有效性的参照,标准，就是效标。,被预测的行为是检验测验效度的标准，就是效标。,86,实证（效标）效度强调的是效标行为，因此，测验内容是次要的，测验题目不需要与效标有明显关系，只要测验分数能预测效标行为。,87,效标与效标测量,效标：观念效标和效标测量,观念效标是效标的理论定义,效标测量是效标的操作定义,效标测量要求能准确测量观念效标，还要具有很高的信度。,88,效标测量的客观性：,避免偏见,防止效标污染,效标污染：,指个人的效标成绩由于评定者知道测验分数而受到影响的情形,89,同时效度与预测效度,同时效度,：,效标材料和测验分数差不多同时收集。,预测效度：效标材料在一段时间后搜集到,区分的标准不是时间，而是,测验目的,同时效度多用于诊断现状：“某人成功了吗？”,预测效度多预测未来：“某人会成功吗？”,90,常见效标,学术成就,特殊训练成绩,实际工作表现,等级评定,团体对照,先前有效的测验,91,确定实证效度的方法,相关法（积差相关）。问题：相关系数的平方表示什么？,区分度：预测源分数是否能区分由效标测量所定义的群体。,命中率：根据测验所做的正确决定的比率。,92,效度系数,：,是最常用的效度指标，尤其是效标关联效度。它是以皮尔逊积差相关系数来表示的。,决定性系数,：效度系数的平方就是决定性系数，它表示测验正确预测或解释的效标的方差占总方差的比例。,估计的标准误,：,93,命中率的含义,效标成绩 失败 成功,测验预测,成功 失误A 命中B,失败 命中C 失误D,94,命中率种类,总命中率 B+C,A+B+C+D,B,正命中率 A+B,95,测验效果分析,录取线,工,作,错误拒绝,正确录取,成,成 功,绩,合格线,正确拒绝,错误录取,失败,测 验 分 数,96,影响效度的因素,测验本身的因素：,测验题目的质量,测验的长度,测验施测中的干扰,被试的因素等。,97,样本的性质,不同的团体对同一测验的反应可能会不一样。,同一个测验，效度团体的性质不同，效度也会有很大差别。,样本团体的异质性。,98,效标的性质,所测量的行为或心理特质与效标越相似，效度系数就越高；,效标与测验分数之间是否线性关系也是很重要的一个因素；,效标测量本身的可靠性如何亦是值得考虑的一个问题,。,99,信度与效度的关系,信度是效度的必要条件，但非充分条件,测量的信度只受随机误差因素的影响，不受系统误差因素的影响,测量的效度既受随机误差因素的影响，又受系统误差因素的影响,因此，测量的效度总低于信度,100,项目分析,难度,：,通过（答对）某个题目的人数占总人数的百分比。,高分组和低分组的通过率的平均值。,区分度,： 测验项目对于所测查的心理特性的鉴别能力和区分程度,101,项目效度分析,：以效标为依据，考察被试在每个试题上的反应与其在效标上表现的相关情形。,相关系数：点二列或者二列相关,鉴别度指数：比较效标得分高和得分低的两组被试在该项目通过率的差别,内部一致性分析,： 项目与总分的相关,102,项目效度和内部一致性的比较,项目效度代表的是题目与外在效标的关系，内部一致性代表的是题目与总分的关系。,预测性测验：多采用项目效度较高的题目；,测验要求同质，选择内部一致性较高的题目。,103,测验分数的解释,原始分数：,测验中直接获得的分数,导出分数,由统计方法推导出的分数,104,参照常模的解释,：被试分数与常模团体比较而进行解释。,常模表就是原始分数的转换表，它为测验使用者提供了一种方便易行的由原始分数向导出分数转化的方法,。,参照效标的解释,：参照效标方法解释测验结果。,105,常模与常模参照,常模群体,抽样方法,常模解释的类型,106,常模群体,群体的构成必须明确界定,常模群体必须是所要测量的群体的一个代表性取样,取样的过程必须详尽地描述,样本的大小要适当,注意常模的时间性,将一般常模与特殊常模结合起来,107,抽样方法,简单随机抽样,：,每个人或者每个抽样单位都有同样机会作为常模的一部分。,系统抽样：,总体数目为N，若要选择K分之一的被试作为样本，可以在抽样范围中选择每个第K分子作为样本。,108,分组抽样,：,总体数目大，无法编号，群体又具有多样性，先将群体分组,分层抽样,：,依据某变量分成若干层次。,分层比例抽样,分层非比例抽样,109,常模的类型,发展常模,：个人在按正常途径发展的心理特征处于什么样的发展水平,百分位常模,百分等级：常模团体中低于这个百分数的人数百分比。,百分位数,四分位数和十分位数,110,标准分数常模,Z,分数，,z,分数，离差智商，标准九分,z（XX）/ SD,Z=A+Bz,111,标准九分,1 2 3 4 5 6 7 8 9,百分比,4 7 12 17 20 17 12 7 4,标准九分把原始分数分成9部分。除1分和9分之外，其余每个分数均包括半个标准差的范围。,112,参照效标解释,强调被试是否达到某种标准或者效标,分为内容参照分数和结果参照分数,113,内容参照,：,参照测验所包括的内容解释分数,掌握分数和正确百分数,结果参照,：,把效标材料结合到测验结果的解释过程中,期望表：说明一个给定的原是分数或者分数等级获得不同效标分数或者等级的可能性有多大。,114,原始分数,人数,效标行为（百分比）,D C B A,30及以下,2029,1019,10以下,22,104,71,14,5 0 36 59,9 21 43 27,37 37 24 3,43 36 14 7,115,