第3章 信息分析方法 第4节 信息评估方法

单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,西南大学计算机与信息科学学院信息管理系,信息分析与研究方法,第,3,章 信息分析与研究方法,打开困惑之门的钥匙,西南大学计算机与信息科学学院信息管理系,信息分析与研究方法,思维方法,相关分析方法,信息预测方法,信息评估方法,西南大学计算机与信息科学学院信息管理系,第,4,节 信息评估方法,广义评估,评估的一般方法基础,层次分析法,西南大学计算机与信息科学学院信息管理系,一、广义评估,评估是各领域的一项基本活动，也是信息分析与研究活动中的中心内容和主要工作。,评估是各类决策的前提,评估技术是一类应用性很强的软技术,西南大学计算机与信息科学学院信息管理系,1,、评估的广义性,在很多领域，评估工作都是基础性的重要工作,多领域、多层次的工作都离不开评估环节,五种通用评估：项目（方案）评估、能力（功效）评估、技术（环境）评估、成果（效益）评估、优先（选优）评估,西南大学计算机与信息科学学院信息管理系,2,、评估的分类,从时间角度：事前评估、现时评估、事后评估,从目标角度：为选优而进行的评估、为了了解状态而进行的评估,从对象的角度：对人或事物的评估、对单个对象或整个系统的评估、对已经量化的对象的评估或对未量化的对象的评估,从方法角度应该特别重视如何对未量化的对象进行评估,西南大学计算机与信息科学学院信息管理系,3,、评估的特点,相对性：进行相对比较。,模糊性：对非量化对象进行评估具有较大 模糊性。,非直观性：对复杂对象进行评估是非直观的。,评估是靠近决策的，直接可以为决策所需要或提供决策支持,评估中，人的主观因素和价值观念起着一种潜在的作用。在本质意义上，评估就是为了明确对象的价值，不可能与价值观念割裂开来。,西南大学计算机与信息科学学院信息管理系,4,、对评估方法的要求,在方法上追求综合性，能够处理多因素、多目标的复杂对象，能够得出通常用经验、直观的方法难以达到的科学结论。,评估方法能够将定性的事物或模糊的抽象的概念转换成半定量、可测度的量化表达方式,方法应该具有客观性，能够将多种随意的判断纳入比较规范的逻辑判断，建立起规范、可比的评价准则或标准,方法具有通用性，适合于较大的范围,西南大学计算机与信息科学学院信息管理系,二、评估的一般方法基础,建立专门工具,西南大学计算机与信息科学学院信息管理系,1,、测度、指标和标度,测度、指标和标度是评估的基础,西南大学计算机与信息科学学院信息管理系,（,1,）测度,将定性、非量化的对象描述转换成量化的、数值形态的表达，这是评估方法的一个基本问题，实现这种转换的过程就称为测度。,测度水平：定类测度、定序测度、定距测度、定比测度（见内容分析法的度量系统）,西南大学计算机与信息科学学院信息管理系,（,2,）指标,为了进行评估，最常用的测度是定序测度。,定序测度中需要某种转换的“尺”，指标就是其中的一种“尺”。,指标将评估的判断分为一些人为的等级，并且赋予量的含义，用数字来表示，即给出指标值,指标可以根据实际评估问题或选择问题的需要设计成不同的档次，每一档次的指标对应一种评语或一种陈述。,西南大学计算机与信息科学学院信息管理系,指标设计的基本要求,能覆盖评估的全部选择范围,档次之间的强度差别应大体相等，大致保持是线性的,西南大学计算机与信息科学学院信息管理系,指标举例：,QUEST,（科学技术效益的定量评估）模型,对技术领域相对重要性的评估指标。由,010,分构成多级，标准是：,10,分：绝对有价值的技术领域，若不发展该领域会绝对阻 碍目标实现,7,分：作用价值很大的领域，该领域若得不到发展将显著降低某些参数的水平，从而影响最佳选择,5,分：该领域的发展将有利于显著降低实现目标的费用,4,分：该领域若不充分发展，将会有碍于达到预期的目标，但不影响主要 目标的实现,3,分：该领域的发展有助于提高决策对象的功能特征性水 平，但与实现 主要目标无关,2,分：该领域的发展对预定目标有间接的影响,分：该领域对预定目标的影响很小,0,分：与预定目标无关的领域,西南大学计算机与信息科学学院信息管理系,指标举例：,QUEST,（科学技术效益的定量评估）模型,评估各学科对不同的技术领域的作用和影响。即估计各学科的发展对不同技术领域的发展的价值和贡献，评估指标有分构成，标准是：,10,分：该学科不发展，对应技术领域不能取得进步,8,分：该学科的巨大成就是技术领域取得重要成功的必要条件,5,分：为了开发远景技术领域，必须扩大该学科的范围,3,分：为了成功解决技术任务，必须显著地增加该学科的知识,1,分：该学科现有的知识水平与技术领域的进步是相适应的,0,分：技术领域对该学科没有依赖和要求,西南大学计算机与信息科学学院信息管理系,（,3,）标度,标度的作用和指标的作用相类似，都是测度的基本手段,标度给出一种一维的强度结构来反映测度对象的排序或相对的比值,标度值所获得的测度信息比指标值多，标度是一种更深的测度手段,既可以反映排序,也可以反映某种判断的模式,西南大学计算机与信息科学学院信息管理系,标度举例：,Guttman,标度,在美国调查白人与黑人交往的程度，采用了由以下五个提问构成的提问：,Q1,：你是否乐意让黑人住在你的国家？,Q2,：你是否乐意让黑人住在你所居住的那个社区？,Q3,：你是否乐意让黑人住在你的近邻？,Q4,：你是否乐意让黑人住在你的隔壁？,：你是否乐意自己的孩子与黑人结婚？,这五个提问构成了测度的一维强度结构，对后面的提问持肯定回答的人，一定对前面的提问持肯定的回答。如果用“,+”,表示肯定的回答，“,-”,表示否定的回答，则上述提问的应答模式及标度见下表：,西南大学计算机与信息科学学院信息管理系,标度举例：,Guttman,标度,题号,标度值,西南大学计算机与信息科学学院信息管理系,2,、综合评分法,见第二章第,5,节信息分析与研究产品评价综合评分法,西南大学计算机与信息科学学院信息管理系,3,、判断矩阵和评估模型,三个基本集合：判断集、评估因素集、权重集,判断矩阵,评估模型,模糊评估,多层次评估,见第二章第,5,节信息分析与研究产品评价模糊综合评价法,西南大学计算机与信息科学学院信息管理系,4,、权重的确定方法,权重概念的本质是反映了进行判断时的价值观念和价值取向,确定权重的方法需要建立在经验和大数的基础上，并实现从定性向定量的转换，即综合产生权重或权重向量。,各种确立权重的方法都属于拟定量的方法，其本身也是一种评估过程,西南大学计算机与信息科学学院信息管理系,（,1,）直接经验法,根据工作经验和定性分析，以及对历史数据的统计判断，归纳地直接得出权重分配的大致比例。一般由经验丰富的人直接完成。,西南大学计算机与信息科学学院信息管理系,（,2,）专家咨询法,通过各种方式（例如专家调查法）征求一群有经验的专家的意见，以专家关于权重取值的估计进行平均处理，得出一个平均的权重分配结果。,这种方法的出发点是设法综合一批有资历的人的经验来决定权重,西南大学计算机与信息科学学院信息管理系,（,3,）排序法,又称编码法,跟据对各因素的定性比较判断，先确定其相对重要性的排序，令最不重要的因素权重为,1,，其它因素的权重逐步增加，然后再将序数转换成权重分配,简单易行，只反映各因素之间重要性差异，不反映重要性差异的大小或程度,西南大学计算机与信息科学学院信息管理系,排序法举例：,假定有四个因素,A,、,B,、,C,、,D,。其相对重要性的粗略排序为,C,、,A,、,B,、,D,，即相应的序数为,1,，,2,，,3,，,4,。转换成归一的权重得：,1/10,，,2/10,，,3/10,，,4/10,，即这四个因素的权重值为：,A=0.2,，,B=0.3,，,C=0.1,，,D=0.4,。,西南大学计算机与信息科学学院信息管理系,（,4,）环比法,首先把各因素任意排成某一顺序列，比较相邻的两个因素之间的重要程度，得出其重要性的相对比率，即环比比率。,其次，将序列中的最末一个因素定为一个基准数，把环比比比率转换成这一基准数上的定基比率，定基比率就是权重分配。,最后，进行归一化处理，归一化后得到的结果就是所要的权重,简单易行，但各因素之间未进行充分的比较,有时候按不同的顺序排序时，计算出的权重值会不同。,西南大学计算机与信息科学学院信息管理系,环比法举例：,是任意排成的因素序列，要求出各因素的权重值,目标,按环比计算的重要性比率,换算为以目标为基数的重要性比率,权重,2.0,4.50,0.327,0.5,2.25,0.164,3.0,4.50,0.327,1.5,1.50,0.109,1.00,0.073,合计,13.75,1.000,西南大学计算机与信息科学学院信息管理系,（,5,）优序图法,由默蒂（）发明,比环比法更进一步，对所有的因素进行全部组合的成对比较，并且用方格图为工具。,简单优序图法,:,简单直观,加权优序图法,西南大学计算机与信息科学学院信息管理系,简单优序图法举例：,ABCDE,是要进行权重分配的五个因素，将其排成正方格图形，每一方格内写入两两相比的结果，本身相比的对角线方格充以黑色，其余空格填入,0,或,1,。若比前者重要填“,1”,，否则填“”,西南大学计算机与信息科学学院信息管理系,简单优序图法举例,A,B,C,D,E,合计,调整,权数,A,0,0,1,0,0.1333,B,1,0,1,1,0.2667,C,1,1,1,1,0.3333,D,0,0,0,0,0.0667,E,1,0,0,1,0.2000,1.0000,西南大学计算机与信息科学学院信息管理系,加权优序图法举例,加权优序图法与简单优序图法的区别在于将和的选择改为的选择。如果前一因素比后一因素重要性程度显著，相应填入的数字就会越大，可以选择，但最大数不超过；若前一因素不如后一因素重要，则填。,西南大学计算机与信息科学学院信息管理系,加权优序图法举例,A,B,C,D,E,合计,权数,A,3,4,2,3,12,0.24,B,2,4,1,3,10,0.20,C,1,1,0,2,4,0.08,D,3,4,5,4,16,0.32,E,2,2,3,1,8,0.16,50,1.00,西南大学计算机与信息科学学院信息管理系,（,6,）逐步调整法,是由乔奇曼（,Churchman,）提出,以四个因素的情况为例,将四个因素进行定性对比，粗略判断每个因素的重要性程度，根据重要性程度的顺序假定一组对应的权重值,进行组合因素和单个因素的重要性相对比较。根据某几个因素组合以后与另外一个因素的比较结果来调整上述假定的权重。,进行多次的组合和比较，不断调整权重值，得到逐步修正后的一组权重值,进行归一化处理，得出最后确定的权重值,西南大学计算机与信息科学学院信息管理系,逐步调整法举例：,ABCD,是根据重要性排序的四个因素，因素,A,最重要，因素,D,最不重要。令它们对应的权重值分别是：，这些值都是大致估计的值。,现在假设将因素和组合以后与因素进行比较，如果组合后还是不如重要，则的权重应该大于与权重之和，应该调整加大的假设权重值，或者减小或的权重值。现将的权重值由调整为，可以满足。反之，若和的组合重要性超过了，则应对象关权重作相反的调整。,同样，对、组合后和相比，如果认为的重要性程度很大，超过了其余三因素的合计，则权重要加大。,经过数次调整以后，如果已经满意，可以进行归一处理，求出四个因素的最后权重值。,西南大学计算机与信息科学学院信息管理系,逐步调整法举例：,因素,假定权重,一次调整,二次调整,归一权重值,A,1,1,2,0.5714,B,0.8,0.8,0.8,0.2286,C,0.5,0.5,0.5,0.1429,D,0.3,0.2,0.2,0.0571,西南大学计算机与信息科学学院信息管理系,逐步调整法,当需要确定权重的因素超过四个时（假如是个因素）,先任意将三个因素作为一个因素组，在另取一个单独的因素，每次都将该因素加进三个因素的小因素组去，组成四因素按四因素逐步调整法步骤进行。,但是要注意，在调整过程中，不能调整加进的那个单因素的权重值，应将它作为基准因素。,最后将所有四因素组都调整到满意之后的权重值统一进行归一化后即可,西南大学计算机与信息科学学院信息管理系,三、,层次分析法,定性与定量的融合,是面向决策的评估方法,吸收其它方法的优点和基础上发展起来,适用于处理社会经济系统中难于完全定量的复杂问题,西南大学计算机与信息科学学院信息管理系,