常用综合评价方法.pptx
《常用综合评价方法.pptx》由会员分享,可在线阅读,更多相关《常用综合评价方法.pptx(65页珍藏版)》请在得力文库 - 分享文档赚钱的网站上搜索。
1、ContentConcept Process Selection and weight estimation of evaluation index Analytic hierarchy process,AHP Topsis Rank sum ratio,RSR第1页/共65页例如,某人英语考试成绩58分是否对照某标准判断此结果是否评 价(evaluation)仅是描述,反映现状第2页/共65页1.基本概念Synthetical evaluation综合评价Definition:利用多项指标对某个评价对象的某种属性进行定性、定量评估,或者对多个评价对象的属性进行定性、定量评估,可对优劣顺序排序
2、。Application:对比,择优Purpose:支持决策(基础、预防、临床、管理中广泛应用)第3页/共65页2.1 综合评价的一般步骤对某事件进行多因素综合评价的过程,实质上就是科学研究与决策的过程,原则上应包括设计、收集资料和分析资料几个基本阶段,实施中应着重注意以下几个基本环节。选择恰当的评价指标(evaluation indicator)确定各评价指标权重合理确定各单个指标的评价等级(evaluation grade)及其界限建立综合评价模型(synthetical evaluation model)确定多指标综合评价的等级数量界限,并根据实践对已建立模 型考察、修改及完善。研究目的
3、第4页/共65页例:学生综合测评(综合评分)u评价指标:德育总分、智育总分、体育 总分(加分:CET)u权重:方案1:德育0.3 智育0.6 体育0.1 方案2:德育0.1 智育0.8 体育 方案3:德育0.3 智育0.6 体育0.1 加分u评价模型:评分法、总分为100,加分不封顶,累加法。u评价结果:学生甲:德育90 智育70 体育80 学生乙:德育70 智育80 体育70第5页/共65页第6页/共65页2.2 综合评价一般步骤示例研制新生儿缺氧状况的Apgar评分方法研究目的据专业知识,选择5个指标 心率 呼吸肌张力 反射 皮肤颜色 5个指标具有相等权重选择指标确定权重以累加法累计总分:
4、810分为正常;47分为轻度缺氧;03分为重度缺氧。确定指标评价等级及界限建立模型第7页/共65页3.1 评价指标的基本要求基本要求 代表性:各层次指标能最好地表达所代表的层次。确定性:指指标值确定,其高低在评价中有确切含义。区别能力/灵敏性:即指标值有一定的波动范围,而且其高低在评价中有确切的含义。独立性:即选入的指标各有所用,相互不能替代。选择综合评价指标第8页/共65页3.2 系统分析法及文献资料分析优选法筛选指标缺乏有关历史资料,或指标难以数量化时 系统分析法(systematic analysis method):是一种常用的凭经验挑选指标的方法,首先将所有备选指标按系统(或属性、类
5、别)划分,再通过座谈或填调查表的方法获得对各指标的专家评分,确定主次,再从各系统内挑选主要的指标作为评价指标。文献资料分析优选法:即全面查阅有关评价指标设置的文献资料,分析各指标的优缺点并加以取舍。第9页/共65页3.3 常用客观筛选指标方法逐个指标进行假设检验的方法:是在掌握有关历史资料基础上,依照可能的评价结果将评价对象分组,并对各指标进行假设检验,挑选有统计意义的指标作为评价指标。多元回归与逐步回归法:多元回归分析挑选标准化偏回归系数绝对值较大或偏回归系数假设检验有显著性的指标作为评价指标;逐步回归有自动挑选主要影响指标的功能,是目前最常用的指标挑选方法。指标聚类法:在存在众多指标的情况
6、下,可将相似指标聚成类,再从每类中找一个典型指标作为代表,从而用少量几个典型指标作为评价指标来代表原来众多的指标建立评价模型。第10页/共65页3.4 指标筛选建议在实际工作中,往往综合使用多种方法进行指标筛选,在获得较为满意的专业解释的基础上,优先考虑那些被多种方法同时选入的指标。第11页/共65页 评价指标的权重估计 确定指标权重方法主观定权法客观定权法专家评分法成对比较法Saaty权重法秩和比法相关系数法其它方法模糊定权法熵权法 定权带有一定的主观性,用不同方法确定的权重分配,可能不尽一致,这将导致权重分配的不确定性,最终可能导致评价结果的不确定性。因而在实际工作中,不论用哪种方法确定权
7、重分配,都应当依赖于较为合理的专业解释。第12页/共65页3.6 专家评分法评分方式1)专家个人判断专家个人判断 即分别征求专家个人意见,在专家各自即分别征求专家个人意见,在专家各自单独给评价指标的相对重要性打分的基础上,进行统计处理,单独给评价指标的相对重要性打分的基础上,进行统计处理,以确定各指标的权重。以确定各指标的权重。优点优点:专家打分时专家打分时不受外界影响不受外界影响,没有心理压力,没有心理压力,可以最大限度地发挥个人创造能力。可以最大限度地发挥个人创造能力。缺点缺点:仅凭个人判断,易受仅凭个人判断,易受专家知识深度与广度专家知识深度与广度的的影响,难免带有片面性。影响,难免带有
8、片面性。2)专家会议专家会议 即召开所有被挑选专家,以集体讨论的方即召开所有被挑选专家,以集体讨论的方式进行评分,然后再以统计手段确定各指标的权重。式进行评分,然后再以统计手段确定各指标的权重。优点优点:可以交换意见,可以交换意见,相互启发,弥补个人之不足相互启发,弥补个人之不足。缺点缺点:主要表现在易受主要表现在易受心理因素的影响心理因素的影响,如,如屈从于屈从于权威权威和大多数人的意见,受劝说性意见的影响,不愿公开修和大多数人的意见,受劝说性意见的影响,不愿公开修正已发表的意见等等。正已发表的意见等等。第13页/共65页6个专家对个专家对4个评价指标的评价结果得分个评价指标的评价结果得分第
9、14页/共65页专家评分法可靠性评估常用指标 在在实实际际工工作作中中,常常用用专专家家的的擅擅长长系系数数和和专专家家意意见见一一致致性性系系数数等等指指标标来来估估计计专专家家评评分分方方法法所定权重分配的相对合理性。所定权重分配的相对合理性。1)擅长系数擅长系数:某一评估专家的水平可用对擅长领:某一评估专家的水平可用对擅长领域中所提问题作出正确应答的概率域中所提问题作出正确应答的概率,即所谓即所谓“擅擅长系数长系数”。计算公式为:。计算公式为:其中,q为擅长系数擅长系数,p为错答率。为错答率。理想的理想的“绝对正确绝对正确”评估专家,评估专家,p=0,q=1。通常在选择评估专家时。通常在
10、选择评估专家时,其擅长系数其擅长系数q不应低于不应低于。第15页/共65页6个专家对4个评价指标的评价结果的一致性系数计算表第16页/共65页2)专家意见一致性系数专家意见一致性系数:设参与权重评估的专家数为设参与权重评估的专家数为m,待,待评价指标数为评价指标数为n,则反映,则反映m个专家对全部个专家对全部n个指标权重评估个指标权重评估的一致程度的指标称为的一致程度的指标称为一致性系数一致性系数,以,以w表示表示,其计算公式其计算公式为:为:一致性系数在01之间取值,越接近于1,表示所有专家对全部评价指标评分的协调程度越好。当然,一致性系数越大越好,这说明各评价因子的权重估计较为稳定可靠。当
11、有相同秩时,要对w进行校正:式中 第17页/共65页3.7 常用的客观定权方法某些统计方法分析结果,可提供有关因素权重分配的客观信息:w多元回归分析及逐步回归分析中,各自变量的标准化偏回归系数值以及由此而推算的贡献率;w计数资料判别分析中的指数,计量资料判别分析中各因子的贡献率;w主成分分析中得到的因子载荷和贡献率。某些特定的统计方法 例如去某死因后期望寿命的增量、减寿年数(Potential Years of Life Potential Years of Life LostLost,PYLL),PYLL)都可为各死因的相对重要性提供有关权重分配的信息献率。第18页/共65页3.8 组合权重
12、及其计算方法组合权重(combined weight)(combined weight)当评价指标可分层时,即某项或某几项评价指标可再分为次级评价指标时,则次级评价指标的权重既应考虑其本身在所有次级评价指标中的权重分配,又要考虑其高层评价指标在所有评价指标中的权重分配。组合权重有两种求法:w代数和法 w乘积法 第19页/共65页组合权重计算表第20页/共65页 权重估计注意事项权重估计仍不是很完美,权重估计结果应满足专业解释;尽量在专业领域中寻找专业评分方法;尽量排除试验者和受试者的主观性,尽量选用客观方法;采用多种方法进行权重,在获得较为满意的专业解释的基础上,优先考虑多个方法同时选入的指标
13、。第21页/共65页几种常用综合评价方法w现有的统计方法现有的统计方法:主要为多元统计方法,主要为多元统计方法,如多元回归、逐步回归分析、判别分析、因子如多元回归、逐步回归分析、判别分析、因子分析、时间序列分析等。分析、时间序列分析等。w模糊多元分析方法模糊多元分析方法:由模糊数学发展而来,由模糊数学发展而来,包括模糊聚类、模糊判别、模糊综合评价等方包括模糊聚类、模糊判别、模糊综合评价等方法。法。3 3简易方法简易方法:主要包括综合评分法、综合指数:主要包括综合评分法、综合指数法、层次分析法、法、层次分析法、TopsisTopsis法、秩和比法等。法、秩和比法等。特点特点:简单实用;简单实用;
14、适用于各种资料;适用于各种资料;存存在一定的局限性。在一定的局限性。第22页/共65页4.1 层次分析法概念 层次分析法(Analytic Hierarchy Process,简称AHP):由美国科学家于20世纪70年代提出,是用系统分析的方法,对评价对象依评价目的所确定的总评价目标进行连续性分解,得到各级(各层)评价目标,并以最下层指标作为衡量目标达到程度的评价指标。然后依据这些指标计算出一综合评分指数对评价对象的总评价目标进行评价,依其大小来确定评价对象的优劣等级。第23页/共65页4.2 层次分析法示例例4 4:拟采用层次分析法建立一个评价综合医院工作质量的综合指标,并采用该指标对某市6
15、 6所综合医院的工作质量进行综合评价。医院工作质量综合评价的基本步骤:1)对总评价目标进行连续性分解以得到不同层次的评价目标,将各层评价目标用图有机地标示出来,即建立目标树图,见图1。第24页/共65页4.3 建立目标图第25页/共65页4.4 计算权重系数计算权重系数2)对目标树自上而下分层次一一对比打分,建立对目标树自上而下分层次一一对比打分,建立成对比较判断优成对比较判断优选矩阵选矩阵。各层评分标准见表3,表4为第一层子目标成对比较判断优选矩阵。表3目标树图各层次评分标准对比打分对比打分相对重要程度相对重要程度说说明明1同等重要同等重要两者对目标的贡献相同两者对目标的贡献相同3略为重要略
16、为重要根据经验一个比另一个评价稍有利根据经验一个比另一个评价稍有利5基本重要基本重要根据经验一个比另一个评价更为有利根据经验一个比另一个评价更为有利7确实重要确实重要一个比另一个评价更有利,且在实践中证明一个比另一个评价更有利,且在实践中证明9绝对重要绝对重要重要程度明显重要程度明显两相邻程度的两相邻程度的中间值中间值需要折衷时采用需要折衷时采用表4第一层子目标成对比较判断优选矩阵医疗工作医疗工作护理工作护理工作膳食供应膳食供应医疗工作医疗工作1(a11)3(a12)5(a13)护理工作护理工作1/3(a12)1(a22)3(a23)膳食供应膳食供应1/5(a13)1/3(a23)1(a33)
17、第26页/共65页4.4 计算权重系数计算权重系数(续续1)(2)按公式按公式 计算计算初始权重系数初始权重系数 得得(3)按公式按公式 计算计算归一化权重系数归一化权重系数 得得 用同样方法可获得其他分层中各项目指标的权重系用同样方法可获得其他分层中各项目指标的权重系数,现以医疗工作一项为例说明,见表数,现以医疗工作一项为例说明,见表5。第27页/共65页4.4 计算权重系数计算权重系数(续续2)表表5医疗工作第二层、第三层子目标权重系数医疗工作第二层、第三层子目标权重系数层层次次评价目标及权重系数评价目标及权重系数第二层第二层医疗制度医疗制度医疗质量医疗质量病床使用病床使用0.16340.
18、53960.2970第三层第三层疗疗效效重症收容重症收容0.66700.3330(4)计算各个评价指标的组合权重系数,见图2。膳食供应优良率的组合权重系数 C1=0.1047 护理制度优良执行率的组合权重系数C2 治疗有效率的组合权重系数 C6第28页/共65页4.4 计算权重系数(续3)图2 乘积法求各层次评价指标的组合权重 第29页/共65页4.5 求综合评分指数(5)对对评评价价对对象象的的总总评评价价目目标标进进行行综综合合评评估估。综综合合评评分分指指数数GIGI的计算公式如下:的计算公式如下:其其中中Pi为为第第i个个评评价价指指标标的的测测量量值值,为为评评价价指指标标的个数。的
19、个数。例例4 某某市市有有6所所综综合合医医院院,试试对对其其医医院院工工作作质质量量进进行行综综合合评评价价,医医院院的的6项项评评价价指指标标分分别别为为病病床床使使用用率率(P1)95%,治治 疗疗 有有 效效 率率(P2)88.1%,重重 症症 收收 容容 率率(P3)15.4%,医医疗疗制制度度执执行行优优良良率率(P4)74.7%,护护理理制制度度执执行行优优良良率率(P5)54.7%,膳膳食食供供应应优优良良率率(P6)41.3%,其其综合评分指数为:综合评分指数为:其他医院综合评分指数其他医院综合评分指数GI的计算结果见表的计算结果见表6。第30页/共65页4.5 求综合评分指
20、数(续1)由由表表6工工作作质质量量顺顺位位可可见见,A医医院院工工作作质质量量最最佳佳,D医院医院工作质量最差。工作质量最差。表6某市6所医院工作质量的综合评价表评价指标评价指标组合权重组合权重医医院院A ABCDEF病床使用率病床使用率0.189295.092.094.895.689.177.4治疗有效率治疗有效率0.229288.191.290.094.093.692.2重症收容率重症收容率0.114515.48.37.93.19.53.7医疗制度执行优良率医疗制度执行优良率0.104174.753.461.950.061.967.1护理制度执行优良率护理制度执行优良率0.258354.
21、720.726.120.027.435.5膳食供应优良率膳食供应优良率0.104741.341.422.820.034.030.3综合评分指数综合评分指数66.254.555.052.556.555.5工作质量顺位工作质量顺位154623第31页/共65页4.6 层次分析法评价1、应用层次分析法时,注意在计算归一化权重系数后,应检、应用层次分析法时,注意在计算归一化权重系数后,应检验所计算得出的验所计算得出的权重系数是否符合逻辑权重系数是否符合逻辑。通常用一致性指标。通常用一致性指标检验该项目的相对优先顺序有无逻辑混乱,一般认为,当时,检验该项目的相对优先顺序有无逻辑混乱,一般认为,当时,可能
22、无逻辑混乱,即计算得的各项权重可以接受。可能无逻辑混乱,即计算得的各项权重可以接受。按下述公式可计算按下述公式可计算 一致性指标 :其中m为受检验层次的子目标数,为最大特征根,为该层子目标成对比较判断优选矩阵的特征根。第32页/共65页4.6 层次分析法评价(续1)2、为了度量不同阶判断矩阵是否具有满意的一致性,我为了度量不同阶判断矩阵是否具有满意的一致性,我们还需引入判断矩阵的们还需引入判断矩阵的平均随机一致性指标值平均随机一致性指标值。对于对于1,2阶判断矩阵,只是形式上的,因为阶判断矩阵,只是形式上的,因为1,2阶判断矩阵总具阶判断矩阵总具有完全一致性。当阶数大于有完全一致性。当阶数大于
23、2时,判断矩阵一致性指标与时,判断矩阵一致性指标与同阶平均随机一致性指标之比称为同阶平均随机一致性指标之比称为随机一致性比率随机一致性比率,记,记为为CR,其计算公式为:其计算公式为:如本例第一层:第33页/共65页4.6 层次分析法评价(续2)对于对于19阶判断矩阵,阶判断矩阵,RI值值见表见表7。表719阶平均随机一致性指标的取值阶数123456789RI0.000.000.580.901.121.241.321.411.45 当时,即认为判断矩阵具有满意的一致性,否则就需要调整判断矩阵,并使之具有满意的一致性。以本例第一层为例:认为第一层子目标各项权重判断无逻辑错误。依此类推,运用此法逐
24、步检测每一层子目标权重系数,判断它们是否都合乎逻辑。第34页/共65页5.1 Topsis 法TopsisTopsis法法(Topsis methodTopsis method):是是系系统统工工程程中中有有限限方方案案多多目目标标决决策策分分析析的的一一种种常常用用方方法法,可可用用于于效效益益评评价价、卫卫生生决决策策和和卫卫生生事事业业管管理理等等多多个个领领域域。本本法法对对样样本本资资料料无无特特殊殊要要求求,使使用用灵活简便灵活简便,故应用日趋广泛。,故应用日趋广泛。第35页/共65页5.2 Topsis 法示例&例例5 5个个煤煤矿矿煤煤尘尘对对呼呼吸吸系系统统危危害害的的研研究
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 常用 综合 评价 方法
限制150内