系统工程课件：第六章 系统评介.ppt

1、第六章 系统评价1. 系统评价概述2. 指标数量化方法3. 指标综合评价法4. 模糊综合评价法5. 层次分析法6. 综合应用一、系统评价的概念 系统评价就是评价系统的价值。具体地说，它是根据预定的系统目标，利用模型和资料，从社会、政治、经济和技术等方面，对系统各种方案的价值进行评定，从中选择最佳方案，为系统决策选择最优方案提供科学的依据。 系统评价的复杂性：有的指标难以量化，它与使用人与评价人的主观感觉与经验有关；不同方案各有所长，各有所短，指标越多，方案越多，问题就越复杂，方案更难取舍。第一节第一节 系统评价概述系统评价概述 如对城市交通系统进行评价。原来只是从交通工具的动力等技术方面以及交

2、通路线的建设费用和日常经营费用等经济方面进行评价。近年来，除进行上述方面的评价外，还要求从交通工具的方便性、舒适性、安全性、美观性等使用方面，从环境保护、能源政策等国家利益方面进行评价。 如对学生的评价由单一评价到素质评价。 价值就是评价主体（即从事评价的个人或集体）对某个评价对象（待开发的系统，待决策的系统行为等）在理论上或实践上所具有的作用和意义上的认识和估计。 从经济意义上讲，价值通常被理解为根据评价主体的效用观点对评价对象能满足某种需求的认识或估计。 价值的特点：（1）相对性。就具体评价对象来说，由于评价主体所处的立场、观点、环境、评级目的等的不同，对其价值的评定就有所不同。所以必须有

3、许多人参与评价。(2)共同性。人们有机会经常交流对事物的认识或估计，所以在价值上又会表现出某种程度的共同性与客观性，形成社会价值观。个人价值观与社会价值观合理地统一是系统评价的重要任务。二、价值的概念二、价值的概念（3）评价对象的价值不是对象本身所固有的，而是根据评价对象、评价主体和其所处的环境条件等关系相对地确定；另一方面，不存在计量价值的绝对尺度，所以，系统评价通常采用相对比较的方法确定评价尺度。 所以，系统评价必须具备两个前提条件（1）熟悉方案：确定掌握各替代方案的优缺点，对各项基本目标、功能要求的实现程度、方案实现的条件和可能性的估计等。这类估计是通过技术、经济及社会评价等单项评价实现

4、的。（2）确定评价尺度：先确定评价尺度，再通过评价尺度对评价对象进行测定，以确定其价值。 根据熟悉方案的情况，结合评价标准，应用适当根据熟悉方案的情况，结合评价标准，应用适当的方法，先进行单项评价，再综合评价，从而作的方法，先进行单项评价，再综合评价，从而作出对方案的优先顺序的结论，这就是系统评价的出对方案的优先顺序的结论，这就是系统评价的内容。内容。 1 系统评价的原则系统评价的原则 （1）要保证评价的客观性。评价资料的全面性和可靠性，防止评价人员的倾向性；评价人员组成的代表性，不能只邀请单方面人员参加，还要保证自由表态的可能，行动不受压力；要保证专家人数的比例。（2）要保证方案的可比性。替

5、代方案在保证实现系统的基本功能上要有可比性和一致性。个别功能突出或方案内容新，只能说明其相关方面，不能代替其他方面得分，更不能搞 “陪衬”方案，从而失去评价的真意。 （3）评价指标要成系统。评价指标要包括系统目标所涉及的一切方面，而且对定性问题要有恰当的评价指标，以保证评价不出现片面性。 （4）评价指标符合国家方针政策。评价指标必须与国家的方针、政策、法令的要求相一 致。三、系统评价的原则与步骤三、系统评价的原则与步骤 2 评价指标体系内容评价指标体系内容 （1）政策性指标。包括政府的方针、政策、法令，以及法律约束和发展规划等方面的要求，这对国防和国计民生方面的重大项目或大型系统尤为重要。 （

6、2）技术性指标。包括产品的性能、寿命、可靠性、安全性等，工程项目的地质条件、设备、设施、建筑物、运输等技术指标要求。 （3）经济性指标。包括方案成本（有条件时应考虑生命周期成本；即包括制造成本、使用成本和维修成本等）、利润和税金、投资额、流动资金占用量、回收期；建设周期，以及地方性的间接收益等。 （4）社会性指标。包括社会福利、社会节约、综合发展、就业机会，污染、生态环境等。 （5）资源性指标。如工程项目中的物资、人力、能源、水源、土地条件等。 （6）时间性指标。如工程进度、时间节约、试制周期等。上述6个方面是指一般可能要求考虑的指标大类，不可一概而论，视具体评价对象而定。 3 系统评价的步骤

7、系统评价的步骤 （1）对评价方案做出简要说明，使方案的特点、优缺点清晰明了，便于评价人员掌握。 （2） 确定由所有单项和大类指标组成的评价指标体系。 （3）确定各大类及单项评价指标的权重，并从整体上调整。 （4）进行单项评价，查明各项评价指标的实现程度。 （5）进行单项评价指标的综合，得出大类指标的价值。 （6）进行综合评价，综合各大类指标的价值和总价值。 交通运输系统的评价指标体系 遵章守纪，教书育人 备课充分，讲稿完备 治学严谨，要求严格 概念清楚，条理清晰 内容熟练，表达准确 突出重点，讲清难点 语言生动，教态自然 精神饱满，感情充沛 因材施教，教法得当 联系实际，例证恰当 启发思维，培

8、养能力 学生思想活跃，课堂气氛活泼某大学教学质量评估指标体系某大学教学质量评估指标体系一、专家打分法一、专家打分法 这是一种感觉评分法。例：设有5台设备，15个操作者，其操作感受记录如表所示。计算各台设备的得分Fj 。 对各个得分Fj，可以将其化为百分比制（10分制或5分制）得分Bj（最高分100分或10分、5分）： 其中： 或进行如下处理： 得分系数 其值大小可作为衡量设备好坏的标准。第二节第二节 指标数量化方法指标数量化方法max100maxmaxjjFFjFFBjnjjjjFFf1操作者样机IV1差可差可良2良差差差可3可差良可差4可可良可可5差差可可可6可可良可可7差差可良可8可可可可

9、良9良可良良良10差可可良良11可可差良可12可良良良良13良可良良良14良可可良良15可可可良良良(a)可（b）差(c)47411046639518613a+2b+c=s得分：F=S153020027180332203825337247操作者对各设备的操作感受情况表方案（样机）I得分Fj20018022025324711百分制得分Bj79171186.910097610分制得分791711869109765 分 制 得分3.963564355488得分系数fi0.1820.1640200023002241.00不同得分制下的得分表二、连环比率法二、连环比率法 这是一种确定得分系数或加权系数的

10、方法。该方法分成以下三个步骤进行： 填写暂定分数列（由上而下） 填写修正分数列Fi（由下而上） 计算得分系数fi1, 101niiiiiiiffFFf方案暂定分数修正分数Fi得分系数fjA120450033A2052250.16A3304500.33A415150011A51010000713751.0连环比率法 一、加权平均法一、加权平均法 设A1,A2,Am是评价对象的m个替代方案； F1,F2,Fn是评价替代方案的n个评价指标； w1,w2,wn是n个评价指标的权重； ai1,ai2,ain是第i个方案Ai的关于Fj指标 (j=1,2, ,n)的价值评定值。 相应的评价矩阵为：第三节第三

11、节 指标综合评价法指标综合评价法指标因素FjF1F2Fn综合评价值i权重j12n方案AiA1a11a12a1nA2a21a22a2n：Amam1am2amn 评价矩阵表1 加法规则 2 乘法规则njjjnjijjwwmiaw111, 10, 2 , 1,miawmianjijjinjwijij,2 , 1,lglg, 2 , 1,11性能ai1w1成本ai2w2可靠性ai3w3维修性ai4w4寿命ai5w5重量ai6w6能耗ainwn某一方案Ai资料来自系统开发与其它方案去比较njijjiaw1 加权平均法的原理加权平均法的原理例 设有3个方案，5项指标，试计算各个方案的综合评价值。指标FjF

12、1F2F3F4F5权重j040.30.150.10.05方案AiA1769102A286428A349510623132123321lglglg7708.0lg,7608.0lg,8236.0lg35.6,20.6,05.7加法规则：乘法规则：二、功效系数法二、功效系数法 设系统具有n项评价指标f1(x), f2(x), fn(x) ，其中k1项越大越好，k2项越小越好，其余(n- k1 - k2)项要求适中。 现分别为这些指数赋予一定的功效系数di，0 di 1 ，其中di =0表示最不满意， di =1表示最满意； 一般地， di =i(x) ，对于不同的要求，函数di =i(x)有着不同

13、的形式，（如下页图所示）当fi(x)越大越好选(a)， fi(x)越小越好选(b)，适中选(c)。这时用总的功效系数D 作为单一评价指标，D越大越好（0D1）。nndddD21当fi(x)越大越好选(a)， fi(x)越小越好选(b)，适中选(c) 功效函数图 例 设某产品有4项指标：f1表示产量，允许在40100件之间变化； f2表示产品的硬度，允许在3.24.4之间变化； f3表示能耗，允许在6.08.5kW之间变化； f4表示产品的合格率，不允许低于50%。所以， f1与f4越高越好， f3越低越好， f2以适中为好，它们的功效函数i(i=1,2,3,4)如下页图所示。今有两种方案满足4

14、项指标的要求，试评价两种方案的优劣。 指标方案f1 f2 f3 f4 A1A258 3.7 6.5 8057 4.1 6.5 85各指标的功效函数 指标方案f1 f2 f3 f4 A1A258 3.7 6.5 8057 4.1 6.5 85 解：根据两种方案的数据查图中的各曲线，得到功效系数如下表所示。 总的功效系数 , n=4 分别算得D1=0.752，D2=0.726 D1 D2 ，所以，方案A1优于A2。nndddD21d1 d2 d3 d4 D A1A20.43 0.94 0.94 0.84 0.7520.41 0.80 0.94 0.90 0.726各方案指标的功效系数三、效益成本法

15、 在系统评价中，所有的评价指标总可以划分效益效益与成本成本两类。将每个方案的效益与成本分别计算后，再比较其效益效益/成本成本，就可评价方案的优劣。 例：某厂为了扩大生产，准备新建一厂房，为此提出三个方案，用效益效益/成本法成本法对三方对三方案进行评价。案进行评价。 这里，把指标归类为效益与成本两类。这里，把指标归类为效益与成本两类。建厂方案指标比较 序号指 标单位第方案第方案第 方案1造价万元10086752建成年限年5433建成后需流动资金万元45.833.338.54建成后发挥效益时间年1010105年产值万元2601962206产值利润率%121512.57环境污染程度稍重最轻轻 的利润

16、高于、 ，但投资额也高于、 ，从效益/成本看低于、 ，而且，环境保护效果差。 方案为理想方案。方案为理想方案。各方案投资利润率比较指 标单位第方案第方案第方案总利润额万元312294275全部投资额万元145.8119.3113.5利润高于投资的余额万元166.2174.7161.5投资利润率%214246242选择法 这是一种比较简单的规范化方法，其过程为：1 标准化：分别从各个指标去比较方案的得分，最好的方案得100分，最差的方案得1分，其它方案按下式计算得分：2 确定各方案的权系数3 综合评价（加权平均法）1)(99BABCX序号 目标权系数1造价156.4100402建成年限150.5

17、100403需流动资金 110058.8405年产值100138.1306产值利润率 110017.5807环境污染11007020和322018306 14295250 前页表中方案指标的标准化数据 模糊综合评价可以用来对人、事、物进行全面、正确而又定量的评价，因此，它是提高领导者决策能力和管理水平的一种有效方法。当面对多种而复杂的方案、褒贬不一的人才、众说纷纭的成果时，就试用模糊综合评价法。 一、模糊评价法原理 1 模糊的概念模糊的概念 普通集合只能表现确切的概念。但现实生活中却存在着外延不分明的概念，如医学中的“发高烧”、“健康人”，气象中的“阴雨天”等概念的界限都是十分模糊的。我们称这

18、类外延不分明的概念为模糊概念。Zadeh. A首先引入模糊集的概念，其基本思想是把普通集合中的绝对隶属关系灵活化，使元素对“集合”的隶属度从只能取0，1中的值扩充为可取区间0，1中的任一数值。第四节模糊综合评价法第四节模糊综合评价法2 模糊集的概念模糊集的概念 定义：为定量刻划这些模糊性，定义了论域U上的一个模糊子集模糊子集A，：对于 ， 都指定了一个数 ，叫做u对A的 隶属程度。 映射 叫做的A隶属函数。例：某班一组有5个同学，即 设论域U= ，现分别对每个同学的“性格稳重程度”按百分制打分，再除以100。实际上就是给定一个从论域U到0，1闭区间的映射，设为Uu 1 , 0)(uuA)(,1

19、 , 0:uuuUuAA54321,uuuuu54321,uuuuu 这样就确定了一个模糊子集A，它表示出这个小组的同学对“性格稳重”这个模糊概念的符合程度。如果论域U是有限集合时，可以用向量来表示模糊子集，对于上例可以写成：A=(0.85,0.75,0.98,0.30,0.60) 对于一般的模糊子集表示论域中有n个元素，其中 是论域U中第i个元素对模糊子集的隶属度。60. 0)(,30. 0)(,98. 0)(,75. 0)(,85. 0)(54321uuuuuuuuuuAAAAA)(,),(),(21nAAAuuuuuuA), 2 , 1(1 , 0)(niAuiuu 另外，也可以采用记号

20、将上例写成：所以，模糊子集A，按记法，可表示为54321/60. 0/30. 0/98. 0/75. 0/85. 0uuuuuAnnAAAuuuuuuuuuA/ )(/ )(/ )(2211 3 模糊关系模糊关系模糊矩阵模糊矩阵R 普通关系只能描述两元素有无某种关系R如兄弟、父子关系等。但现实存在着大量更为复杂的关系，不是简单地有或无，而是不同程度的存在着，即模糊关系，模糊关系对应的模糊矩阵R。如用打分法表示四种物品：苹果、乒乓球、书、篮球的相似程度，完全相似为“1”，完成不相似为“0”，其余按相似程度在0，1中给出一个数u,这样，就得到一个模糊关系R，所得到的模糊矩阵为：(),0,1, ,1

21、,2,ijn nijRrri jnX1 X2 X3 X4 X1 X2 X3 X4 R1 0.7 0 0.70.7 1 0 0.90 0 1 00.7 0.9 0 1 模糊关系：模糊关系：109 . 07 . 001009 . 0017 . 07 . 007 . 01R模糊矩阵：模糊矩阵： 4 模糊评价的数学模型（运算） 模糊评判B=AR=（b1, b2 ， ， bn ）是将权重模糊矩阵A与单因素评判矩阵R按模糊矩阵的合成的取大、取小取小运算（ ， ）来进行的。 模型1 M（ ， ），即： 模型2 M（， ），即：),2,1(),(1njrabijimij),2,1(),(1njrabijimi

22、j模型3 M（ ，+）。运算 为有上限1的求和即 x y=min(1,x+y).在该模型下， 记号 为对m个数在 运算下求和。模型4 M（， ）即： 各种综合评判模型，都能在各自的运算下给出一定的评判结果。+), 2 , 1(,)(, 1min1njrabmiijij+mi 1+),2, 1(, 1min1njrabmiijij1 因素集是影响评价对象的各指标因素组成的一个普通集合，一般可写成： U=u1, u2, um, ui(i=1,2, , m)代表各指标因素，通常具有不同程度的模糊性。2（因素）权重集为反映各指标因素的重要程度，对各因素ui赋予一相应的权数ai，各权数组成的集合为A=(

23、a1, a2, am)或写成A= a1 / u1 + a2 / u2 + + am / um3 评价集是评价者对评判对象可能作出的各种总的评判结果所组成的集合，一般写成：V=v1, v2, , vn， vj (j=1,2, ,n)代表各种可能的评判结果（评判等级）。二、模糊综合评判二、模糊综合评判 4 单因素模糊评价分别从一个因素出发进行评价，以确定评判对象对评价集各元素的隶属程度。 设对评价对象的ui因素进行评价，对评价集中第j个元素vj的隶属程度为rij，则按ui评判的结果为一模糊集，记为： R=(ri1, ri2, , rin), 或记为： R=(ri1 /v1, ri2 /v2, ，

24、rin /vn) (i=1,2, ,m) 从m个因素入手，得单因素评判矩阵 R=Ri=mnmmnnrrrrrrrrr2122221112115 模糊综合评判综合考虑所有因素的影响，得出正确的评判结果。 从R中可知， R的第j列，反映的是因素集中各因素取第j个评价元素评价时，影响评判对象的程度。所以，将(rij)作用以相应的权数ai便能合理地反映所有因素的综合影响。 综合评价：B=AR=(a1,a2,am) =(b1,b2, ,bm)mnmmnnrrrrrrrrr212222111211 6 评价指标的处理 1）最大隶属度法：取与最大的评判指标maxbj相对应评价元素VL作为评价结果。 2）加权

25、平均法： （这里Vj必须量化） 3）模糊分布法：直接把评判指标作为评判结果，或归一化后，作为评判结果。njjnjjjbvbV11maxjLLbvVV1因素集：U=清楚易懂，教材熟练，生动有趣，板书整洁2 因素权重集：A=（0.5,0.2,0.2,0.1),st:3 评价集：V=很好，较好，一般，不好4 单因素模糊评价：就清楚易懂因素考虑，全班有40%的同学认为“很好”，50%的同学认为“较好”， 10%的同学认为“一般”，所以，得该因素的评判集： R1=(0.4,0.5,0.1,0) 同理得：R2=(0.4,0.3,0.2, 0.1) R3=(0.1,0.2,0.6,0.1) R4=(0.1,

26、0.2,0.5,0.2)教学质量评价模型的建立和求解教学质量评价模型的建立和求解110iiaa 该老师的模糊评判矩阵 R= 5 模糊综合评判 B=AR=(0.5,0.2,0.2,0.1) M（，） =(0.4,0.5,0.2,0.1)2 .05 .02 .01 .01 .06 .02 .01 .01 .02 .03 .04 .001 .05 .04 .02 .05 .02 .01 .01 .06 .02 .01 .01 .02 .03 .04 .001 .05 .04 .0 6 指标处理1）最大隶属度法：2）评价集：Vj=(1.0,0.7,0.4,0.1) 或将模糊综合评价值转换为一个确定的标

27、量值：E=BVT =(0.4,0.5,0.2,0.1)(1,0.7,0.4,0.1)T=0.841m ax0.5LLjLLVVvbVvV1110 .7(0 .4 , 0 .5 , 0 .2 , 0 .1)/ 1 .20 .7 00 .40 .1njjjnjjb vVb多级模糊评判多级模糊评判性能有效利用性经济性生产率工艺性工效性环保性可靠性维修性设置费设备选型UUUUu1u2u3u4u5u6u7多因素两层次评价系统1确定设备选择的综合评价的因素集及层次确定设备选择的综合评价的因素集及层次因素集：U=u1 u2 u3 u4 u5 u6 u7 层次二：U=U， U ， U层次一：U =u1 u2

28、u3 u4 ； U =u5 u6 ； U =u72建立权重集建立权重集二级因素权重集 A=（0.5,0.3,0.2）一级因素权重集 A=（0.5,0.3,0.1,0.1）； A =（0.4,0.6）；A=13建立评价集建立评价集V=优，良，合格，不合格4一级模糊综合评价一级模糊综合评价（1）确定第一层次的单因素评价矩阵02.04.04.01.02.05.02.01.02.03.04.003.05.02.002 . 03 . 05 . 01 . 01 . 04 . 04 . 00,2.0,5.0, 3.0B=B=B=（2）第一层次的模糊综合评价集：选模型B=AR=(0.5,0.3,0.1,0.1

29、)=(0.28,0.43,0.25,0.04)B = AR =(0.4,0.6)=(0.46,0.34,0.16,0.04)B=(0.3,0.5,0.2,0),2, 1(, 1min1njrabmiijij02.04.04.01.02.05.02.01.02.03.04.003.05.02.002 . 03 . 05 . 01 . 01 . 04 . 04 . 05二级模糊综合评价二级模糊综合评价 二级模糊综合评价时的单因素评价矩阵，应为一级模糊综合评价矩阵。B=A R=(0.5,0.3,0.2)=(0.338,0.47,0.213,0.032) 以上即为某（一台）设备选择方案的综合以上即为某

30、（一台）设备选择方案的综合评价结果。评价结果。BBBR020. 050. 030. 004. 016. 034. 046. 004. 025. 043. 028. 0第五节第五节 层次分析法层次分析法 层次分析法是一种实用的多准则决策方法，层次分析法是一种实用的多准则决策方法，它把一个复杂问题表示为有序的递阶层次它把一个复杂问题表示为有序的递阶层次结构，通过人们的判断对决策方案的优劣结构，通过人们的判断对决策方案的优劣进行排序。这是一种将定性分析和定量分进行排序。这是一种将定性分析和定量分析相结合的评价决策方法，特别适合于社析相结合的评价决策方法，特别适合于社会经济系统问题的决策分析。会经济系

31、统问题的决策分析。应用层次分析法的步骤应用层次分析法的步骤一、明确问题一、明确问题 明确问题的范围、提出的具体要求、包含明确问题的范围、提出的具体要求、包含的要素以及各要素之间的关系，这样就可的要素以及各要素之间的关系，这样就可以明确要解决什么问题，需要的情报资料以明确要解决什么问题，需要的情报资料是否已经满足需要。是否已经满足需要。 二、建立多级递阶层次结构二、建立多级递阶层次结构第一级第一级目标目标目标层目标层第二级第二级准则准则1准则准则2准则准则m准则层准则层第三级第三级方案方案1方案方案2方案方案n方案层方案层递阶层次结构递阶层次结构三、构造两两比较判断矩阵三、构造两两比较判断矩阵1

32、.判断矩阵判断矩阵 2.2.判断尺度判断尺度示例示例投资问题的判断矩阵投资问题的判断矩阵四、相对重要度计算四、相对重要度计算 在建立了判断矩阵后，要根据判断矩阵计算对在建立了判断矩阵后，要根据判断矩阵计算对上一级某一要素本级与之有联系的要素相对重上一级某一要素本级与之有联系的要素相对重要性次序的权值。即进行层次单排序。它是对要性次序的权值。即进行层次单排序。它是对层次所有要素相对最高层次而言的重要性进行层次所有要素相对最高层次而言的重要性进行排序的基础。排序的基础。 对判断矩阵先求出最大特征根，然后在求其相对判断矩阵先求出最大特征根，然后在求其相对应的特征向量对应的特征向量W W，即，即 WB

33、Wmax其中其中W W的分量就是对应于的分量就是对应于n n个要素的相对重要度，即权重个要素的相对重要度，即权重系数。系数。 和积法和积法 对对B B按列规范化按列规范化 再按行相加得和数再按行相加得和数 再进行归一化处理，再进行归一化处理，即得权重系数即得权重系数 niijijijbbb1winjijibw1winiiiiwww1方根法方根法 对对B B按行元素求积，按行元素求积，再求再求1/n1/n次幂。次幂。 归一化处理，即得归一化处理，即得权重系数权重系数 winnjijiaw1niiiiwww1示例示例14/12/13/1413323/112/133/121B100. 0130. 0

34、077. 0069. 0400. 0522. 0462. 0621. 0200. 0174. 0154. 0103. 0300. 0174. 0308. 0207. 0376. 0005. 2631. 0989. 009. 050. 016. 024. 0452. 0449. 2760. 0189. 109. 050. 016. 024. 0相容性分析相容性分析相容性分析（一致性检验）如果出现“甲比乙极其重要，乙比丙极其重要，而丙又比甲极其重要”，则一般是违反常识的。所以需对判断矩阵作一致性检验（相容性分析）。步骤如下：1.计算一致性指标C.I.（consistency index）2. 查表

35、得相应的平均随机一致性指标R.I.（random index） （一般教科书上有该表）3. 计算一致性比例C.R.（consistency ratio） 当C.R.0.1,则认为判断矩阵的一致性是可以接受的；否则需要重新修正判断矩阵。1.maxnnIC.IRICRC查表得，n=3时，RI=0.58, 则CR=0.004/0.58=0.00690.1。所以，判断矩阵可以接受。五、综合重要性计算五、综合重要性计算 在计算了各级要素相对于上一级要素的相在计算了各级要素相对于上一级要素的相对重要性以后，即可从最上级开始，自上对重要性以后，即可从最上级开始，自上而下地求出各级上各要素关于系统总体的而下地

36、求出各级上各要素关于系统总体的综合重要度。综合重要度。综合重要度的计算综合重要度的计算AAAm21aaam21BBBn21bbbbbbbbbmnnnmm212221212111miijijbab1aIBj bj投资问题的层次分析法应用示例 三个投资方案：三个投资方案： 家用电器家用电器 紧俏产品紧俏产品 传统产品传统产品 评价指标评价指标 风险程度风险程度 资金利润率资金利润率 转产难易程度转产难易程度层次结构模型层次结构模型某城市能源系统改造方案的决策某城市能源系统改造方案的决策max3.03850.01980.580.0332CIRICR综合应用综合应用 本例题是德尔菲法、本例题是德尔菲法

37、、AHPAHP及模糊综合评价法及模糊综合评价法的综合应用解决实际问题。的综合应用解决实际问题。 问题的背景问题的背景 在在“九五九五”期间，某国防预研项目管理部期间，某国防预研项目管理部门收到四个预研项目的立项申请，这四个门收到四个预研项目的立项申请，这四个项目为项目为A A1 1、A A2 2、A A3 3、A A4 4，需要对这四个课题进需要对这四个课题进行立项评价，试综合应用系统评价理论与行立项评价，试综合应用系统评价理论与方法进行科学的评价决策。方法进行科学的评价决策。 综合应用综合应用 对项目的立项评价，评价项目（指标）中对项目的立项评价，评价项目（指标）中有许多定性因素、模糊不确定

38、性因素，因有许多定性因素、模糊不确定性因素，因此采用模糊综合评价法此采用模糊综合评价法 对于评价项目（指标）权重的确定采用对于评价项目（指标）权重的确定采用AHPAHP 对于评价项目（指标）集的建立确定采用对于评价项目（指标）集的建立确定采用德尔菲法德尔菲法专家小组的成立专家小组的成立 选准评价专家组是做好评价工作的关键。根据项目的选准评价专家组是做好评价工作的关键。根据项目的研究内容，邀请从事预先研究工作、学术造诣较高、研究内容，邀请从事预先研究工作、学术造诣较高、学术思想活跃、熟悉被评项目学科领域的国内外发展学术思想活跃、熟悉被评项目学科领域的国内外发展情况、有评议分析能力、学风严谨、办事

39、公正的学术情况、有评议分析能力、学风严谨、办事公正的学术专家和邀请管理或熟悉该专业领域的项目管理专家专家和邀请管理或熟悉该专业领域的项目管理专家9 9人人组成评价小组。组成评价小组。学术专家和管理专家的比例建议学术专家和管理专家的比例建议为为6:4，专家数量一般为，专家数量一般为815人，但不得少于人，但不得少于5人。人。 在确定专家时既考虑了学术专家和管理专家的比例，在确定专家时既考虑了学术专家和管理专家的比例，专家成员的群体结构，专业对口，又考虑了知识的覆专家成员的群体结构，专业对口，又考虑了知识的覆盖面和不同的学术观点、不同单位的代表；同时为了盖面和不同的学术观点、不同单位的代表；同时为

40、了保证评价的公正性，评价组在听取被评价人答辨后，保证评价的公正性，评价组在听取被评价人答辨后，以背对背方式进行评判、打分。以背对背方式进行评判、打分。本例中，从相关领域本例中，从相关领域邀请了邀请了9名专家组成评价小组。名专家组成评价小组。评价指标体系的确定评价指标体系的确定 按照全面性与科学性、定量分析与定性分按照全面性与科学性、定量分析与定性分析相结合、可行性与可操作性、灵活性与析相结合、可行性与可操作性、灵活性与目标导向性的原则，综合考虑各方面因素目标导向性的原则，综合考虑各方面因素的影响，运用德菲尔法，经过专家们的影响，运用德菲尔法，经过专家们4 4轮调轮调查讨论，确定了预研项目立项评

41、价指标体查讨论，确定了预研项目立项评价指标体系，如图所示。系，如图所示。 评价指标体系评价指标体系课题课题A1经费合理性经费合理性B4成果可行性成果可行性B3选题必要性选题必要性B1条件可能性条件可能性B2技技术术潜潜力力及及创创新新8软软硬硬件件支支撑撑7申申请请者者研研究究基基础础6合合作作者者研研究究基基础础5研研究究方方案案风风险险预预测测4关关键键技技术术3战战略略需需求求2经经费费预预算算10人人才才培培养养9评价指标的评价标准评价指标的评价标准 在确定了评价指标体系后，还需要确定指标体在确定了评价指标体系后，还需要确定指标体系中各评价指标的评价标准。按照科学性、合系中各评价指标的

42、评价标准。按照科学性、合理性以及符合人们判断的逻辑思维习惯的原则，理性以及符合人们判断的逻辑思维习惯的原则，将评价标准分为将评价标准分为5 5个等级：非常必要个等级：非常必要0.90.9，很必，很必要要0.70.7，必要，必要0.5,0.5,一般一般0.30.3，不太必要的，不太必要的0.10.1。在评价指标体系中，对于定量指标，通过规定在评价指标体系中，对于定量指标，通过规定的参数数值直接进行量化考核，而那些无法直的参数数值直接进行量化考核，而那些无法直接定量考核与评价的定性指标，运用德尔菲法，接定量考核与评价的定性指标，运用德尔菲法，通过通过4 4轮的调查研究，利用心理学测试原理，轮的调查

43、研究，利用心理学测试原理，对这些指标进行量化处理，确定出了相应的评对这些指标进行量化处理，确定出了相应的评价标准。价标准。 指标权重的确定指标权重的确定 权重也称权数或加权系数，它体现了各项权重也称权数或加权系数，它体现了各项指标的相对重要程度。本次评价采用层次指标的相对重要程度。本次评价采用层次分析法，经过分析法，经过3 3轮专家调查，对于项目轮专家调查，对于项目A A1 1构构造的各级判断矩阵。造的各级判断矩阵。指标权重的确定指标权重的确定 计算其相对重要度并进行一次性检验。计算其相对重要度并进行一次性检验。 计算综合权重计算综合权重 综合评价综合评价 9 9名专家对项目名专家对项目A A1 1的的C C层指标做出各级评价的层指标做出各级评价的人数统计人数统计 项目项目A A1 1的隶属度矩阵的隶属度矩阵R R 项目项目A A1 1的综合评定向量的综合评定向量S S1 1 项目项目A A1 1的优先度的优先度N N1 1 同理，完成其它三个项目的优先度同理，完成其它三个项目的优先度 最后，进行优等度的比较。最后，进行优等度的比较。 见例题分析见例题分析