综合评价方法的研究现状评述

管理观察·2009年2月□张佳姜同强综合评价方法的研究现状评述摘要：（150～200字）综合评价方法又称为多变量综合评价方法、多指标综合评估技术。近年来，综合评价方法集中运用于热点问题、前沿问题的研究。本文研究了最近几年在国内学术期刊上对综合评价方面的探讨，试图从综合评价的应用领域，以及研究内容入手，深入探讨现阶段综合评价方法的研究现状及发展趋势，并提出一些有益的建议，希望对以后的研究者有所帮助，以提高我国在综合评价方法领域的整体研究水平。关键词：（3～5个）综合评价综合评价方法研究趋势（北京工商大学计算机与信息学院，北京100048）1.前言所谓综合评价[1](comprehensiveevaluation,CE)概指对以多属性体系结构描述的对象系统做出全局性、整体性的评价，即对评价对象的全体，根据所给的条件，采用一定的方法给每个评价对象赋予一个评价值(又称评价指数)，再据此择优或排序。综合评价方法又称为多变量综合评价方法、多指标综合评估技术。早在1888年，开现代科学评价之先河者艾奇沃斯(Edgeworth)在英国皇家统计学会的杂志上发表的论文“考试中的统计学”中，就已经提出了对考试中的不同部分应如何加权。1913年，斯皮尔曼(Spearman)发表了“和与差的相关性”一文，讨论了不同加权的作用，此文实际上已用了多元回归和典型分析。20世纪70-80年代，是现代科学评价蓬勃兴起的年代。在此期间，产生了多种应用广泛的评价方法，诸如ELECTRE法(1971-1977,1983)、多维偏好分析的线性规划法(简记LINMAP,1973)、层次分析法(简记AHP,1977)、数据包络分析法(简记DEA,1978)、逼近于理想解的排序方法(简记TOPSIS,1981)等。20世纪80-90年代，是现代科学评价在我国向纵深发展的年代，人们对评价理论、方法和应用开展了多方面、卓有成效的研究。目前对于综合评价的研究往往分为两类：一类是就综合评价指标的研究；另一类是对综合评价模型的研究。但是这种分类太过笼统，不能充分反映出现阶段对综合评价方法研究的现状与发展趋势。本文研究了最近几年在国内学术期刊上对综合评价方面的探讨，试图从综合评价的应用领域，以及研究内容入手，深入探讨现阶段综合评价方法的研究现状及发展趋势，分析国内在综合评价研究方面存在的不足，并提出一些有益的建议，希望对以后的研究者有所帮助，以提高我国在综合评价方法领域的整体研究水平。2.综合评价方法分类从总体上可将目前常用的综合评价方法分为以下几类[1,2]：专家评价法、经济分析法、运筹学和其它数学方法、智能化评价方法。2.1专家评价法这是一种以专家的主观判断为基础，通常以“分数”、“指数”、“序数”、“评语”等作为评价的标准；对评价对象做出总的评价的方法。常用的方法：评分法、分等方法、加权评分法及优序法等。这类方法由于比较简单，因而也得到了广泛的应用，如用于科研生产力评价、大学科研成果评价、城市环境综合整治与定量考核及企业经济效益的考核等。专家评价法属于定性评价法,其优点是不受统计数据的限制，可以发挥人的智慧和经验，可以避免和减少因统计数据不足或不精确而产生的片面性和局限性。缺点是评价中的随机因素影响较多，评价结果易受到评价人员主观意识的影响和经验、知识的局限，易带有个人偏见和片面性。2.2经济分析法这是一种以事先议定好的某个综合经济指标来评价不同对象的CE方法，常用的有:直接给出综合经济指标的计算公式或模型的方法、费用—效益分析（cost-benefitanalysis）法等。这类方法常用于新产品的开发、科技成果和经济效益的评价、区域经济不平衡发展的程度及投资项目的各种评价等。2.3运筹学和其它数学方法这类方法用到的数学知识更多一些，目前用得较多的有以下几类。1）多目标决策方法多目标决策（multiobjectivedecisionmaking,MODM）方法，这类综合评价本身有很多种方法，但大体上有以下几种[3]：1°化多为少法即通过多种汇总的方法将多目标化成一个综合目标来评价，最常用的有加权和方法、加权平方和方法、乘除法和目标规划法等；2°分层序列法即将所有目标按重要性次序排列，重要的先考虑；3°直接求所有非劣解的方法；4°重排次序法，例如ELECTRE法；5°对话方法等。MODM方法对评价对象描述比较精确,可以处理多决策者、多指标、动态的对象随着计算机的广泛应用，人工智能，知识工程和专家系统的飞速发展，决策支持系统(decisionsupportsystem,DSS)的研究与开发，与MODM的理论和方法一起有力地促进了管理决策科学化的进程。MODM方法现已在社会、经济和工程等领域得到了广泛的应用。2）数据包络分析方法数据包络分析(dataenvelopmentanalysis,DEA)方法和模型是1978年由美国A.Charnes和W.W.Cooper等人首先提出的，它用来评价多输入和多输出的“部门”(称为决策单元)的相对有效性。DEA方法可以看作是一种非参数的经济估计方法，实质是根据一组关于输入—输出的观察值来确定有效生产前沿面。DEA方法的应用领域也很广泛，可以用于多种方案之间的有效性评价、技术进步评估、规模报酬评价及企业效益评价等。3）层次分析法层次分析法(analytichierarchy综合管理MANAGEMENT154管理观察·2009年2月期刊名称论文数量/篇比例统计与决策商场现代化数学的实践与认识科技进步与对策中国卫生统计安徽农业科学商业研究科技管理研究情报杂志工业技术经济系统工程理论与实践计算机工程与应用情报科学铁道运输与经济北京体育大学学报电网技术东北大学学报(自然科学版)公路交通科技灌溉排水学报中国矿业水科学进展136424237373026222221151413131211111111111024.86%7.68%7.68%6.76%6.76%5.48%4.75%4.02%4.02%3.84%2.74%2.56%2.38%2.38%2.19%2.01%2.01%2.01%2.01%2.01%1.83%合计547100.00%表1综合评价论文的期刊分布情况process,AHP)是70年代由著名运筹学家T.L.Saaty提出的，它的基本原理[4]是根据具有递阶结构的目标、子目标(准则)、约束条件及部门等来评价方案，来用两两比较的方法确定判断矩阵，然后把判断矩阵的最大特征根相应的特征向量的分量作为相应的系数，最后综合出各方案各自的权重(优先程度)。该方法作为一种定性和定量相结合的工具，目前已在油价规划、教育计划、钢铁工业未来规划、效益成本决策、资源分配和冲突分析等方面得到了广泛的应用。4）模糊综合评价方法模糊综合评价(fuzzycomprehensiveevaluation,FCE)方法是对受多种因素影响的事物做出全面评价的一种十分有效的多因素决策方法，其特点是评价结果不是绝对地肯定或否定，而是以一个模糊集合来表示。由于模糊综合评价方法可以较好的解决综合评价中的模糊性（如事物类属之间的不清晰性，评价专家认识上的模糊行等），因而该方法的应用几乎涵盖了所有领域。5）灰色综合评价方法灰色系统理论是中国学者邓聚龙教授首先提出的，包括灰关联度评价方法、灰色聚类分析方法[5]等。灰色综合评价方法（graycomprehensiveevaluation）运用灰色系统理论对研究对象进行综合评价，主要工具是关联分析，及通过比较数列与参考数列的关联系数和相关度，来确定各种影响因素或备选方案的重要度，进而决定重要因素或最优方案。应用领域包括企业的经济效益评价、农业发展水平评估、国防竞争力测算、工程领域等。方法的优点是能够处理信息部分明确、部分不明确的灰色系统，所需的数据量不是很大，可以处理相关性大的系统。2.4数理统计方法数理统计方法主要是应用其中的主成分分析(principalcomponentanalysis)、因子分析(factoranalysis)、聚类分析(clusteranalysis)、判别分析(discriminantanalysis)[6,7]等方法对一些对象进行分类和评价等,该类方法在环境质量、经济效益的综合评价以及工业主体结构的选择等方面得到了应用。2.5智能化评价方法智能化评价方法[2]主要指基于BP人工神经网络的评价方法，模拟人脑智能化处理过程的人工神经网络技术，通过BP算法，学习或训练获取知识，并存储在神经元的权值中，通过联想把相关信息复现。能够“揣摩”“提炼”评价对象本身的客观规律，进行对相同属性评价对象的评价。由于基于BP人工神经网络的评价方法具有自适应能力、可容错性、能够处理非线形、非局域性与非凸性的大型复杂系统，因此被越来越广泛的应用于涉及银行贷款项目、股票价格的评估、城市发展综合水平的评价等。3.数据采集和研究方法3.1数据综述2004-2007年CNKI中国期刊全文数据库核心期刊共收录1805篇综合评价研究论文，其中收录十篇以上的期刊有21种，共计547篇；收录五篇以上的期刊有74种，共计473篇；收录五篇以下的期刊有322种，共计785篇。充分说明综合评价技术应用的广泛性，几乎涵盖了任何领域。正是由于综合评价技术应用的广泛性与灵活性，给究现综合评价技术的发展现状及趋势带来了一定的困难，因此本文选择综合评价类文章发表相对集中的核心期刊（收录十篇以上的期刊）《统计与决策》、《商场现代化》、《数学的实践与认识》、《科技进步与对策》、《中国卫生统计》、《安徽农业科学》、《商业研究》、《科技管理研究》、《情报杂志》、《工业技术经济》、《系统工程理论与实践》、《计算机工程与应用》、《情报科学》、《铁道运输与经济》、《北京体育大学学报》、《电网技术》、《东北大学学报(自然科学版)》、《公路交通科技》、《灌溉排水学报》、《中国矿业》、《水科学进展》进行研究。具体论文分布统计如表1、表2所示：3.2数据分析3.2.1总合评价应用领域分析理论上讲，综合评价方法可以应用在任何领域中，下面按照应用领域的不同进行统计来探讨现阶段综合评价方法的应用情况。在547篇关于综合评价的研究的文章里，不涉及领域的研究文章，仅有43篇，仅占论文总数的7.86%。综合评价应用最为广泛的十个领域为：企业管理，科教，商业竞争，农业，医药，交通，城市建设，水利，矿业，电力。3.2.2综合评价研究内容分析按照内容分类，可以大致将论文分成两类，一类是对具体的综合评价方法的研究，共计423篇，所占百分比为77.33%，另一研类是对综合评价的究现状及发展趋势进行讨论，共计124篇，所占百分比为22.67%。对于每种技术的研究都是相似的，首先对该种技术进行研究，再将该种技术引入某一领域，然后再扩展到其他相关领域，接下来总结该种技术的研究现状与发展趋势，通过上边两个数值，可以看出对于综合评价技术的研究已经比较深入，在对技术本身的研究的同时，已经年份论文数量/篇比例20042005200620077613214419513.89%24.13%26.33%35.65%合计547100.00%表22004-2007的综合评价论文数量应用领域论文数量/篇百分比企业管理科教商业竞争农业医药交通城市建设水利矿业电力其他无领域825757363628242414131334314.99%10.42%10.42%6.58%6.58%5.12%4.39%4.39%2.56%2.38%24.31%7.86%合计547100.00%表3综合评价应用领域分布MANAGEMENT综合管理155管理观察·2009年2月评价方法论文数量/篇百分比累计百分比模糊综合评价法灰色综合评价法层次分析法多目标分析法基于神经网络的综合评价法主成份分析法因子分析法多指标评价方法数据包络法多种评价方法的组合应用其他13834282222171498498232.62%8.04%6.62%5.20%5.20%4.02%3.31%2.13%1.89%11.58%19.39%32.62%8.04%6.62%5.20%5.20%