培训讲稿-绩效评价工作流程及操作

绩效评价培训绩效评价工作流程及具体操作介绍省财政厅绩效管理处徐海涛二〇一〇年八月●第一部分：绩效评价工作流程●第二部分：中介机构和专家参与评价●第三部分：本次绩效评价有关共性指标和表式1.概念：绩效评价是指部门(单位)根据设定的绩效目标,运用科学、合理的评价方法，设置、选择合适的评价指标和评价标准，对财政支出全过程及其实施效果进行客观公正的综合评判。2.要素：主体、客体、内容、依据、方法、指标、标准，核心要素是评价的指标和标准。①主体：绩效评价的主体是部门和单位，而不仅仅是财政部门。部门和单位是使用财政资金的主体,因而也是绩效评价的主体。第一部分：绩效评价具体操作流程②客体：各项财政资金，即纳入预算管理的财政性资金，包括预算内、预算外及其他资金。另外，可对相关财政政策、资产实施评价。③内容：财政支出全过程及其实施效果。④依据：绩效目标等。⑤方法、指标、标准:将在后面详述。⑥评价结果:评价报告是评价结果的集中体现。第一部分：绩效评价具体操作流程第一部分：绩效评价具体操作流程（一）前期准备阶段1.确定评价对象2.成立评价工作组3.确定评价机构4.制订评价方案5.下达评价通知（二）实施评价阶段6.资料收集与审核第一部分：绩效评价具体操作流程7.现场和非现场评价8.综合评价（三）撰写报告阶段9.撰写报告10.提交报告（四）结果应用阶段11.结果反馈12.预算应用一、确定评价对象评价对象：目前，主要侧重于项目(专项)支出的绩效评价，并积极探索对部门（单位）整体财政支出和相关财政政策、资产开展评价。项目支出评价范围：①部门（单位）自评:根据《江苏省省级财政项目支出绩效评价暂行办法》（苏财绩[2008]59号）规定实施。一、确定评价对象对委托中介机构进行评价的，按照《江苏省财政厅关于规范中介机构参与省级财政项目支出绩效评价工作的管理办法（试行）》的有关规定执行。②财政部门组织评价:一是支出重点领域，特别是民生项目；二是政府或人大关注的项目；三是相关文件明确要评价的项目。关键：点面结合推进评价实施，把评价重点放在经常性和阶段性项目上。二、成立评价工作组1.成立评价工作组：确定评价对象后，应成立评价工作组。评价工作组成员应紧紧围绕评价项目选取。2.评价工作组职责：负责整个评价工作的组织指导：确定评价机构、制订或审定评价方案、审核评价报告等。三、确定评价机构评价机构三种形式：1.中介机构：具有相应资质并在省级绩效评价中介机构库中的机构，中介机构也可组织专家组开展评价。2.部门（单位）评价组：由部门、单位内部相关专业人员组成的评价组。3.财政评价组:由财政部门内部相关专业人员、有关专家组成的评价组。四、制订评价方案（总）前提：充分了解评价项目有关情况，做好方案设计准备工作：1、收集查阅与评价项目有关的政策，如专项资金管理办法2、听取部门和项目单位情况介绍3、深入项目单位实地了解项目实施具体情况制订评价方案：由评价机构拟定具体评价方案，主要内容有：评价对象、评价目的、评价依据、评价指标、评价标准、评价方法、工作时间安排等。方案设计后，需征求评价工作组意见，并根据意见完善评价方案。四、制订评价方案（总）设计评价方案主要内容：（一）评价依据（二）评价方法*（三）评价指标*（四）评价标准（五）权重设置（六）组织实施：（七）时间安排（八）相关附表：制订评价方案-评价依据评价依据：1.与评价项目有关的法律、法规和制度，以及项目立项申报有关资料，如项目预算申报书、可研报告、验收报告等。2.绩效目标：是部门（单位）使用财政资金计划在一定期限内达到的产出和效果，是预算编制和绩效评价的重要依据，一般以量化的数值或比率表示。制订评价方案-评价方法(1)评价方法：在具体实施财政支出评价过程中应该采用的具体工具和方法，实施评价的过程是各种方法的交叉、综合使用的过程。1.目标比较法：指通过对财政支出产生的实际效果与预定目标的比较，分析完成目标或未完成目标的原因，从而评价绩效的方法。是我们目前采用的最主要方法之一。制订评价方案-评价方法(1)2.成本效益法：又称投入产出法，是将一定时期内的支出所产生的效益与付出的成本进行对比分析，从而评价绩效的方法。该方法适用于成本和收益都能准确计量的财政支出评价，一般情况下，以社会效益为主的支出项目不宜采用此方法。制订评价方案-评价方法(2)3.历史比较法：指将相同或类似的财政支出在不同时期的支出效果进行比较，分析判断绩效的评价方法。通过将历史数据进行对比分析，既可以看出其发展趋势，也可以了解各种因素在不同时期的影响，进而分析其效益差异的成因及改进方向。制订评价方案-评价方法(2)4.横向比较法：指通过对相同或类似的财政支出在不同地区或不同部门、单位间的支出效果进行比较，分析判断绩效的评价方法。制订评价方案-评价方法(3)5.专家评议法：指通过邀请相关领域的专家进行评议，得出评价结果的方法。对专业性强，难以直接用量化指标计量其效益的支出项目，可以聘请相关专家参与评价；专家在通过实地勘察、查看项目资料，充分了解掌握项目情况后，根据自己的专业判断，给相应的指标计分。制订评价方案-评价方法(3)6.问卷调查法：又称公众评判法，指通过设计不同形式的调查问卷，在一定范围内发放，收集、分析调查问卷，进行评价和判断的方法。具有民主性、公开性的特点，在一些公共服务、公共投资项目上可设置目标群体满意度或公众满意度指标来评价绩效。*制订评价方案-评价指标评价指标：是财政支出绩效评价的内容的直接反映，是财政支出绩效评价工作的载体，是衡量、监测和评价财政支出的经济性、效率性和有效性的量化手段。设置科学合理、简便易行的评价指标对财政支出绩效评价工作至关重要。本节主要内容：1.绩效评价的基本内容；2.绩效评价指标体系；制订评价方案-评价指标-内容绩效评价的基本内容：1.绩效目标的设定与完成程度；2.项目组织实施管理水平；3.项目实施所取得的经济效益、社会效益和生态环境效益等；4.项目支出合法合规性,包括财政资金使用情况、财务管理状况、资产配置与使用情况等；制订评价方案-评价指标-内容绩效评价指标是评价内容的具体体现，评价内容是指标设置的基本依据。它体现了评价主体的评价目的,体现了评价主体对绩效的追求,同时对评价客体行为产生影响。制订评价方案-评价指标绩效评价指标体系框架：各类项目评价既有共同点（共性指标），又有不同点（个性指标）：一方面，针对项目支出的共同点，对绩效评价基本内容中的共性指标进行细化和分设(本次是统一的)；制订评价方案-评价指标绩效评价指标体系框架：另一方面，针对项目支出的不同点，各类支出项目的实施绩效存在较大差异，将基本内容中的项目实施效益指标作为个性指标，根据项目实际分别设置；共性和个性又是相对的。例如：…制订评价方案-评价标准(1)评价标准：是财政支出绩效评价体系的核心要素之一，是对每项评价指标如何进行评分的标准，是评价工作的基本准绳和标尺，是最后进行评价计分的依据,它决定了评价目标能否实现以及评价结果是否公平准确。制订评价方案-评价标准(1)评价标准的基本类型：目前财政支出的评价标准一般有行业标准、计划标准、历史标准、经验标准四种。在利用这些标准时，有的是定量标准，有的是定性标准。实际评价中具体选用哪种标准，主要根据评价的目的、对象的特点、评价的环境、信息采集、技术标准的适应范围等条件来确定。制订评价方案-评价标准(2)定量标准与定性标准：1.定量标准：通常是建立在数据资料及有关统计信息的基础上，综合运用统计学的方法，对标准值进行测定。目前使用中更多的定量标准是计划数。2.定性标准：是定性指标进行综合分析判断的客观参照，在绩效评价中，许多指标，尤其是许多效果指标都难以量化，所以定性指标和标准在绩效评价中的作用是不可或缺的。制订评价方案-评价标准(2)3.没有标准怎么办?要根据具体项目实际情况确定。在目前实践中，标准的主要来源有：一是有关政策规定、分配的任务和预定绩效目标；二是将标准分为优秀、良好、中等、差四档，由专家直接判断；三是对相关数据汇总后计算平均值，均值以上为优秀或良好；均值以下为中等或差。制订评价方案-指标权重和标准分值设置一、指标权重设置：自上而下按指标层次分步确定权重，即先明确一级指标的权重，再明确二级指标的权重，后明确三级指标的权重。指标权重设置依据：1、评价指标对项目评价的重要程度2、项目管理(资金管理)需要本次评价已将一级指标权重明确，具体见评价报告表。制订评价方案-指标权重和标准分值设置二、标准分值设置：对每个指标不同标准分值的确定，本次评价已对资金管理使用和项目组织实施情况等共性指标明确分值。对个性指标，自评价项目由主管部门自定，重点评价项目在召开指标论证会后再设定。制订评价方案-财政政策评价财政政策评价主要可分为两种：第一种是涉及支出的政策评价，可与项目评价相结合，通过评价完善政策和项目；第二种是不涉及支出的政策评价，主要是对政策执行情况的评价，通过评价进一步完善政策。政策评价与项目评价密切相关，但各有侧重。政策评价是通过对政策执行情况的评价来完善制度，使制度更加符合实际。项目评价是依据政策，通过实际与政策的对比来改进项目实施，使项目更加符合政策。制订评价方案-财政政策评价在实施政策评价时，对不涉及财政支出的，相关财务指标可以不设。涉及财政支出的，评价指标与项目评价基本一致。另外还有资产绩效评价，今后有机会再讲。五、下达评价通知评价通知：是评价工作组(委托人)出具的行政文书，也是评价对象接受评价的依据。评价通知主要内容有：评价项目、评价实施、评价内容、评价指标和标准、评价时间安排和有关要求等事项。评价通知是评价方案的集中体现。五、下达评价通知评价通知是前期准备工作的一个总结，也是实施评价的一个基本依据，后面的评价工作要按照评价通知来实施。评价通知除下达评价指标、标准外，还要下发相关的统计表，包括目标完成情况表和资金使用情况表，以及绩效满意度调查表等。六、资料收集与审核收集基础资料：评价机构根据评价工作要求，到项目现场采取勘查、问询、复核等多种方式收集基础资料，包括项目实施基本情况、财政资金使用情况等各项数据资料。关键在于要始终围绕评价指标来收集资料，以利于评价打分。六、资料收集与审核具体收集资料方式有：1.听取介绍：听取被评价单位对评价项目的目标设定及完成程度、组织管理情况、资金落实及使用、财务管理状况、资产配置与使用、产生的效益(包括经济效益、社会效益、生态环境效益)等情况的汇报。评价人员对有关疑难问题作进一步明确和核实。六、资料收集与审核2.实地勘察：评价机构深入被评价单位，对评价对象的建设情况、管理制度建立情况、资金的使用情况等进行实地检查和和核实。这是确保评价结果真实的前提。六、资料收集与审核3.问卷调查：发放问卷调查是确保有关定性指标真实、准确的基础，由评价人员亲自发放和收回，不得经由评价客体内部人员间接发放或收回。问卷调查表的发放范围和数量由评价机构根据评价工作的实际情况确定。评价机构根据收集的基础资料，核实确认基础数据的全面性、真实性，以及指标口径的一致性。七、现场评价和非现场评价现场评价是指评价人员到项目现场采取勘察、询查、复核等方式，对有关情况进行核实，对所掌握的有关资料进行分类、整理和分析，提出评价意见。非现场评价是指评价人员在对被评价项目单位提供的有关资料进行分类、整理和分析的基础上，提出评价意见。八、综合评价评价机构在现场与非现场评价的基础上，对照评价指标与标准，对项目绩效情况进行综合性评判。评价资料分析：通过分析相关评价资料，使所有评价人员充分了解项目绩效情况，并掌握评价指标和标准。评价人员打分：评价人员对照评价指标和标准进行评分，每位评价人员对评价结果要签名，以明确责任，确保评价结果的独立、客观和公正。八、综合评价形成评价结论：评价结论主要体现在评价等次、问题与建议等方面。根据每位评价人员的打分，利用算术平均法计算出评价综