指标体系的构建

第4章辽宁现代海事监管效果评价指标体系4.1指标选取原则(l)全面性原则为体现海事危防工作指标体系的全面性、完整性，选择指标包括静态监管指标、动态监管指标、综合监管指标、潜力指标。(2)整体性原则(3)科学性原则具体指标的选取要有科学依据，指标应目的明确、定义准确。规范定量指标的计算及其涵义，规范资料数据来源。同时所运用的计算方法和模型也必须科学规范，这样才能保证评价结果的真实和客观。(4)简明性原则从理论上讲，指标越多越细越全面，反映客观现实也越准确。但是，随着指标量的增加，带来的数据收集和加工处理的工作量将成倍增长，而且，指标分得过细，难免发生指标与指标的重叠，相关性严重，甚至相互对立的现象，这反而给综合评价带来不便。(5)可操作性原则在各指标子系统中，存在较多难以定量、精确计算或获取的数据。因此，在构建评价指标体系时，应挑选一些易于计算、容易取得并且能够在要求水平上很好地反映危防主管部门执法实际情况的指标，使得所构建的指标体系具有较强的可操作性。(6)动态性原则发展是一个动态过程，对于同一个区域，不同时期预示着不同的发展阶段。区域发展的目标、发展模式、为达到目标而采取的手段均不相同，指标体系的过程中侧重点自然也不同。(7)稳定性原则指标体系的稳定性，可在特定的阶段对海事监管主管部门的发展进行可持续的衡量、评价和调控，从而使其发展更有利于向可持续标准的方向发展，避免出现区域发展中的短期行为4.2辽宁海事局现代监管效果评价指标来源及范围4.2.1指标来源“辽宁省海事监管效果评价指标体系”中指标选取及指标值设定以反映最新监管情况并兼顾指标选取原则，主要数据或指标来源：辽宁省海事局的监管职能、辽宁省海事局监管工作现状和2009年相关监管数据、辽宁省海事局“十一五”发展规划以及海事行政执法监督考核情况。4.2.2指标范围考虑到“海事处监管指标体系”主要目的是设定监管基本要求或标准，选取的指标体现实际监管工作内容，涵盖海事处所有执法职能，同时也涉及人力资源及硬件设备等方面的资源配置内容。4.3建立辽宁海事局监管指标集的递阶层次结构“辽宁省海事局现代监管效果评价体系”所选择的考核指标应能体现海事监管工作内容，并体现海事监管主管部门的管理能力。为体现海事监管工作指标体系的全面性、综合性，本论文结合海事监管工作的日常监管内容、行政执法程序，召开专家研讨会，遵循指标设置的原则，讨论并获取指标信息，进行目标分解。进行目标分解要注意把握以下几点:一是运用系统科学的原理，树立整体观念、层次观念和有序观念，用系统与要素及要素与要素之间的辩证关系来逐级分解目标;二是要深入分析评估对象的特征，突出那些反映评估对象本质的目标，舍去某些次要的要素，这样可以较好地简化目标系统;三是要划清系统的内部结构，确定组成系统诸要素在整体中处于何种地位、具有什么作用、占有多大比例、各有什么属性，使形成的目标系统层次合理，同级目标之间既互不重叠，又不存在因果关系。经目标分解形成一套由静态监管指标、动态监管指标、综合监管指标3类指标组成可选指标集。其中，静态监管指标、动态监管指标主要是从数量方面对海事危防工作的成果或履行职务的结果(业绩)进行的考核;综合监管指标主要是从质量、效率方面对海事主管部门业绩和能力的考核，这部分指标大多为软指标，软指标指的是需要通过人的主管判断而得出考核结果的考核指标;潜力指标则是根据海事危防主管部门的硬件配备、数字化能力、人才实力等方面考察其发展能力，将潜力转变为现实的工作能力。海事直属机构危防主管部门的工作重点在于综合监管和潜力发展。(l)静态监管指标体现海事监管的基本工作，能够反映海事主管部门履行其基本职能表现出来的绩效。(2)动态监管指标(3)综合监管指标在综合静态工作和动态动作内容的基础上考察危防主管部门的工作效能。综合监管指标可以对比预期目标，更好的激励部门成员，并且有重点的提高组织效能。重点考察工作的效率、质量，正确、科学行使职能，发挥工作主动性(4)潜力指标潜力指标是静态、动态监管工作的基础，实现综合监管能力和海事监管工作可持续发展的保证。设备、专业人才、数字科技等是建设信息化海事的磐石。坚持内部评估与外部评估相结合，形成多层次的评估体系，将管理和服务对象纳入绩效评估体系。(5)建立评价指标体系的递阶层次结构指标体系的建立采取目标法。目标法又叫分层法，首先确定研究对象发展的目标，即目标层，然后在目标层下建立一个或数个较为具体的分目标，称为准则(或类目指标)，准则层则由更为具体的指标(又叫项目指标)组成l50]。这种结构的优越性在于:层次分明，能够明确系统所要达到的总目标，及为达到总目标而设立的各个分层次目标;能够体现评价指标体系的整体性、系统性、相关性;易于进行量化评价。根据海事危防工作指标体系各评价指标所属类型，拟划分成不同的指标层次共三个层次:目标层(设为A)、准则层(设为B)和指标层(设为C)。目标层是结构模型的最高层次，或称为理想结果层，用于描述评价目的。本论文采用辽宁海事局现代监管效果作为目标层(A)。准则层(B)是由反映目标层的指标构成，由每个子系统的项目组成。由静态监管指标(B1)小动态监管指标(B2)、综合监管指标(B3)、潜力指标(B4)类指标组成。指标层(C)是结构模型的最低层，用来反映各准则层的具体内容。根据指标选取的全面性、整体性、科学性等原则，并结合考虑到海事监管工作的发展情况、发展方向以及各指标数据的可获得性，本文采用德尔菲法召开专家会议，进行分析和筛选形成直属海事局危防工作指标体系可选指标集，见表4一1。表4-1辽宁海事局现代监管效果评价指标体系可选指标集目标层（A）准则层(B)指标名称符号静态监管指标（B1）国际航行船舶进出口岸许可C1船舶航次签证C2船舶定期签证C3辽宁海事局现代监管效果评价指标体系（A1）船舶载运危险货物适装许可C4船舶防污作业许可C5签发《船舶残油接收处理证明》C6船舶在港区水域内安全作业报备管理C7动态监管指标（B2）水域巡航C8陆域巡查C9实际进行交通管制或现场维护警戒C10有效制止影响通航安全的捕捞、水上养殖、水上娱乐等活动C11对有碍航行安全的漂流物、碍航物等采取有效应急措施C12通报及跟踪解决助航标志存在隐患C13为申请护航或必须进行强制护航的船舶提供护航服务C14海上应急、抢险、搜救行动C15水上交通事故现场勘验调查取证C16船舶污染水域事故初步调查和取证C17日常性船舶检查C18船舶安全检查C19重点跟踪船舶安全检查C20协查船舶C21船舶检查中发现船舶违法的比率C22船舶违法的查处率C23集装箱开箱检查C24船舶港区安全作业报备、防污作业许可、水工作业许可项目现场检查到位度C25行政许可类项目现场勘验C26水上水下施工作业海巡艇监护C27渡口及客运码头监管C28综合指标（B3）行政处罚C29行政强制C30船员违法记分C31发出海事建议书C32水上交通事故调查处理C33海事签证C34船舶污染水域事故调查处理C35事故隐患跟踪落实C36乡镇船舶专访联系C37船舶港务费征收完成率C38业务软件系统正常使用度C39业务统计报表完好度C40岗位职责明晰度及业务运行机制有效度C41海事监管专项工作完成度C42解决执法难点问题能力C43重大海事执法责任C44潜力指标（B4）海事监管设备的配备C45海事监管专业队伍C46监管软件利用率C47专职监管人员占总人数的比例C484.4德尔菲法构建辽宁省现代海事监管效果评价指标体系本论文采用德尔菲法进行辽宁省海事局现代监管效果评价指标体系的构建，具体实施步骤见图4一1。图4-1用德尔菲法构建辽宁省海事局现代监管效果评价指标体系4.4.1专家问卷调查概况根据海事危防工作可选指标集进行专家问卷设计进行发放，专家问卷及指标说明材料分别见附录一和附录二。成立专家小组（根据调查的内容确定专家组、为体现指标的全面性，覆盖整个辽宁省海事组织及社会团体）发放专家调查问卷及背景材料回收材料并进行统计分析层次分析法数理统计法调查内容反馈供专家修改意见综合处理二次问卷结果写作思路利用德尔菲法构建辽宁省现代海事监管效果评价指标体系，采用层次分析法、数理统计方法中的简单平均法和频数统计法确定指标权重，并对辽宁省现代海事监管效果评价指标体系的科学合理性进行了分析。构建的指标体系合理科学，能够体现辽宁省现代海事监管的主要内容，可作为辽宁省海事局进行海事监管考核的参考依据。以辽宁省海事局2009年监管工作为案例，运用模糊数学综合评价法对案例直属海事局的2009年的工作绩效做出评价，将辽宁省海事局的工作绩效分为优、良、差3个等级，根据评价结果，结合国内外现代海事监管效果明显的先例以及自身在还是监管方面的缺点，探讨案例辽宁现代海事监管工作质量、工作效果和发展能力，提出辽宁省海事监管的改进建议和调整方向。附录一“辽宁省现代海事监管效果评价指标体系”选择与赋权专家问卷调查表声明1.本专家问卷调查旨在是为“辽宁省现代海事监管效果评价指标体系”课题组提供确定指标体系和各指标权重的依据和参考建议;2.本次调查数据仅作为科学研究之用，并且给予严格的保密;3.为保证调查的质量，我们将可能针对问卷内容与您反馈交流，请您留下联系方式。受访专家所在单位联系电话“辽宁省现代海事监管效果评价体系研究”课题小组联系电话:[phone]E-mail:[e-mail]附录一专家问卷调查表填表说明尊敬的女士/先生:您好!非常感谢您在百忙之中接受我们的访问。本次调查希望您能为“辽宁省现代海事监管效果评价指标体系”的指标选取及指标权重提供宝贵的意见。非常感谢您协助我们完成本次调研工作，为了帮助您顺利完成本问卷，现对问卷相关内容做如下说明:一、经课题组初步讨论形成“辽宁省现代海事监管效果评价指标体系”，将指标分为静态监管指标、动态监管指标、综合监管指标、潜力指标4类，分别见表1一表4，对各指标的详细说明可见附录。二、在表格“选择”栏中为您认为可以选取的指标打“√”可在各表格空白栏上写上您认为需要增加的指标，并附上指标说明(包括指标定义及指标数据来源，定性指标请提出定量意见)和赋权。三、在表格“权重”栏为您所选择和增加的指标确定权重。赋权方法如下:赋值在0～1之间，数值越大，指标越重要，各列指标的赋权总分须等于1。表1辽宁海事局现代监管效果评价可选指标集—静态监管指标准则层（B）指标选择权重静态监管指标（B1）国际航行船舶进出口岸许可（C1）船舶航次签证(C2)船舶定期签证(C3)船舶载运危险货物适装许可(C4)船舶防污作业许可(C5)签发《船舶残油接收处理证明》(C6)船舶在港区水域内安全作业报备管理(C7)您认为应该增加的指标表2辽宁海事局现代监管效果评价可选指标集—动态监管指标准则层(B)指标选择权重动态监管指标（B2）水域巡航(C8)陆域巡查(C9)实际进行交通管制或现场维护警戒(C10)有效制止影响通航安全的捕捞、水上养殖、水上娱乐等活动(C11)对有碍航行安全的漂流物、碍航物等采取有效应急措施(C12)通报及跟踪解决助航标志存在隐患(C13)为申请护航或必须进行强制护航的船舶提供护航服务(C14)海上应急、抢险、搜救行动(C15)水上交通事故现场勘验调查取证(C16)船舶污染水域事故初步调查和取证(C17)日常性船舶检查(C18)船舶安全检查(C19)重点跟踪船舶安全检查(C20)协查船舶(C21)船舶检查中发现船舶违法的比率(C22)船舶违法的查处率(C23)集装箱开箱检查(C24)船舶港区安全作业报备、防污作业许可、水工作业许可项目现场检查到位度(C25)行政许可类项目现场勘验(C26)水上水下施工作业海巡艇监护(C27)渡口及客运码头监管(C28)您认为应该增加的指标表3辽宁海事局现代监管效果评价可选指标集—综合监管指标准则层(B)指标选择权重综合监管指标（B3）行政处罚(C29)行政强制(C30)船员违法记分(C31)发出海事建议书(C32)水上交通事故调查处理(C33)海事签证(C34)船舶污染水域事故调查处理(C35)事故隐患跟踪落实(C36