DB3303T 061-2023 数字化项目综合绩效评价指标体系

ICS35.240.01CCSL673303温州市地方标准DB3303/T061—2023数字化项目综合绩效评价指标体系Specificationforcomprehensiveperformanceevaluationofdigitalprojects2023-01-16发布2023-02-16实施温州市市场监督管理局发布学兔兔—2023I前言本文件按照GB/T1.1—2020《标准化工作导则第1部分：标准化文件的结构和起草规则》的规定起草。请注意本文件的某些内容可能涉及专利。本文件的发布机构不承担识别专利的责任。本文件由温州市大数据发展管理局提出及归口。本文件起草单位：温州市大数据发展管理局、温州大学、温州市财政局、中共温州市委网络安全和信息化委员会办公室、中共温州市委全面深化改革委员会办公室、温州市公安局、温州科技职业学院（温州市农业科学研究院）、浙江安防职业技术学院。本文件主要起草人：孙祥光、池邦芬、洪晓雪、蒋松青、王波、叶茜茜、胡良云、卫达、胡若瑶、卢恩国，梅娟、王乐标、李昌忠、刘振广、黄挺、王佳盈、柳剑、戴大蒙、胡国南、刘浩、陈秀平。学兔兔—20231数字化项目综合绩效评价指标体系1范围本文件规定了数字化项目综合绩效评价项目分类及指标体系的术语和定义、评价指标体系、指标说明和评分方法。本文件适用于温州市域内应用的数字化项目。2规范性引用文件下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中，注日期的引用文件，仅该日期对应的版本适用于本文件；不注日期的引用文件，其最新版本（包括所有的修改单）适用于本文件。GB/T22239-2019信息安全技术信息系统安全等级保护基本要求GB/T25069-2022信息安全技术术语3术语和定义GB/T25069-2022界定的术语和定义适用于本文件。4项目分类按项目性质分类如下：——多跨协同类项目，应用系统中各部门建设的至少具备跨层级、跨地域、跨系统、跨部门、跨业务等功能之一的重大应用及其子应用的数字化项目；——般业务类项目，应用系统中各部门建设的仅用于优化本部门内部业务管理的数字化项目；——基础设施类项目，应用系统中各部门建设的信息基础设施、安全保障设施、数据资源、应用支撑平台等设施。按项目应用侧分类如下：——治理类项目，应用系统中为各部门单位工作人员使用的数字化项目；——服务类项目，应用系统中为社会公众提供各类服务的数字化项目。5评价指标体系数字化项目综合绩效评价指标体系分别由过程管理、运维保障、网络安全、实战实效、数据供给、改革创新等6个一级指标，立项依据、建设方案、采购管理、系统运行情况、服务响应、安全建设、多跨协同、用户满意度、多跨贯通、成果创新等29个二级指标和项目重要性、系统可用性、安全保护规划设计、功能完成率、数据目录生产、标准规范、制度重塑等60个三级指标组成。数字化项目综合绩效评价指标体系和适用类型如表1所示。学兔兔—20232表1数字化项目综合绩效评价指标体系和适用类型一级指标二级指标三级指标适用类别a过程管理立项依据项目重要性1、2、3建设方案需求内容合理性1、2、3架构设计合理性1、2、3采购管理采购一致性1、2、3质量管理管理规范性1、2、3资金管理支付合理性1、2、3进度管理实施合理性1、2、3制度保障制度完善和执行度1、2、3运维保障系统运行情况系统可用性1、2、3系统可靠性1、2、3系统可维护性1、2、3服务响应服务响应及时性1、2、3事件解决事件解决及时性1、2、3事件首次解决1、2、3用户培训用户培训覆盖率1、2、3培训规范1、2、3网络安全安全设计安全保护规划设计1、2、3自主可控率1、2、3安全建设等级保护测评1、2、3代码安全审计1、2关键信息基础设施保护1、2、3商用密码应用安全评价1、2安全运行数据安全保护技术措施1、2、3网络安全管理运行制度1、2、3网络安全隐患整改率1、2、3安全事件1、2、3实战实效目标达成度功能完成率1、2、3业务覆盖率1、2目标用户覆盖率1、2系统功能应用功能利用率1、2、3功能活跃率1、2关键业务增长关键业务数据增长率1、2系统支持度系统纵深应用1、2数字化程度1、2用户满意度领导满意度1、2、3基层用户满意度1、2、3社会公众满意度1、2、3用户活跃度用户日常活跃度1、2学兔兔—20233表1数字化项目综合绩效评价指标体系和适用类型（续）6指标说明和评分方法过程管理6.1.1立项依据立项依据指标主要评价项目立项的重要性，包括落实党中央国务院决策部署要求、落实省委、省政府、市委、市政府决策部署要求、围绕解决全市社会重大需求、围绕解决群众和企业关注的痛点难点堵点问题、防范化解重大风险隐患情况等方面。其中符合部门核心业务数字化要求的得60分，否则得0分；其他各项要求符合条件得100分，否则得0分；其中符合部门核心业务数字化要求的得60分，否则得0分。立项依据指标分值按照公式(1)计算所得：𝑃𝑀1=max⁡(𝑃1,𝑃2,𝑃3,𝑃4,𝑃5)····························································(1)一级指标二级指标三级指标适用类别a实战实效用户峰值活跃度1、2系统活跃度增长率1、2多跨贯通多跨协同1纵向贯通1业务效率提升时效提升1、2、3流程优化1、2公共组件公共组件应用1、2公共组件生产1、2数据供给数据归集数据目录生产1、2数据归集量1、2数据质量数据变化率1、2数据准确率1、2数据可用率1、2数据共享数据共享1、2数据开放与利用数据开放1、2数据产品生产1、2改革创新成果创新标准规范1、2制度重塑1、2影响力效应荣誉奖励1、2领导批示1、2典型示范1、2媒体报导1、2a适用类别:1.多跨协同;2.一般应用;3.基础设施，表中以数字代替。学兔兔—20234式中：𝑃𝑀1——立项依据指标分值；𝑃1——落实上级或本级党委、政府决策部署要求的得分值；𝑃2——围绕解决全市社会重大需求的得分值；𝑃3——围绕解决群众和企业关注的痛点难点堵点问题的得分值；𝑃4——防范化解重大风险隐患情况的得分值；𝑃5——符合部门核心业务数字化要求的得分值。6.1.2建设方案6.1.2.1建设方案指标主要评价项目建设规划是否规范合理，由两项指标组成，包括需求内容合理性和架构设计合理性。6.1.2.2需求内容合理性指标主要评价方案是否围绕项目需求、多跨场景需求、改革需求开展分析。其中项目需求包含业务需求、功能需求、数据需求、安全需求等；多跨场景需求包含各单位应用协同建设情况、系统平台互联互通等；改革需求包含体制调整、机制完善、体系重构、制度重塑、流程再造等。各项需求根据材料提供情况按百分制得分。需求内容合理性指标分值可按照公式（2）计算所得：𝑃𝑀2𝑎=𝑃6+𝑃7+𝑃83⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯(2)式中：𝑃𝑀2𝑎——需求内容合理性指标分值；𝑃6——项目需求分析清单得分值；𝑃7——多跨场景需求得分值；𝑃8——改革需求得分值。6.1.2.3架构设计合理性指标主要评价方案架构设计的合理性。包含是否符合数字化项目标准架构设计，是否对本单位业务流程整合和信息系统集约化整合设计、明确应用系统与其他单位业务系统的关联设计等设计，是否对管理、业务、技术、操作等人员的需求和配备计划可实现性等组织架构设计。各项设计根据材料提供情况按百分制得分。架构设计合理性指标分值可按照公式（3）计算所得：𝑃𝑀2𝑏=𝑃9+𝑃10+𝑃113⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯(3)式中：𝑃𝑀2𝑏——架构设计合理性指标分值；𝑃9——数字化项目标准架构设计的得分值；𝑃10——集约化整合设计及业务系统的关联设计等的得分值；𝑃11——组织架构设计的得分值。6.1.3采购管理采购管理指标主要评价项目采购过程的一致性，评价项目建设内容、招投标内容、合同签订内容是否一致。项目采购过程一致性根据材料提供情况按百分制得分。采购管理指标分值按照公式（4）计算所得：⁡𝑃𝑀3=𝑃12⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯(4)式中：𝑃𝑀3——采购管理指标分值；𝑃12——项目采购过程一致性得分值。学兔兔—202356.1.4质量管理质量管理指标主要评价项目是否满足必要的技术规范、变更规范、文档规范，包括项目应用是否在IRS上注册、项目变更是否符合规范，文档资料是否规范等方面。在IRS上注册并发布得100分，仅注册得50分，未注册得0分；已纳入全生命周期管理系统管理得100分，否则得0分；符合变更规范得100分，否则得0分；项目文档资料规范根据项目文档资料齐全和规范情况，视执行情况按0-100得分。质量管理指标分值按照公式（5）计算所得：𝑃𝑀4=𝑃13+𝑃14+𝑃15+𝑃164⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯(5)式中：𝑃𝑀4——质量管理指标分值；𝑃13——IRS上注册得分值；𝑃14——全生命周期管理系统管理得分值；𝑃15——项目变更规范得分值；𝑃16——项目文档资料规范得分值。6.1.5资金管理资金管理指标主要评价项目资金支付的合理性，评价合同款支付进度是否符合要求。项目资金支付合理性得分根据符合合同要求得100分，合同款满足支付条件，支付进度与合同要求产生偏差，得50分，不符合合同要求得0分。资金管理指标分值按照公式（6）计算所得：⁡𝑃𝑀5=𝑃17⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯(6)式中：𝑃𝑀5——资金管理指标分值；𝑃17——项目资金支付合理性分值。6.1.6进度管理进度管理指标主要评价项目建设进度与计划进度是否一致。项目进度合理性根据进度偏差不超过合同工期15%的得100分，进度偏差超过合同工期15%不超过30%，得50分，否则得0分。进度管理指标分值按照公式（7）计算所得：𝑃𝑀6=𝑃18⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯(7)式中：𝑃𝑀6——进度管理指标分值；𝑃18——项目进度合理性分值。6.1.7制度保障制度保障指标主要评价项目过程管理中制度建设和执行情况，包括但不仅限于建设过程管理、运维保障等制度。其建设和执行情况视完整性程度按百分制得分。制度保障指标分值按照公式（8）计算所得：𝑃𝑀7=𝑃19+𝑃202⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯(8)式中：𝑃𝑀7——制度保障指标分值；𝑃19——项目制度建设得分值；学兔兔—20236𝑃20——制度执行情况得分值。运维保障6.2.1系统运行情况6.2.1.1系统运行情况指标评价系统在运行过程中的性能和维护情况，由三项指标组成，包括系统可用性、系统可靠性和系统可维护性。6.2.1.2系统可用性主要评价服务或服务组件在指定的时间或时间段完成要求功能的能力。指标分值按照公式（9）计算所得：𝑂𝑆1𝑎=(1−𝑂1𝑂2)×100⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯(9)式中：𝑂𝑆1𝑎——系统可用性指标分值；𝑂1——评价周期内信息系统不可用时长的总值，单位为小时；𝑂2——评价周期内约定信息系统服务时长的总值，单位为小时。6.2.1.3系统可靠性主要评价信息系统在运行过程中的连续正常运行情况。指标分值按照公式（10）计算所得：𝑂𝑆1𝑏=𝑒(1−𝑂3𝑂4⁄)×100⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯(10)式中：𝑂𝑆1𝑏——系统可靠性指标分值；𝑂3——评价周期内信息系统运行时间的总值，单位为小时；𝑂4——评价周期内信息系统每次连续正常运行时间的均值，单位为小时。若在评价周期内，系统未发生不可用情况，则取值