TCESA 1180-2021 政务APP技术指标评价规范

ICS35.240.99CCSL67团体标准政务APP技术指标评价规范SpecificationfortechnicalindexevaluationofgovernmentAPP2021-12-31发布2022-01-31实施中国电子工业标准化技术协会发布T/CESA1180—2021T/CESA1180—2021I版权保护文件版权所有归属于该标准的发布机构，除非有其他规定，否则未经许可，此发行物及其章节不得以其他形式或任何手段进行复制、再版或使用，包括电子版，影印件，或发布在互联网及内部网络等。使用许可可于发布机构获取。T/CESA1180—2021II目  次前言...................................................................................................................................................................III1范围...................................................................................................................................................................12规范性引用文件...............................................................................................................................................13术语和定义.......................................................................................................................................................14缩略语...............................................................................................................................................................25评价指标...........................................................................................................................................................25.1指标体系框架...........................................................................................................................................25.2指标说明...................................................................................................................................................25.3评价指标...................................................................................................................................................36指标项计分.....................................................................................................................................................10T/CESA1180—2021III前  言本文件按照GB/T1.1-2020《标准化工作导则第1部分：标准化文件的结构和起草规则》的规定起草。请注意本文件的某些内容可能涉及专利。本文件的发布机构不承担识别专利的责任。本文件由北京博睿宏远数据科技股份有限公司提出。本文件由中国电子工业标准化技术协会归口。本文件起草单位：北京博睿宏远数据科技股份有限公司、中国电子技术标准化研究院、北京中百信信息技术股份有限公司、北京思源政通科技集团有限公司、平安国际智慧城市科技股份有限公司、杭州友声科技股份有限公司、中电福富信息科技有限公司、广东乐维软件有限公司、北京优特捷信息技术有限公司。本文件主要起草人：杨雪松、安乐、于浩、张程、卢学哲、吴爽、姜德峰、林杉、占荣、孟祥辉、刘子路、丁振兴、王洪福。T/CESA1180—20211政务APP技术指标评价规范1范围本文件规定了政务APP的评价指标要求，描述了其对应的评价方法。本文件适用于政务APP的开发和评价，为评价和优化政务APP提供了参考。2规范性引用文件下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中，注日期的引用文件，仅该日期对应的版本适用于本文件；不注日期的引用文件，其最新版本（包括所有的修改单）适用于本文件。GB/T37668—2019信息技术互联网内容无障碍可访问性技术要求与测试方法3术语和定义下列术语和定义适用于本文件。3.1崩溃crash在移动设备（如：iOS、Android设备）中，打开APP应用程序时出现的突然退出中断的情况。注：Android系统中的“ANR”现象在状态上与崩溃基本一致。3.2丢包packetloss一个或多个数据包（packet）的数据无法透过网上到达目的地。3.3时延delay一个报文或分组从一个网络的一端传送到另一个端所需要的时间。3.4DNS劫持DNShijacking通过攻击域名解析服务器，或伪造域名解析服务器的方法，把目标网站域名解析到错误的IP地址。T/CESA1180—202123.5元素劫持HTTPhijacking在用户和网站交互过程中的劫持了用户的请求，使得用户接收到一些非网站正常响应的内容。示例：非法广告弹窗等。3.6政务APPgovernmentAPP提供政府管理与服务等功能的智能移动终端应用程序。注：由政府部门主导开发。4缩略语下列缩略语适用于本文件。APP：移动应用程序（Application）JS：Java脚本（JavaScript）TCP：传输控制协议（TransmissionControlProtocol）DNS：域名系统（DomainNameSystem）ANR：应用程序未响应（ApplicationNotResponse）5评价指标5.1指标体系框架政务APP技术指标评价规范模型框架见图1。图1政务APP技术指标评价规范模型框架5.2指标说明T/CESA1180—20213政务APP技术指标评价标准表中表头说明如下：a)指标编号：1)L：一级；2)P：二级；3)A：二级指标分项编号；b)指标名称：评价指标的名称；c)评判准则：评价指标的评判准则；d)数据要求：评价指标中数据的要求。5.3评价指标5.3.1用户体验5.3.1.1可用性本指标用于政务APP的可用性评价。评价指标应符合表1的规定。表1政务APP的可用性指标评价指标编号指标名称评判准则数据要求L1P1-A1下载可用性a分项分数5分取值｛5分（≥99%），4分（≥96%~99%），3分（≥92%~96%），2分（≥90%~92%），1分（90%）｝下载可用性=下载成功次数/下载总次数×100%统计期内，一般至少以30个自然日为周期，在不影响APP正常使用的前提下，选取对应服务地域及主流运营商的真实终端测试探针做主动拨测测试，后收取所有测试样本数据并计算出平均值进行定量评估。在统计期内至少每30min下载一次，样本总数要求至少为1000次L1P1-A2启动可用性b分项分数5分取值｛5分（≥99%），4分（≥96%~99%），3分（≥92%~96%），2分（≥90%~92%），1分（90%）｝启动可用性=启动成功次数/启动总次数×100%统计期内，一般至少以30个自然日为周期，在不影响APP正常使用的前提下，选取对应服务地域及主流运营商的真实终端测试探针做主动拨测测试，后收取所有测试样本数据并计算出平均值进行定量评估。在统计期内至少每30min启动一次，样本总数要求至少为1000次L1P1-A3交互可用性c分项分数5分取值｛5分（≥99%），4分（≥96%~99%），3分（≥92%~96%），2分（≥90%~92%），1分（90%）｝交互可用性=交互请求正确次数/交互请求总次数×100统计期内，一般至少以30个自然日为周期，在不影响APP正常使用的前提下，选取对应服务地域及主流运营商的真实终端测试探针做主动拨测测试，后收取所有测试样本数据并计算出平均值进行定量评估。在统计期内至少每30min进行一次交互，每次交互要求至少覆盖5个关键功能，例如：办件查询、表单预填、办事预约、咨询投诉、网上支付等功能。样本总数要求至少为1000次T/CESA1180—20214表1政务APP的可用性指标评价（续）指标编号指标名称评判准则数据要求L1P1-A4兼容可用性d分项分数5分取值｛5分（≥99%），4分（≥96%~99%），3分（≥92%~96%），2分（≥90%~92%），1分（90%）｝兼容可用性=成功兼容机型个数/测试机型总数×100%统计期内，一般至少选取200个或以上机型，涉及不同品牌、型号、操作系统及屏幕分辨率。进行兼容性测试，后收取所有测试样本数据并统计结果a下载可用性指APP可以正常且完整下载至本地手机客户端的比率。b启动可用性指APP可以在手机客户端上正常启动的比率。c交互可用性指APP使用中交互（如点击控件等动作所触发的网络请求）的成功比率。d兼容可用性指APP可支持执行下载、安装、启动、卸载及基本交互的手机类型个数的成功比率。5.3.1.2界面友好度本指标用于政务APP的界面友好度评价。评价指标应符合表2的规定。表2政务APP的界面友好度指标评价指标编号指标名称评判准则数据要求L1P2-A1无障碍使用分项分数：4分4分=符合一级标准2分=符合二级标准1分=符合三级标准应按GB/T37668—2019中的要求及测试方法进行测试L1P2-A2适老化分项分数：4分不满足以下条件的每个减0.5分依照《移动互联网应用（APP）适老化通用设计规范》的有关要求a）可感知性：字型大小调整，行间距，对比度，颜色用途，验证码；b）可操作性：组件焦点大小，手势操作，充足操作时间，浮窗；c）可理解性：提示机制L1P2-A3页面信息展示完整性分项分数4分，每发现一次不合理处扣1分测试页面包含：主页面及至少五个主要业务流程中涉及到的页面，样本总数不少于25个，发现如信息显示不完整，图片明显扭曲，界面部分内容无法显示等类似展示不合理或不可用情况进行扣分。如实际业务样本不足采样要求，按实际业务样本进行测试5.3.1.3服务便捷性本指标用于政务APP的服务便捷性评价。扣分项，评价指标应符合表3的规定。T/CESA1180—20215表3政务APP的服务便捷性指标评价指标编号指标名称评判准则数据要求L1P3-A1流程步骤简化度占比a分项分数：4分取值｛4分（≥90%），3分（≥80%~90%），2分（≥70%~80%），1分（≥60%~70%），0分