您好,欢迎访问三七文档
当前位置:首页 > 商业/管理/HR > 销售管理 > 50-移动上海计费中心-提高10086短信发送及时率
中国移动通信集团上海有限公司计费信息中心移动信使QC小组2009-03一、小组概况小组名称移动信使QC小组成立时间2005年2月1日课题名称提高10086短信发送及时率登记编号08-SY-JF-02课题类型攻关型活动时间2008年5月-2008年12月活动次数15次出勤率100%一、小组概况姓名性别职务文化程度组内分工邱晓波男技术支撑本科组长崔宏慧男技术督导本科副组长沈琦男技术督导本科成员胡可男技术支持本科成员孙一凯男技术支撑本科成员孙乐男技术支撑本科成员潘俊杰男技术支持本科成员杨一凡男技术支持本科成员韩湧男技术支撑本科成员罗曦女技术支撑本科成员专业术语介绍:95.0%95.5%96.0%96.5%97.0%97.5%98.0%98.5%99.0%99.5%100.0%2008年2月2008年3月2008年4月2008年2-4月短信量及发送及时率二、选择课题月均发送及时率≥99%日均发送及时率≥98%指标:99%现状:98.36%组号区间%组中值%频数频数统计频率%196.865~97.14597.001*1.11%297.145~97.42597.284****4.44%397.425~97.69597.553***3.33%497.695~97.97597.835*****5.56%597.975~98.25598.1112************13.33%698.255~98.52598.3817*****************18.89%798.525~98.80598.6622**********************24.44%898.805~99.08598.9415***************16.67%999.085~99.35599.215*****5.56%1099.355~99.63599.495*****5.56%1199.635~99.91599.771*1.11%TLX二、选择课题样本数n=90标准差s=0.55181平均值x=98.36%二、选择课题三、设定目标97.50%98.00%98.50%99.00%99.50%100.00%现状目标目标设定值图现状目标1中间件程序处理321531181.55%81.55%2根据手机尾号拆分61073215.49%97.04%3接收用户短信737291.87%98.91%4回写发送表378500.96%99.87%5发送接入网关51260.13%100%合计3954549100%四、目标可行性分析81.55%20%40%60%80%100%0%81.55%97.04%98.91%99.87%中间件进程处理手机尾号拆分接收用户短信回写发送表发送接入网关035010050150超时短信数量(万条)321531161073273729378505126200250300中间件进程处理81.55%n=3954549四、目标可行性分析时间短信总量超时短信量正常维护引起的超时量正常维护引起超时所占比例2008年2月742346741165484169891.46%2008年3月851562031405077194211.38%2008年4月818927601383988130220.94%总计241283637395454949432—平均值804278791318183164771.25%86.24%目前及时率+目前不及时率×中间件超时比例×可解决程度=98.36%+1.64%×81.55%×86.24%=99.51%五、原因分析人机法环值班人员延误处理网络连接无响应中间件主机性能不足数据库连接易中断超时短信影响后续短信调用其他系统缓慢其他值班工作干扰网络瞬间中断主机CPU负荷高主机内存负荷高程序缺乏自动重连机制进程处理为串行系统环境缺陷中间件进程占CPU过多无法并行处理程序反复连接无效地址无法区分业务类型短信告警处理要求缺失制图人:邱晓波制图时间:2008年5月5日值班人员未按规定操作其他值班工作干扰其他值班工作干扰中间件进程处理超时次数多短信告警处理要求缺失值班人员未按规定操作程序反复连接无效地址网络瞬间中断主机内存负荷高程序缺乏自动重连机制无法区分业务类型系统环境缺陷告警处理要求未落实六、要因确认序号末端因素调查方法确认标准确认人完成日期1无法区分业务类型统计分析告警历史记录因无法区分业务类型引起的超时短信应少于超时短信总数的4%(根据08年运行维护部中心指标分解计划)邱晓波潘俊杰2008年5月27日2程序反复尝试连接无效地址现场测试中间件CPU负荷中间件主机CPU负荷应保持在50%以下(短信系统设计说明书规定)崔宏慧韩湧2008年5月23日3程序缺乏自动重连机制统计分析告警历史记录因程序缺乏自动重连机制引起的超时短信应少于超时短信总数的4%(根据08年运行维护部中心指标分解计划)杨一凡沈琦2008年5月26日4短信告警处理要求缺失现场检查《系统组值班规范》应存在短信告警处理方法及要求的相关条款邱晓波2008年5月9日5值班人员未按规定操作统计分析告警处理历史数据所有值班人员每一天的告警处理及时率(处理时长≤15分钟的比例)全部在90%以上(根据部门指标)孙一凯罗曦2008年5月12日6网络瞬间中断统计分析告警历史记录因网络瞬间中断影响到的短信,应小于超时总数的4%(根据08年运行维护部中心指标分解计划)孙一凯胡可2008年5月15日7主机内存占用高现场测试中间件内存负荷中间件主机内存平均占用应保持在70%以下(根据短信系统设计说明书规定)孙乐罗曦2008年5月15日统计周期超时次数周期内总超时次数比例2008年2月478234116548441.03%2008年3月485684140507734.57%2008年4月492147138398835.56%总计1456065395454936.82%0%5%10%15%20%25%30%35%40%45%50%2008年2月2008年3月2008年4月无法区分业务类型引发超时短信比例六、要因确认确认标准:4%36.82%01020304050607080901002008年2月~4月中间件CPU负荷情况均值:64.34%六、要因确认确认标准:50%六、要因确认4050607080901002月到4月间主机内存负荷情况均值:62.55%确认标准:70%六、要因确认统计周期超时次数周期内总超时次数比例2008年2月218557116548418.75%2008年3月267889140507719.07%2008年4月264523138398819.11%总计750969395454918.99%0%5%10%15%20%25%30%2008年2月2008年3月2008年4月缺乏自动重连机制引发超时短信比例确认标准:4%18.99%六、要因确认其他一般告警,如短信系统告警,必须在告警发生后15分钟内予以处理。六、要因确认0.0%0.5%1.0%1.5%2.0%2.5%3.0%3.5%4.0%4.5%5.0%2008年2月2008年3月2008年4月网络瞬间中断引发超时短信比例六、要因确认统计周期超时次数周期内总超时次数比例2008年2月648511654840.56%2008年3月666514050770.47%2008年4月741313839880.54%总计2056339545490.52%确认标准:4%六、要因确认无法区分业务类型程序反复尝试连接无效地址程序缺乏自动重连机制七、制定对策序号要因对策目标措施负责人完成时间地点1无法区分业务类型区分业务类型以实现多路并行机制区分业务,提升短信并行度,使无法区分业务引起的超时短信占超时总数的比例低于4%1.整理出程序无法识别的业务短信2.用正交试验法确定最优并行方案3.优化程序代码4.详细测试后上线运行邱晓波2008年6月23日钦州72号楼3楼机房2程序反复尝试连接无效地址从程序中剔除尝试连接已失效地址的语句使相关主机CPU负载低于50%1.确认包含连接无效地址的程序列表2.撰写程序修改需求工单3.优化程序代码并进行详细测试4.程序正式上线运行崔宏慧2008年6月2日钦州72号楼3楼机房3程序缺乏自动重连机制建立程序间自动重连机制缩短重连时间,使缺乏重连机制引起的超时短信占超时总数的比例低于4%1.整理缺乏自动重连机制的程序列表2.为相关程序的处理流程设计优化方案3.优化程序代码4.对优化后的程序实施详细测试5.程序正式上线运行沈琦2008年6月24日钦州72号楼3楼机房97.2097.4097.6097.8098.0098.2098.4098.6098.8099.0099.202A14A26A32B14B26B30.5C11C21.5C350D1100D2150D3及时率%主效应图因子水平表因子水平业务分层数(A)同业务并行度(B)轮询周期(C)轮询取数据量(D)12类并行2个程序0.5秒50条24类并行4个程序1秒100条36类并行6个程序1.5秒150条正交试验方案及结果因子ABCD及时率(%)实验11(2类)1(2个)1(0.5秒)1(50条)96.96实验212(4个)2(1秒)2(100条)98.33实验313(6个)3(1.5秒)3(150条)98.21实验42(4类)12398.50实验5223199.30实验6231299.28实验73(6类)13298.69实验8321398.75实验9332198.41均值197.83398.05098.32398.250均值299.04798.82098.41398.760均值398.61798.62798.76098.487极差1.2140.770.4370.51八、对策实施2933第5号A2B2C3D1A2B2C3D2ABCD四因子三水平0.00%10.00%20.00%30.00%40.00%50.00%60.00%0100000200000300000400000500000600000程序无法区分业务导致的超时短信数量八、对策实施统计周期该类超时短信比例2008年2月36.26%2008年3月36.82%2008年4月37.31%2008年5月37.10%2008年6月30.58%2008年7月0.48%超时比例:0.48%预期目标:4%八、对策实施688010203040506070802008/2/12008/2/62008/2/112008/2/162008/2/212008/2/262008/3/22008/3/72008/3/122008/3/172008/3/222008/3/272008/4/12008/4/62008/4/112008/4/162008/4/212008/4/262008/5/12008/5/62008/5/112008/5/162008/5/212008/5/262008/5/312008/6/52008/6/102008/6/152008/6/202008/6/252008/6/30对策实施前后CPU负荷目前:42.01%预期目标:50%以下统计周期该类超时短信比例2008年2月16.57%2008年3月20.31%2008年4月20.05%2008年5月20.35%2008年6月14.14%2008年7月0.12%0.00%5.00%10.00%15.00%20.00%25.00%30.00%35.00%40.00%45.00%50.00%050000100000150000200000250000300000程序无法重连导致的超时短信数量八、对策实施耗时5min耗时10s超时比例:0.12%预期目标:4%6811九、效果检查08年2月08年3月08年4月08年5月08年6月08年7月08年8月08年9月08年10月08年11月08年12月月平均及时率(%)98.4398.3598.3198.5199.1899.3799.3499.4199.3999.3899.40阶段实施前实施中实施后巩固期97.59898.59999.5100月
本文标题:50-移动上海计费中心-提高10086短信发送及时率
链接地址:https://www.777doc.com/doc-3352569 .html