上海端到端优化经验分享

0聚焦感知攻克难关构建端到端业务保障能力上海联通2017年11月目录03端到端优化举措及案例分享01业务发展趋势04后续思考展望02现状问题分析2腾讯王卡发售1周年，流量释放成效显著视频业务保持高速增长3,0134,1715,34342%47%50%20%30%40%50%0100020003000400050006000一季度二季度三季度TB视频流量及占比月趋势2017年上半年视频流量上涨180%从业务使用流量来看，腾讯王用户则在视频业务使用上，明显高于其他用户，占比达66.3%。B2I2C用户拉动了全网流量的增长从业务使用流量来看，腾讯王用户则在视频业务使用上，明显高于其他用户，占比达66.3%。4移动游戏领域分析5王者荣耀用户分析目录03端到端优化举措及案例分享01业务发展趋势04后续思考展望02现状问题分析B2I用户的贬损点主要集中在“室内信号”和“上网问题”，“语音问题”的贬损率明显低于非B2I用户。-14.70.0-20.1-10.4非B2I用户B2I用户B2I用户NPS值2017Q22017Q3-16.5-4.6-28.2-13.3-20.9-28.6-4.0-8.615.2-44.4-16.0-7.3-20.19.6语音信号覆盖语音信号稳定性上网信号覆盖上网信号稳定性上网速度室内信号室外信号B2I用户NPS细分非B2IB2IQ3B2I用户采样占比上升至11.8%；B2I用户NPS值下降-10.4分，非B2I用户下降5.4分；B2I用户“上网信号覆盖”NPS大幅低于非B2I用户。NPSB2I2C专项-2I用户（1）90.9%70.8%67.4%55.0%89.7%85.1%43.7%48.3%室内信号上网问题语音问题室外信号B2I贬损用户提及率非B2IB2I3.3%89人11.8%307人Q2Q3B2I用户占比63.2%47.6%51.8%36.8%52.4%48.2%B2I非B2I投诉B2I贬损用户环线分布外环外外环内94.46%4.31%1.22%95.61%2.19%2.19%4G3G2GB2I用户网络分布Q2Q3B2I用户中95.61%为4G用户。B2I用户在外环外使用的占比高于普通用户。B2I用户在医院的NPS值较低，商业类和校园较高；28%的B2I贬损用户，周边站点需要扩容（已纳入扩容清单，涉及扩容站点27个，扩容完毕9个，完成率33.3%）。NPSB2I2C专项-2I用户（2）-66.7-24.8-19.3-18.8-9.3-6.3-39.3-19.9-21.0-15.9-23.7-18.6医院住宅工业园写字楼商业类校园B2I用户场景类用户NPS值对比B2I非B2I13.2%5人26.5%52人扩容栅格39.5%15人15.8%6人7.9%3人36.8%15人29.1%57人8.2%16人5.1%10人57.7%113人规划栅格建设栅格拆迁栅格良好栅格Q2Q3B2I贬损4G用户常驻小区栅格情况0%0%0%0%75.0%3人25.0%1人0%0%规划栅格建设栅格拆迁栅格良好栅格医院场景Q2Q333.3%1人46.4%13人扩容栅格16.7%1人0%33.3%2人50.0%3人7.1%2人3.6%1人0%89.3%25人规划栅格建设栅格拆迁栅格良好栅格工业园场景Q2Q3NPSB2I2C专项-2I用户（3）0.0%22.0%9人扩容栅格0%0%0%0%36.6%15人7.3%3人0%56.1%23人规划栅格建设栅格拆迁栅格良好栅格校园场景Q2Q30%33.3%9人扩容栅格50.0%3人0.0%33.3%2人16.7%1人33.3%9人7.4%2人0.0%59.3%16人规划栅格建设栅格拆迁栅格良好栅格商业类场景Q2Q3医院场景主要还是覆盖类问题；工业园、商业类、校园3类场景的栅格扩容需求较强。构建端到端视频优化保障体系视频优化保障工作要求业务流向用户行为影响网络视频热点质差区域容量/路由/安全容量/安全TOP业务源内容重点节目源SP的监控能力保障体系核心网元负荷监控能力B2I2C用户热点监控能力视频KQI-无线KPI关联分析能力问题VMOS指标多次出现异常波动，经分析发现优酷调整了服务器部署地点（上海—山东—苏州）NBA总决赛期间，腾讯视频业务导致全网流量激增，核心网峰值流量同比增长达到10%用户投诉，基站扩容后，仍无法用户的视频、游戏需求目录03端到端优化举措及案例分享01业务发展趋势04后续思考展望02现状问题分析12基于视频感知评价体系vMOS（视频码率、初缓时延、卡顿关键指标），通过网络侧大数据，利用云网协同分析能力，对移网视频主流SP（腾讯、优酷、爱奇艺）进行主动监控优化，开展视频业务端到端的业务质量保障。1、重点节目源SP的监控能力用户体验：视频缓存时延流媒体业务中，爱奇艺视频的用户体验值高于全网60%全网日均访问人数分析腾讯、爱奇艺的日均访问人数均高达15万以上网外点击率分析爱奇艺外网访问量高达91%，严重影响用户感知377778172372327780200000400000腾讯爱奇艺优酷3.1056.1032.3820510腾讯爱奇艺优酷访问量缓存时延省内/省外点击率站点联通网内点击率网内小计省内省外腾讯网98.65%41.48%57.13%爱奇艺99.32%8.14%91.18%优酷96.79%63.08%33.71%案例分享：SP侧-爱奇艺Cache部署案例分享：爱奇艺Cache改善效果6.014.2102468引入前引入后初始播放时延(s)引入后初始缓存时延比引入前降低了30%①初始视频播放时延引入后引入前两个视频同时播放，视频1的缓冲速度明显高于视频2②视频缓冲速度（网内）联通(引入cache后)移动电信三个视频同时播放，视频1的缓冲速度明显高于视频2及视频3③视频缓冲速度（运营商间）（25%）（7%）（10%）（1.35%）58.5%（59.5%）29.2%30.6%负荷情况：根据业务流向，6月移网关键节点设备负荷均未超出安全门限，且增幅均小于原预测范围之内。扩容计划：•核心层,预计至9月，NGN-Gn、防火墙带宽利用率将接近80%扩容门限。计划部将分步扩容，预计在8月底扩容至320G（预测负荷将降至27%），后续请计划部按现有时间节点尽快落实扩容工作，避免负荷超门限。（12pp）（3.5pp）（5.5pp）（11.6pp）（0pp）（0pp）（3.05pp）(30.45%)关键节点扩容门限总带宽利用率现状9月利用率预估NGN-Gn80%120Gb/s58.5%77.1%防火墙80%120Gb/s59.5%79.1%•无线接入层,网优中心牵头完成建立无线扩容快速响应机制，实现扩容小区每日预警，工单驱动扩容工作，限时响应快速完成扩容进展：6月共计630个基站（涉及1286个小区）扩容，目前仅完成56个小区扩容，请计划部加快扩容进度管控，并做好督办工作。2、端到端核心网元负荷保障17年6月初，NBA总决赛期间，腾讯视频业务导致全网流量激增，核心网峰值流量同比增长达到10%7月18日、8月24日，王者荣耀更新导致核心网流量突增开始时间协议类型7月11日7月18日增幅（MB）11:30:00File_Access528141.811175246.5123%11:45:00File_Access517969.641086302.3110%12:00:00File_Access520231.231075803.6107%12:15:00File_Access492600.91912324.5685%建立核心网流量的门限动态预警针对此类事件，增加流量突增监控及预警机制，采用绝对+相对的门限预警配置随着视频业务的增长，4G流量呈井喷式增长，传输质量的稳定性成为满足用户体验的重要组成部分传统传输运维领域通常关注的是链路的开通，故障的处理等，但对其承载的业务感知，缺乏关注度。对于隐形故障，传输网管设备不能及时发现，从而导致用户业务感知下降。组网拓扑时延打点下行RTT时延的定义为：核心网-传输-基站-终端之间的时延，其中包含核心网到传输时延加上基站的空口时延。通过对用户的下行时延分析，可以发现核心网以下的节点问题（传输和基站）传输问题导致的基站时延大汇聚环节点下行RTT(ms)高时延基站数R024523853755R024526361433R024542821282R024510471213R024547411163R024555451142汇聚环节点站号下行RTT(ms)R02452385F05483676R02452385F08922371R02452385F01193205R02452385F08178116R02452385F07119114R02452385F0711783R02452385F0748064R02452385F0891759R02452385F0787652对传输汇聚环一周数据统计，发现R024环上单站流量最高，且下行RTT时延较其他环偏高。对R024环下的节点进行统计，发现节点52385时延最高，且下挂的高时延基站相对较高。数据深度挖掘：环R024下节点52385下行RTT时延为375ms远高于全网下行RTT时延均值100ms，严重影响用户是业务感知。进一步深入挖掘：节点52385下挂的基站时延，发现F05483基站时延严重恶化。案例分享：传输问题导致的基站时延大汇聚环节点站号下行RTT(ms)R02452385F05483676R02452385F08922371R02452385F01193205R02452385F08178116R02452385F07119114R02452385F0711783R02452385F0748064R02452385F0891759R02452385F0787652案例分享：传输问题导致的基站时延大环R024的节点52385时延明显异常,该节点下共有9个基站,每个基站的时延如下:可见,其中高时延基站有5个,占比为56%,其余4个基站时延正常。因此,可以推断,该节点本身没有异常,高时延的原因是由于基站侧导致。从区域分布来看，B2I2C用户流量聚集热点相较普通4G用户更为显著；从时段特征来看，随着B2I2C流量型产品推出，全网4G忙时由先前18:00迁移至21:00，其中B2I2C用户忙时峰值均为22:00，普通4G用户忙时峰值仍为18:00。B2I2C流量日忙时分布区域分布某部队驻地上海师范大学安亭汽车城公安高等专科学校长兴造船厂车墩出口加工区/车墩影视基地24小时流量走势普通4G用户流量日忙时分布浦东机场长兴造船厂虹桥机场公安高等专科学校时段分布全网4G用户流量日忙时分布某部队驻地车墩出口加工区/车墩影视基地长兴造船厂浦东国际机场安亭汽车城3、B2I2C用户流量分布监控紧跟市场热点，制定精细化扩容标准，快速响应灵活扩容③分场景差异化阈值②锁定有效扩容需求⑤硬件和license资源利用扩容清单输出①7天系统数据输入服保平台工单任务把握4G扩容节奏，进一步提高网络效能④多用户并发调度扩容小区每日预警,通过服保系统，比照故障处理，一站一方案一派发，强化扩容工作及时响应、进度可视、及时评估、闭环管理224、视频KQI-KPI关联分析30%40%50%1000014000180002200026000300002017-01-012017-01-132017-01-252017-02-062017-02-182017-03-022017-03-142017-03-262017-04-072017-04-192017-05-012017-05-132017-05-252017-06-062017-06-182017-06-302017-07-122017-07-242017-08-052017-08-172017-08-292017-09-102017-09-222017-10-042017-10-16下行去尾速率趋势图下行去尾速率(mbps)下行速率小于10mbps比例6%8%1