数据业务用户感知分析

目录数据分析优势即时通信类业务对网络资源的占用用户感知评价体系模型构建背景数据业务用户感知评价分析与优化交流材料背景-现状什么是用户感知，琢磨不透用户对网络使用中的真实感知，网络不好用还是用户不会用。123用户感知不能有效分解到KPI指标上体现，指标看起来很美，但用户投诉依然越来越多。省公司指导地市优化工作时缺乏行之有效的数据业务分析支撑手段。投诉原因描述不清客户投诉问题追溯困难无法快速定位网络问题网络KPI指标连年高分，客户满意度却逐年下降地市优化工作缺乏指导持续投诉用户流失满意度下降忠诚度下降背景-危害背景-思考•主流业务和应用是什么？•网络中的主流终端是什么？•热点上网区域和投诉区域在哪里？•用户上网的时间规律是怎样的？•用户实际的网络质量感知如何，对哪方面业务感知不好？如何界定？如何进行快速有效的上网投诉原因定位？应用/内容终端…………商务区居民区高校区背景-应对基于传统KPI指标的网络质量考核体系已无法准确反映用户实际的网络感知，如何构建一套科学合理的数据业务质量评价体系（QOE)，助力网络优化，势在必行！第一步：完善基础手段第二步：建立评价体系提升客户感知建立数据业务监测分析系统/工具基础监测能力可靠，业务、终端识别准确，是夯实一切分析与服务的基础建立合理的用户感知评价体系，锁定短板，提供端到端分析服务，最终提升客户感知核心目的：提升感知背景-建议目录数据分析优势即时通信类业务对网络资源的占用用户感知评价体系模型构建背景软件平台分析能力数据用户终端时间网元/位置业务应用网站访问次数流量质量。。。预处理CDR合成统计报表接口关联引擎数据库引擎用户分组引擎数据挖掘引擎用户跟踪引擎报表统计引擎应用网络信令分析网元指标查询端到端接入分析网络KPI实时监控原始数据追溯呼叫实时跟踪网络优化用户投诉辅助分析投诉查询（单用户控制面业务面关联回溯）话单查询（流量澄清、提高退费拦截率）投诉支持接入分析网络质量分析业务质量分析接口流量分析终端分析用户记录实时跟踪专题分析自定义报表用户定位分析用户跟踪分析区域用户分析VIP用户感知保障用户分析系统自管理业务识别能力基于业务包的五元组、偏移量、流失匹配和多会话关联DPI识别技术，进行业务关联识别，目前已可支持识别550余种子类业务，并按照18大类进行归类，处于行业领先地位。多维度业务解析基于五元组基于偏移量基于流式匹配基于多session关联终端识别能力●终端库支持识别包含目前主流终端在内的近20万款各类型终端，同时支持终端类型归类，对于平板电脑和无线上网卡的识别能力也较为准确；●终端库的更新主要采用DPI获取IMEI，通过网络爬虫自动捕获对应终端详细信息，以人工整理和验证的方式对终端库进行丰富；●终端识别的准确性将直接影响到对用户感知原因的判断，快速区分网络侧原因和用户自身原因，知识经验库的建立可以极大简化优化人员的分析流程。数据采集数据建模ＩＭＥＩ信息库入库比对数据比对是否冲突是否可通过第三方平台验证集团文件GSMA库业支IMEI库Gn、Mc口IMEI数据原始数据否是是否IMEI库信息更新流程图入库人工验证全面的问题分析诊断能力●基于信令监测与分析工具数据可以从微观到宏观分五个角度对网络服务质量进行逐步诊断，诊断出网络问题和存在的短板，以分析现象、定位问题、解决问题三个步骤开展端到端感知分析工作，提升手机上网满意度，保障用户感知。角度一角度二角度三角度四角度五信令交互报文适配管道能力内容调度网络短板微观宏观逐步诊断分析现象定位问题解决问题提升手机上网服务质量，保障客户感知目录数据分析优势即时通信类业务对网络资源的占用用户感知评价体系模型构建背景用户感知评价体系(QOE)模型构建KQIQOEFactorKPIKeyQualityIndicators=关键质量指标。主要针对业务提出的贴近用户感受的业务质量参数。QOE=QualityofExperience=用户感觉到的“质量”或“性能”或“舒适度”。主要来源于客户的主观感知。KeyPerformanceIndicator=关键绩效指标。主要为网络级各类指标KPI指标的网元级量化因子。可根据量化影响程度，指导优化自然科学社会科学难点1：感知关联难点2：指标分解●用户感知评价体系从用户对业务的主观感知出发，共四层结构体系，逐层关联分解。QOE至KQI结构分解2&3G流量用户QOE用户投诉不稳定（完整性）无法上网（接入性）无2&3G信号有信号但无法连接连接超时失败速率慢（保持性）页面打开速度慢下载速率低播放视频频繁卡顿即时通信时断时续页面只显示部分内容下载中断用户满意度调查评估数据源客户感知现象感知现象细分KQI类指标关联GSM网络的下载速率3G网络下载速率HTTPGET&POST请求响应时延Connet时延。。。。。。HTTPGET&POST请求成功率Connect成功率DNS查询成功率PDP激活成功率。。。。。。TCP数据包重传率TCP数据包分片率TCP数据包乱序率。。。。。。KQI至KPI、Factor结构分解业务管理层(KQI)指标由地市公司分解主要指标主要指标接入性完整性保持性HTTPGET&POST请求成功率DNS查询成功率页面响应成功率页面响应时延视频初始播放成功率数据业务低接入小区占比PS无线接通率。。。。。。网络管理层(KPI)网元管理层(Factor)3G网络的下载速率GSM网络的下载速率页面显示成功率页面显示时延视频平均播放卡顿次数视频平均卡顿时长视频初始缓冲时延数据业务低速率小区占比。。。。。TCP数据包重传率TCP数据包分片率TCP数据包乱序率数据业务高掉线小区占比PS无线掉线率。。。。。。KQI和KPI的网元级指标、CPU负荷、资源利用率等KQI体系建立基础：网页浏览示例MSRNC/BSCSGSNGGSNDNSSPIubGb/Iu_PSGnGi信令面数据面ActivatePDPContextReqAttachAcceptActivatePDPResPDP激活成功率DNSReq（Host）SYNACKGETrequestDNS成功率DNS响应时长TCP建链成功率TCP建链时长响应时延AttachReqAttach建立成功率Attach建立时长PDP激活时延总时延HTTP成功率HTTP平均速率TCP上行重传率TCP下行重传率IP上行分片率IP下行分片率CreatePDPContextReqCreatePDPContextResACKACKData.2Data.nData.最后一个数据包SYNACK●从用户体验关联业务信令流程可准确反映数据业务端到端业务质量和用户感知1234现象：页面是否打开、开始显示花了多长时间KQI：页面响应成功率、页面响应时延现象：页面是否完全显示、从打开页面到完全显示花了多久KQI：页面响应成功率、页面响应时延KQI算法/考核方法：网页浏览KQI指标名称指标描述算法权重页面响应成功率页面建立通常会包括三个过程：DNS过程、TCP连接建立过程和终端发起第一个HTTP连接请求过程。如果这些过程无法完成，会导致用户不能浏览该网页20页面响应时延页面响应包括三个过程：DNS过程、TCP连接建立过程和终端发起第一个HTTP连接请求过程。这个过程的时延，构成页面响应时延页面响应时延=页面响应成功(Time)-页面建立尝试(Time)10页面显示成功率网页页面连接成功后，用户端的网页浏览器会解释服务器返回的页面内容，根据页面内容自动发起GET连接请求，向服务器请求下载页面内容，直到页面内容完整下载。每个GET请求，下载不同的网页页面内容，如果GET请求得不到服务器的回应，或者回应信息不完整，将会导致部分网页内容不能正常显示，影响用户感受20页面显示时延网页页面连接成功后，用户端的网页浏览器会解释服务器返回的页面内容，根据页面内容自动发起GET连接请求，向服务器请求下载页面内容，直到页面内容完整下载。用户能够直接感受到页面内容下载时延，另外下载时延与网页大小相关页面显示时延=页面内容下载成功(Time)-页面内容下载请求(Time)10页面下载速率本指标表示页面显示下载的平均速率，反映网络的传输能力40%100*页面建立尝试次数页面响应成功次数页面响应成功率%100*页面内容下载请求次数页面内容成功下载次数页面显示成功率)ime(页面响应成功)(页面内容下载成功页面显示下载数据量页面下载速率TTime●在业务归类上基于HTTP协议的“网页浏览”与前面的“浏览下载”属于同类业务，但是为了更加直观体现网页浏览的感知，我们单独对这个分支进行了感知评估和权重分配KQI体系建立基础：视频业务示例●视频业务用户感知受视频播放源信息、用户使用终端、用户移动性等多方面影响MSRNC/BSCSGSNGGSNDNSSPIubGb/Iu_PSGnGi信令面数据面ActivatePDPContextReqAttachAcceptActivatePDPResPDP激活成功率DNSReq（Host）SYNACKGETrequestDNS成功率DNS响应时长TCP建链成功率TCP建链时长响应时延AttachReqAttach建立成功率Attach建立时长PDP激活时延总时延HTTP成功率HTTP平均速率TCP上行重传率TCP下行重传率IP上行分片率IP下行分片率CreatePDPContextReqCreatePDPContextResACKACKData.2Data.nData.最后一个数据包SYNACK1234现象：视频能否正常打开KQI：视频播放状态现象：视频播放不顺畅时断时续、每次卡顿等待时间长短不一KQI：视频卡顿次数、视频卡顿时长、视频下载速率KQI算法/考核方法：视频KQI指标指标含义指标定义关联指标权重视频播放状态用户是否能正常播放视频用户发出业务请求后是否收到正常视频数据包响应5视频卡顿次数在进行视频过程中由于网络传输与用户终端实时播放需求不一致而造成缓冲加载频率卡顿定义：下行包字节数30（统计时间段内下行包字节数*8）（视频码率*统计时间段秒数）视频码率（注：相邻统计粒度出现卡顿行为记为一次卡顿）视频卡顿时长在进行视频过程中由于网络传输与用户终端实时播放需求不一致而造成缓冲加载时间卡顿时长定义：下行包字节数30（（视频码率*统计时间段秒数）-（统计时间段内下行包字节数*8））/视频码率视频码率（注：卡顿时长累加）视频下载速率在视频业务过程网络平均每秒传输视频数据大小所有视频流连接下行流量之和/（最后一个视频包与第一个视频包的时间差）下行包字节数30视频下载时间感知时长占比在视频业务播放过程中视频缓冲时长与正常播放时长占比（最后一个视频包与第一个视频包的时间差）/播放时长视频下载时间5视频感知分析案例：视频信息视频源信息：码率：551Kbps时长：01：44类型：高清视频感知分析案例：码流信息视频头连接信息，其中包含有文件大小，播放时长，视频码率等信息视频感知分析案例：测试方法020000400006000080000100000120000140000160000180000速率（Bytes/s）码率（Bytes/s）视频播放至5秒时出现缓冲卡顿，停顿12秒后视频继续播放卡顿现象•测试视频主观评估：00:05秒后出现卡顿，卡顿时间为12秒；后续未再出现卡顿情况•测试视频客观评估：前30秒内出现卡顿，卡顿时长为-10.75秒，后续未再出现卡顿情况•通过此感知评估模型在用户观看视频过程中出现卡顿行为与用户主观感受一致视频感知分析案例：数据重传分析从上图中可以清晰的看到网络中不同时间段出现数据包重传，但并没有出现ACK丢失的情况，说明网络侧传输质量存在异常视频感知分析案例：数据包序号分析从图中可以分析出网络的传输质量在前20s较差，且在红色箭头所指的间隙时间段内网络侧没有传输任何数据，整个传输过程并没有出现zero_window情况，问题原因体现在网络侧用户感知与业务指标关联关系、关联程度模型根据每组业务指标的权重值进行组合加权，输出总体评价情况根据所匹配的关