基于用户感知的无线网络大数据分析平台-V01

基于用户感知的无线网络大数据分析平台——介绍材料深圳天源迪科信息技术股份有限公司2016年11月平台简介2013年开始，天源迪科积极开展无线大数据的探索工作，14年基本成型，开始推广使用，经过4年不断发展和完善，在2/3/4G网络上，建立了基于用户感知的评价体系，应用于网络优化、网络建设。提升了网络运营效率，实现了对客户的主动服务。平台应用范围：中国电信、中国移动、中国联通平台适用部门：网络部、建设部、维护部、市场部、数据部、信息部平台获得荣誉：国家科技进度二等奖平台应用场景：客户服务类：创新主动用户关怀，通过网络用户的感知分析，先于用户投诉发现问题，主动关怀客户，提升客户满意度，挽留高危客户网络运营类：从用户维度评估网络质量，按区域分析网络情况，关联用户投诉信息，对感知“差”集中的区域集中处理网络问题；及时发现网络中存在的问题，改变以往以大量路测为主的测试分析方法，将维护人员从海量的数据分析中解脱出来，提升维护效率，实现网络运营智能、自动化目录平台概述12功能介绍3项目资源大数据平台建设背景网络资源网络质量网络维护集中化生产面对移动的业务高速增长、以及业务类型和用户业务模型的变化，现有手段尚未有效改善网络资源利用效率，网络投入不堪重负。面对差异化，多样化、融合性的业务需求，以及容量增长、网络容量需求给网络质量带来巨大压力。•2G、3G、4G三代并存，造成网络维护工作量大、网络维护开支高。•四网协同发展的网络维护复杂度高、人力短缺•网络生产集中化解决方案缺失，现有日常人工优化手段多数依靠经验，容易引起误判、误调整。•缺少工具支持，优化及时性、准确性差，专家未被高效利用。面对越来越激烈的市场竞争、要求越来越高的用户、越来越庞大的网络以及越来越紧张的成本压力，需要更先进的网优生产模式，实现集中化、标准化，大幅提高生产效率，以适应全球最大、最复杂网络的要求传统无线网络优化以性能、TOPN小区、DT/CQT、用户投诉等点、线问题处理为主，存在以下问题：1.无法完全反映客户感知2.难以直观反映网络区域性问题，传统路测方式具有一定的盲目性，耗时耗钱3.人员数量要求多、技能要求高4.优化结果验证耗时耗人，准确性不高5.建维优联动无IT系统支撑，协同效率不高基于海量用户语音及上网数据、客户投诉、DT/CQT、网络指标等多维度数据建模、关联分析，并辅以专家经验，打造“傻瓜化、直观化、图形化”的无线网络智能优化系统，实现以下能力：1.真实反映用户感知，主动服务客户，提升10000预处理能力2.快速准确定位最急需解决的网络区域性问题，自动输出专家优化建议3.实现优化结果自动闭环验证4.基于业务预测，实现板件、空口能力分析和预警5.以系统为支撑，重构高效的建维优流程感知评估服务支撑精确定位指导优化规划支撑指导投资集约高效提升效率现状问题解决思路实现效果平台总体概述CDT（2G/3G/LTE）OMM性能、配置、参数、设备告警（2G/3G/LTE）投诉信息智能化预处理关联分析1、行为刻画2、感知评估3、健康档案库用户感知评估投诉预处理客户关怀网络质量评估DT/CQT质量/容量评估异常事件质量/容量预警问题精确定位行为分析决策依据LTEMR输入分析应用平台建设思路重点聚焦用户体验质量评估容量评估异常事件原因分析区域性/系统性问题精确定位感知评估决策依据投诉处理分析客户关怀行为分析、市场支撑服务支撑网络评估网络预警话务、业务、流量模型建立质量预警：质量突变、呼吸效应容量预警：板件、无线资源网络规划建议感知评价体系建立用户行为刻画健康档案库建立平台核心能力10亿条话单记录≈2TBCDT话单记录10亿条话单记录≈50GB/日性能数据投诉、用户终端≈2GB/日ODS数据工单、作业计划≈1000条/日电子运维网络资源≈1GB/日资源系统应用层预处理网络层预处理1千万条话单记录接入-保持-质量异常话单1百万条记录区域评估栅格质量1千万条记录用户感知评估用户汇总2百万条记录预警、优化容量/业务/参数GIS预处理专题预处理派单预处理分析预处理报表预处理海量采集云平台预处理文件采集Hadoop集群列式数据仓库集群GIS服务器Web服务器云化存储切片分拣汇总处理直观呈现平台逻辑架构•建立业务模型和感知评价体系，刻画用户行为与通信质量特征•客观评价用户感知，贴近用户真实感受•主动推送感知差用户至前端，挽留客户，送10000号定位异常位置与原因，提升用户投诉处理效率国内外运营商及主要设备厂家提出了建设大数据系统的初步想法，但均未实现。迪科网优平台为国内外行业中首创，多项技术达到了业界领先水平一、客观评价用户感知，服务支撑市场与客服二、结合传统优化模式，基于海量用户通话感知数据定位问题区域，使优化更具目的性•建立质量与容量评估体系和基于栅格的网络区域问题定位算法•结合传统优化模式，统筹TOPN小区和TOPN区域作为问题点进行优化三、结合专家经验创新算法，智能给出优化建议，实现智慧型网优•智能快速给出优化建议•提升网优效率，节约大量人力物力四、精确容量管理，指导规划建设，节约投资•基于业务模型，创新建立无线网络负荷预警机制•预警MP/CC等核心板件、空口负荷瓶颈，避免因过载出现的风险•预测呼吸效应、结构性缺站等问题，精确指导规划建设，节约投资五、重构全新的网优业务流程•创新建立的“大数据分析牵引建设、维护、优化”的全新流程，自动化闭环管控•基于用户真实通话记录评估验证优化效果六、创新系统架构，兼容2G/3G/4G，成为行业标杆•基于Hadoop的云平台架构，保障运算效率，功能响应时间低于5s，兼容2G/3G/4G，扩展性强•“直观化、傻瓜化、图形化”的一键式操作特点，易用性强平台主要特点总体思路：以“专业化、集约化”为驱动，围绕网络基础运营、大数据分析、服务支撑三条主线，以大数据分析为牵引，指导建设、维护与优化，提升专业化、集约化运营能力。夯基础强分析基础维护基础网优系统分析专题/专项市场支撑、客户服务基础运营大数据分析服务支撑重服务大数据分析基础网优基础维护规划需求容量预警网络问题维护问题专业化集约化规划建设服务支撑服务推送投诉反馈平台主要业务流程(1/2)建立以大数据分析为牵引建维优的网络运营体系*平台主要业务流程（2/2）关键算法流程—容量管理BHCA维度资源利用率评估话务量维度资源利用率评估吞吐量维度资源利用率评估现网容量分析容量分析及预测BHCA维度资源利用率预测话务量维度资源利用率预测吞吐量维度资源利用率预测容量预测和风险业务评估话务模型分析重点业务风险评估1X/DO空口资源利用率评估1X/DO空口资源利用率预测1X/DO全网话务模型按区域话务模型按业务话务模型话务模型分析关键算法流程—质量分析DT&CQT分析CDT数据质量分析栅格1X掉话率栅格1X接入成功率栅格DO掉线率栅格DO掉线率1X弱覆盖栅格1X导频污染栅格DO弱覆盖栅格DO导频污染栅格容量分析关键算法流程—CDT关联DT/CQT分析根据CDT数据可以输出存在覆盖问题的区域，综合DT&CQT的测试结果，确认问题区域CDT预测DT测试结果修正后的CDT结果移动终端CQT测试关键算法流程—异常事件原因定位•设备告警•系统原因系统原因•过载容量原因•PN混淆•邻区漏配•邻区错配参数配置•过覆盖•弱覆盖•导频污染•快衰落覆盖原因告警原因码系统失败原因码过载的原因码PN混淆的小区对错漏配小区对覆盖问题小区CDT/LTEUDT/MR数据库异常呼叫话单关键算法流程—用户感知评估CDT数据仓库函数关系矩阵f(X)客观指标用户呼叫话单用户感知得分用户感知回访调查修订评分函数评分运算客观指标提取关键指标选择数据业务建模得到评分函数评价标准分值转换100分非常满意590—100满意470—90一般350—70不是太满意230—50不满意130目录项目背景12功能介绍3项目资源概述系统主要功能：精确管理无线基础数据对感知差用户提供主动服务网络优化网络健康检查建设支撑区域监控19“两端关联、五阶网元”法两端关联：无线话单和核心网业务话单一一关联五阶网元：用户锁定网络、接入业务、保持业务、互操作、释放业务整个业务流程经历了终端、基站、传输、核心网、SP五种典型网元。这五种网元都有可能是导致用户感知差的主要因素。“两端关联、五阶网元”法通过全流程的话单关联，深入相关性分析可能引入问题的网元，并针对话单细节分析找到问题根因。端到端业务定界定位技术说明20功能概述基础数据管理2客户服务31网络优化健康检查4规划建设56特定区域监控7基础数据管理基础数据管理基础数据是网络大数定位算法和分析工作的基础，数据及时、有效、准确、规范至关重要！及时性：支持实时导入、导出、在线和离线修改，支持变更通知。准确性：关联无线网元参数配置的大数据校正，关联无线+核心网侧的用户大数据校正。有效性：支持基础数据有效性检查，核查数据取值、数据规范、数据逻辑、空数据等方面的内容。规范性：支持基础数据库、网管、维护多方数据统一规范，周期性同步更新。基础数据管理上，尤其是针对天线参数数据，传统的检测管理方法，“耗时花力”难以做到及时、准确，运用大数据后，可以高效的发现和快速解决问题。基础数据管理天线参数检查关联无线+探针经纬度数据，得到准确的位置、小区、信号强度信息，不依赖于传统工参，算出小区实际天线参数并指导检查与调整。分析和GIS呈现经纬度异常小区、方位角偏差小区以及天馈接反小区，提升基础数据准确性；网优人员不需要上站检查，即可发现天线参数异常问题，指导射频优化，减少分析测试工作量，降低维护成本。天线工参记录的方位角实际覆盖区域案例1方位角错误案例2天馈接反天线工参记录的小区3方位角实际覆盖区域工参记录的小区1方位角实际覆盖区域23功能概述基础数据管理2客户服务31端到端网络优化健康检查4规划建设56特定区域监控724客户服务经过大量的用户感知数据、投诉数据分析，建立了一套含盖无线、核心网、互联网的综合感知评价体系。运用这套体系，实现对四川全部用户的语音和数据感知评价。针对评价差用户，自动进行原因分析，自动派单，自动验证，闭环管控处理，实现了对用户的主动服务。传统客户服务处理流理大数据客户服务处理流理25客户服务-用户感知评价CDMA+LTE用户感知评价语音感知打分=（无线信号质量+语音质量+接入失败+异常掉话）这四个维度的综合评价；数据感知打分=（无线信号质量+数据业务体验+接入失败+异常释放+3/4G重定向）这五个维度的综合评价；26客户服务-用户感知档案库用户感知档案库运用每日对用户感知评价数据，形成用户感知趋势曲线。同时在曲线相对应的时间点上，标注曾经对用户提供服务的记录，最终形成全生命周期的档案库。派单结单27客户服务-用户感知端到端分析用户感知端到端分析从无线、核心网、SP指标对用户感知进行端到端分析。1、无线综合分析：呈现全天无线环境，无线侧产生的异常事件及原因分析，2G/3G/4G的业务使用情况2、核心网综合分析：核心网相关网元分析3、主要SP指标分析：对主要SP指标进行对比分析，并找出存在问题的相关服务器28客户服务-质差用户主动服务自动派单在连续7天时间里，发现有4天以上感知差，系统自动派单，同时给出问题区域及处理建议自动验证系统进行自动跟踪和验证，持续5天效果变好，系统自动结单问题区域原因分析及处理建议29功能概述基础数据管理2客户服务31网络优化健康检查4规划建设56特定区域监控730网络优化优化思路：通过质差区域功能，实现网优工作方向由原来关注小区，到现在聚焦处理区域问题转变；工作方法由原来离散的覆盖分析、事件分析，转变成现在的大数据多维度自动分析、自动定位、派单、验证、闭环；质差区域：从异常事件入口，结合网络各种覆盖问题，分析区域的用户感知问题，综合评估出质差区域。得出质差区域后，系统自动分析覆盖、无线资源、参数配置、隐性故障、异常事件等方面的原因，生成综合优化建议，指导网络优化工作开展；针对质差区域，系统自动生成工单派单，回单处理后，系