基于电信大数据的业务预测模型构建与系统实现

1密级：保密期限：硕士学位论文题目：基于电信大数据的业务预测模型构建与系统实现2基于电信大数据的业务模型预测系统摘要本文所讨论的基于电信大数据的业务模型预测系统来源于中国移动公司新疆分公司的企业委托项目。系统包含数据采集与处理组件、数据存储组件、分析应用组件、交互展示组件、用户与权限管理组件、数据管理组件。本文内要主要涉及平台中的数据采集与处理、结构化数据存储，以及家庭客户分析、语音业务分析、流量分析、集团客户分析，4个主要业务模型分析的算法实现。系统综合运用数据清洗、结构化数据库、Hadoop、数据分析、报表统计等技术手段，设计并实现了新疆移动分公司的语音评估模型体系、流量评估预测模型体系，集团客户价值评估体系、家庭客户价值评估体系等，可以更科学的指导网络资源的配置、营销、人力各类资源，推进公司实现持续健康发展。论文工作包括：设计并实现了家庭客户分析、语音业务分析、流量分析、集团客户分析，这4个主要业务模块从数据源采集、数据过滤清洗、数据存储、数据分析、结果图表交互展示的整个过程。关键词：数据清洗数据存储数据分析Hadoop报表统计ForecastingSystemofBusinessModelBasedonBigDataof3TelecommunicationBusinessAbstractThispaperdiscussestheforecastingsystemofbusinessmodelbasedonbigdataoftelecommunicationbusiness,andthesourceofthispaperisfromprojectentrustedbyChinaMobileGroupXinjiangCompanyLimited.Thissystemcontainsdataacquisitionandprocessingcomponents,datastoragecomponents,analysisapplicationcomponents,interactivedisplaycomponents,userandauthoritymanagementcomponents,datamanagementcomponents.Withinthispapermainlyrelatestotheplatforminthedataacquisitionandprocessing,storageofstructureddata,aswellasthefamilycustomeranalysis,voicetrafficanalysis,trafficanalysis,groupcustomeranalysis,fourmainbusinessmodelanalysisofthealgorithm.Platformintegrateduseofdatacleaning,structureddatabase,Hadoop,analysisofdata,reports,statisticsandothertechnicalmeans,thedesignandimplementationoftheXinjiangmobilebranchmarketevaluationmodelsystem,personalcustomerforecastmodelsystem,thegroupcustomervalueassessmentsystem,familycustomervalueassessmentsystem,etc.,canbemademorescientificguidanceofnetworkresourceallocation,marketing,humanresource,promotethecompanytoachievesustainedandhealthydevelopment.4Theworkofthispaperinclude:designandimplementthefamilycustomeranalysis,voicetrafficanalysis,trafficanalysis,customeranalysisgroup,thefourmainbusinessmodulefromthedatasourcefortheacquisition,datacleaningandfiltering,datastorage,dataanalysis,resultsinteractiondiagramsshowthewholeprocess.KeyWORDS:datacleaningdatastoragedataanalysisHadoopreportstatistics5目录第一章绪论.........................................................71.1.项目背景及意义...............................................71.1.1.项目背景...............................................71.1.2.项目意义...............................................71.2.应用研究现状.................................................81.2.1.研究现况分析...........................................81.2.2.移动新疆分公司应用现状.................................91.3.论文组织结构................................................10第二章电信大数据业务模型预测系统总体设计..........................112.1.系统需求分析设计............................................112.1.1.系统功能需求..........................................112.1.2.系统性能需求..........................................152.2.系统业务模型预测流程设计....................................172.3.系统总体架构设计............................................212.4.系统技术选型分析............................................23第三章电信大数据业务模型预测系统功能设计..........................273.1.系统功能设计................................................273.2.系统数据采集与质量管理......................................273.2.1.数据采集清洗..........................................273.2.2.数据质量管理..........................................323.3.系统数据存储................................................333.4.语音业务发展预测............................................343.5.流量业务发展预测............................................363.5.1.自上而下分析模型......................................363.5.2.自下而上分析模型......................................373.6.家庭客户分析................................................393.6.1.城镇家庭客户分析......................................393.6.2.农村家庭客户分析......................................4163.7.集团客户分析................................................433.7.1.集团客户价值评估......................................433.7.2.集团客户专线预测......................................45第四章系统展示与应用示例..........................................464.1.系统软硬件开发环境..........................................464.1.1.系统硬件环境..........................................464.1.2.系统软件开发环境......................................474.2.系统界面组成................................................474.2.1.系统后台管理主界面....................................484.2.2.系统数据管理界面......................................494.2.3.系统核心业务分析界面..................................504.3.系统核心业务模型预测案例....................................524.3.1.语音业务发展预测案例..................................524.3.2.流量业务发展预测案例..................................544.3.3.城镇家庭客户分析案例..................................57第五章应用结果和评价..............................................59参考文献...........................................................61致谢................................................错误!未定义书签。7第一章绪论1.1.项目背景及意义1.1.1.项目背景“大数据”无疑是最近几年最热门的词语，“大数据”最早是由全球最著名的咨询公司麦肯锡提出，麦肯锡的观点：大数据“是创新、竞争和生产力的下一个前沿领域”，可以利用“大数据”回答以前我们无法涉及的领域问题，并且可以从中获取知识和见解，定位趋势走向并利用这些数据来提高生产力，赢得行业内的竞争优势。电信运营商拥有多达几十年的业务数据积累，拥有像业务、销售、市场等结构化数据，也会涉及到文本、音频、图片、视频等非结构化数据。从数据来源看，电信运营商的数据来源于涉及固定电话、固网接入、无线上网和移动语音等所有业务，也会涉及家庭客户、公众客户和政企客户，同时也会收集到直销渠道、电子渠道、实体渠道等所有类型渠道的接触信息。当前国内外电信运营商大都面临“管道化”的困境，OTT业务对传统语音、短信等业务的替代趋势逐渐加剧，电信运营商的数据业务在众多移动互联网应用面前已呈现颓势，如何在流量经营时代突破重围、实现自我救赎已成为国内外电信