大数据时代给中国移动带来的挑战与机遇56

“做中国移动运营支撑化时代的战略合作伙伴”“大数据时代”给中国移动带来的机遇和挑战亚信联创科技（中国）有限公司Page1大数据左右美国政界，助力奥巴马连任据国外媒体报道，日前撰文对奥巴马竞选团队在本届大选中所使用的全新数据分析战略做出了一番剖析。外媒记者认为，竞选团队幕后的数据分析团队在此次奥巴马连任的过程中发挥了至关重要的作用，其重要性甚至远远超越了人们的想象。而在此次大选尘埃落定后，政界的“大数据时代”已经到来。这货连任真的多亏了大数据？Page2奥巴马连任的机密：“大数据”制胜的四大法宝数字竞选团队“我们会在此次竞选活动中对每个事件进行数据分析。”团队聘请了一大批分析员，人数规模甚至达到了2008年竞选时数据分析部门的五倍整合信息资源奥巴马竞选团队的一位官员表示：“我们知道，民主党的问题就在于拥有了大多的数据库，且没有哪两个数据库是相同的”。因此，在总统竞选前的18个月，竞选团队就创建了一个庞大系统，这一系统可以将民调者、注资者、工作人员、消费者、社交媒体以及“摇摆州”主要的民主党投票人的信息进行整合。竞选结果预测奥巴马的数据分析团队此前曾在关键州收集数据，并建立了4条投票数据流，用于拼凑出当地选民的详细数据模型。奥巴马的数据分析团队可以更清楚的了解每类人群和地区选民在任何时刻的投票倾向。开辟第二战场奥巴马竞选团队首次利用Facebook这些社交网络进行大规模的游说，就像此前挨家挨户敲门拉票的方式一样。数据还帮助奥巴马竞选团队更好的作出了广告购买的决策。在选择广告投放渠道时，他们没有依靠外部顾问，而是基于内部数据得出结论。Page3大数据对奥巴马连任的影响价值了解用户要什么，你才能知道如何让他们打开钱包了解用户的行为，你可以花最少的钱办最大的事与用户进行个性化互动，赢得更多青睐--客户使用感知--客户费用感知--客户服务感知Page4提纲大数据处理分析的起源大数据处理技术与行业发展大数据时代分析中国移动流量运营123大数据时代流量运营支撑运营能力实现4大数据改变世界Page5大数据5V核心定义Page6大数据:从交易数据到交互数据BIGDATAPage7•背景-初始资金有限-早就意识到信息是他们最大的资产-一旦成功，能获得巨大的收益-高端人才池–硅谷计算机科学家•迫使建立自己的分析模式-支付不起当前的技术-当前的技术无法支持他们所需用的需求互联网产业孕育了大数据分析•结果-在线广告比离线方式可以更精确的定位客户-大数据集的使用是他们的战略优势-这些公司已经建立了一种文化、流程和技术，进行大数据的分析处理（传统企业尚未建立）IDEASPage8提纲大数据处理分析的起源大数据处理技术与行业发展大数据时代分析中国移动流量运营工作123大数据时代流量运营支撑运营能力实现4大数据改变世界Page9大规模的数据增长随着越来越多的数字化内容（主要为非结构化数据）的分析作为主要驱动，在2012年将会产生2,500Exabytes的新数据/信息（1EB=1024PB）去年全球数字化数据量增长62%，达到800EB，今年会增长到1.2ZB。（1ZB=1024EB)Source:AnIDCWhitePaper-sponsoredbyEMC.AstheEconomyContracts,theDigitalUniverseExpands.May2009.RelationalComplex,Unstructured而且80%的数据都没有存在于传统企业级数据仓库Page100%10%20%30%40%50%60%70%80%90%OtherRichMediaDataDatafromESBorWebServiceEventorMessageDataWeblogsUnstructuredFileDataPackagedApplicationDataXMLDataStructuredLegacyDBMSDataStructuredFileDataStructuredRDBMSData多样化的数据类型†Source:AnalyticsPlatforms–BeyondtheTraditionalDataWarehouse,Surveyof223companies.BeyeNetwork2010在传统DBMS/EDW之外的数据类型53%的公司受到困扰：无法分析存在于DBMS和EDW之外的数据。Page11大数据分析与传统分析的差异Page12云计算等革命性技术的发展奠定了大数据处理技术基础•以Hadoop为代表的云计算技术使得对PB级的海量非结构化数据的处理和存储成为可能•构建在X86平台上的MPP数据仓库提高了横向扩展性，并使得海量结构化数据的处理和存储成为可能•万兆以太网等技术使得大规模数据中心成为可能•OTN技术以及近几年对传输基础设施的投入，使得跨地域大量数据的传输成为可能50GInfiniband10GEthernet40GEthernetOTNPage13大数据分析在各行业的应用如何充分利用电子渠道？Web营业厅、wap营业厅互联网行业金融和保险行业零售业媒体和信息服务业•社交网络图形分析•众包分析•病毒式营销分析•内容定位分析•点击流分析•实时欺诈和链接分析•勾选数据分析•交易监控分析•多变量的保险定价分析•行为模式匹配•数字媒体渠道营销归属•在线消费者行为/模式•点击流分析•网站动态定位个性化/推荐•时间序列预测和预报•点击流分析•数字媒体消费者微定位•广告优化Page14通过大数据实现智能城市和物联网Page15大数据转变为商业价值的能力已经被互联网公司验证手握核心用户资源与大数据资产的运营商作为管道，数据战略资产白白流过。淘宝已级开始分析运营商的数据做精细营销了。第15页Page16大数据分析：淘宝为例信息量大、结构复杂、源数据质量不高、保存周期短Page17大数据不同数据源的解决方案获取分析组织MapReduceSolutionsDBMS(DW)DBMS(OLTP)AdvancedAnalyticsDistributedFileSystemsTransaction(Key-Value)StoresETLNoSQL灵活针对特定场景开发能力主导SQL久经考验安全可控“HighDensity”信息密度“LowDensity”Schema-lessUnstructured数据发散程度SchemaPage18淘宝的数据平台：Hadoop+关系数据库Glider对各个异构数据源（Hbase,MySQL）进行高度抽象，并在此基础上进行通用的JOIN、UNION、排序、去重、表达式求值等计算。Page19提纲大数据处理分析的起源大数据处理技术与行业发展大数据时代分析中国移动流量运营工作123大数据时代流量运营支撑运营能力实现4大数据改变世界Page20移动互联网下的数据大爆炸催生中国移动“大数据”分析更多接入设备更多智能手机流量个性化需求更多的内容/应用在移动数据流量上将增长3900%，从2009~2014年Page21从移动互联网大数据分析移动流量运营应用/服务网络终端用户直接需求携手产业链中的合作者，在满足用户需求的过程中，提供良好的用户感知，从而实现客户保有、流量提升和收入增长网络和费用终端选择和使用应用推荐和内容推荐Page22大数据时代客户感知的运营策略网络使用感知：1、基于用户移动互联网需求的网络覆盖2、基于用户个性化需求的网络带宽提供3、引导2G用户使用更高速率的3G和WLAN网络应用使用感知：自有及第三方应用的产品能力提升终端使用感知：解决智能终端网络使用问题提升客户使用感知提升客户服务感知提升客户费用感知用户保有+流量提升+收入提升计费策略感知：充分考虑不同用户在应用、时空、终端等方面个性化的需求，进行差异化的资费设计，满足用户需求付费模式感知：通过流量付费模式的变革，减轻用户的资费负担，突破用户的费用支付瓶颈主动服务感知：综合分析用户的使用需求，在网络、应用、终端等方面形成常态化的主动服务和营销机制被动服务感知：建立流量经营服务专席，提升客户感知Page23构建从目标、策略到能力的流量运营体系保证运营策略能够顺利实施，需要具备的运营能力是什么•客户需求洞察能力•策略匹配执行能力•运营平台开放能力具体战略目标是什么•基于客户需求满足的客户保有流量提升收入提升实现战略目标的运营策略是什么•提升客户使用感知•提升客户费用感知•提升客户服务感知Page24提纲大数据处理分析的起源大数据处理技术与行业发展大数据时代分析中国移动流量运营工作123大数据时代流量运营支撑运营能力实现4大数据改变世界提升客户服务感知提升客户费用感知提升客户使用感知Page251、形成用户网络使用感知视图，提升整体网络建设效能①确定需求用户用户潜在用户互联网需求终端支持通过用户建模⑤确定基站满足度基站内热点数量统计通过热点容量累加基站位置需求满足能力基站重合覆盖位置考量基站位置的需求满足度④基站需求统计总计用户量固定位置需求量统计临时位置需求量统计工作时间需求量统计休闲时间需求量统计②确定需求位置用户位置分析固定位置长期需求临时位置短期需求用户位置确定潜在用户位置确定⑥布局选址建议基站位置新建热点建议基站位置扩容热点建议③确定需求时间用户时间分析工作时间需求休闲时间需求用户时间确定潜在用户时间确定建立业务、网络、支撑等部门的协同工作机制，提升投资计划的有效性网络使用感知应用使用感知终端使用感知Page262、实现基于用户价值流量带宽保障，以及基于应用价值的带宽合理分配网络占用流量消耗高高根据应用产生的流量及网络占用情况，采取不同的策略：对低流量消耗、高资源占用的应用，采取带宽和接入优先级的QoS限制对高流量消耗、低资源占用的应用，采取带宽和接入优先级的QoS保障基于应用的带宽调整策略用户等级流量需求高高根据用户的等级及流量使用情况，采取不同的策略：对高等级/VIP用户进行带宽/接入优先级保障基于用户的带宽调整策略网络使用感知应用使用感知终端使用感知Page27场景示例：高价值用户的带宽保障VIP用户王女士在机场打开其移动设备，接入网络收听音乐系统检测到王女士正在使用网络后，立即获取王女士的用户信息，根据相应规则判断王女士的用户等级以及所对应的网络服务等级系统实施提升王女士的网络带宽，使王女士收听以及下载音乐的过程快速、便捷可用性动态性实时性需要实现对客户的实时感知，包括客户等级、所处网络的质量；同时需具备网络带宽供给的实时分配能力。网络使用感知应用使用感知终端使用感知Page28场景示例：低价值客户的带宽限制电信运营商T-Mobile为用户设计的上网卡包月数据流量套餐，超出套餐规定的流量后并不收费，降低用户的网络的连接速度。网络使用感知应用使用感知终端使用感知Page293、通过对用户进行从低带宽网络向高带宽网络的引导，提升用户的使用感知互联网渠道引导用户分流引导场景：网络变化传统分流提示方式WLAN客户端热点提示贴短信提示张先生是个微博控，某天他边上网，边进了一家咖啡店咖啡店有CMCC的WLAN热点覆盖张先生微博客户端上打开了一段视频内容，此时客户端的窗口弹出了网络切换的提示张先生根据提示，选择切换到WLAN网络，完成了网络切换，并且由微博客户端实现了WLAN的认证。张先生切换到了更高速的网络网络使用感知应用使用感知终端使用感知Page304、基于对互联网的热门内容分析提升手机彩铃等自有业务的产品能力网络使用感知应用使用感知主题产品形式产品内容用户群信息深宫谍影影视原声影视剧原声彩铃年龄、性别…业务属性：品牌、套餐、营销敏感度、业务倾向性、活跃度、….….………..网络爬虫/DPI分类技术移动互联网访问内容视频类搜狐视频新浪视频奇艺网土豆网优酷视频酷六视频音乐类新浪铃声百度音乐搜狐彩铃网易视听…移动互联网内容排名分析/通用格式/通用格式/通用格式/通用格式/通用格式/通用格式新浪搜狐奇艺优酷…各视频网站音乐点击量排名上升分析根据内容找用户群主题主题信息用户群信息深宫谍影连