大数据西安课件82

大数据时代与大数据应用姜国平新财富、水晶球团队成员宏源证券计算机高级研究员邮箱:[e-mail]手机：[phone]主要内容第一讲：大数据的认知框架第二讲：数据成为资产第三讲：行业垂直整合第四讲：泛互联范式第五讲：大数据飞轮之跨界颠覆第六讲：认识世界的新方法大数据用来预防犯罪播放视频本地播放谁知女人心播放视频本地播放用户行为反映真实需求大数据是人类历史上首个可以预测短期未来的技术引子大数据事关未来引子RayidGhani，主攻Machinelearning，埃森哲咨询的技术实验室的首席科学家，担任奥巴马总统2012选举团队的首席科学家。成立数据团队，每个选民用1000个变量来描述，每天晚上运算6.6万次……分析发现乔治·克鲁尼对美国西海岸40岁至49岁的女性具有非常大的吸引力……引子2011年网上电影销售超过苹果，同时创下历史上最高的股价决策失误纸牌屋基础设施的巨大飞跃0.000010.00010.0010.010.1110100100010000100000100000010000000100000000196019701980199020002010主内存闪存驱动器磁盘驱动器0.010.1110100100010000197019751980198519901995200020052010每秒周转次数（百万赫兹）前端总线频率（百万赫兹）转移数据量（百万兆）数据储存技术、网络技术的迅猛发展，为大数据时代的到来准备了物质基础。1977年，世界上第一条光纤通信系统在美国芝加哥市投入商用，速率为45Mb/s存储的价格从上个世纪60年代1万美元1M，降到现在的1美分1G的水平，其价差高达亿倍“智能手机+平板电脑”与“台式机+笔记本电脑”全球出货量对比图（2005-2015E）台式机笔记本智能手机平板电脑单位：百万2010年4季度，是历史的“转折点”智能手机加平板电脑的出货量超出传统的台式机和笔记本基础设施的巨大飞跃“智能手机+平板电脑”与“台式机+笔记本电脑”全球保有量对比图（2009-2015E）单位：百万2013年2季度，将是历史的“转折点”智能手机加平板电脑的保有量超出传统的台式机和笔记本基础设施的巨大飞跃0.50.81.21.87.9350510152025303540200820092010201120152020全球数据量全球数据量每两年翻一翻全球数据量增长预测（单位：ZB）（来源：IDC数字宇宙研究）万物数化重新理解数字世界现在……平板电脑/智能手机过去……台式机/笔记本引用自:Internettrends,byKPCB重新理解生活中的精彩瞬间现在……QQ空间，Facebook自动生成/好友评论/全球可见过去……照片墙/登门造访的好友才能看到引用自:Internettrends,byKPCB重新理解书籍现在……Kindle/iBook过去……引用自:Internettrends,byKPCB重新理解唱片现在……网络购买/口碑传播/联网终端播放过去……商店购买/唱片机引用自:Internettrends,byKPCB重新理解视频现在……优酷/爱奇艺/乐视过去……零售店引用自:Internettrends,byKPCB重新理解个人借贷现在……Lendingclub在线申请/费率低/分散风险过去……纸面申请/冗长流程/高费率/无差别风险定价引用自:Internettrends,byKPCB谷歌购买水电站为其数据中心供电大数据的特征和定义麦肯锡：大数据指的是大小超出常规的数据库工具获取、存储、管理和分析能力的数据集IDC：4个V，数据规模（Volume）、快速（Velocity）、多样的类型（Variety）据价值（Value）我们认为：大数据是指在各种各样的数据中，快速获取信息的能力Hadoop大融合数据大数据的国家意味www.gjzq.com.cnwww.gjzq.com.cn奥巴马政府投资2亿美元，启动“大数据发展计划”1993年至1998年，信息高速公路计划总投资4.68亿美元，撬动万亿美元大产业。戈尔提出“信息高速公路计划”12年3月22日奥巴马“大数据发展计划”1995年MaryMeeker开始发布《互联网报告》巴菲特买入IBM、Intel大数据的国家意味国家层面大数据技术领域的竞争事关一国的安全和未来。国家数字主权体现对数据的占有和控制。数字主权将是继边防、海防、空防之后，另一个大国博弈的空间。大数据的产业意味“当写完这些案例，回头审视产业的起起伏伏，发现产业兴衰的决定性因素，已经不是一城一池的争夺。土地、人力、技术、资本这些传统的生产要素，甚至需要追随“数据资产”，重新进行优化配置。”我仿佛看到了一个未来景象：传统产业、各行各业，都可能在大数据和移动互联时代，重现生机、焕发青春。当然，与此对应的是，凡是不能跟上这个时代步伐的企业和行业，命运就是永久地走进过去，退出未来的舞台。——和君咨询董事长王明夫苏宁、国美之战苏宁、京东之战基金出逃，弘毅认购张近东股票质押大数据的产业意味纯物理经济纯虚拟经济融合经济钢铁石油煤炭零售……搜索引擎网络游戏软件……电子商务……新的需求物联网移动互联网……大数据驱动产业的跨界、融合、颠覆谁拥有独特的数据资产，谁就能做金融！大数据的企业意味过去我们将企业的竞争“结构效率大于运营效率”，现在我们讲“结构效率、创新效率、运营效率”大数据时代网民和消费者的界限正在消弭；企业的疆界变得模糊；数据成为核心的资产，并将深刻影响企业的业务模式，甚至重构其文化和组织。大数据时代顺昌逆亡。如果不能利用大数据更加贴近消费者、深刻理解需求、高效分析信息并作出预判，所有传统的产品公司都只能沦为新型用户平台级公司的附庸，其衰落不是管理能扭转的。高层管理者中层管理者低层管理者基层员工层层下达指令层层上报汇总用户用户研发营销一级经营体：发现需求、创造需求制造二级经营体：资源提供者三级经营体：内部协同优化外部创新市场机会用户用户战略、文化、组织需要重新解构大数据的科学意味几千年来科学实验数百年来模型归纳数十年来模拟仿真今天数据密集型数据科学的兴起和发展，将深刻改变人类探索世界的思维和方法。天体信息学、生物信息学、遗传工程学、社会学等都会在数据学科的发展中受益。大数据的投资意味公司林林总总行业各有不同技术各有千秋各领风骚四五年产业怎么看？公司怎么看？穿透技术，掌握趋势大数据时代已经到来2011/52012/11麦肯锡发布大数据报告国金证券发布大数据系列报告，资本市场掀起热潮2011/122012/03奥巴马政府发布大数据发展计划，各国政府开始积极应对2012/04首家大数据公司Splunk上市数据科学与信息产业大会召开大数据的认知框架车联网RFIDGIS社会化网络OracleDB2Teradata移动互联大交易数据Hadoop大融合数据大行为数据TB+PB+数据成为资产行业垂直整合泛互联网化网络功能内生为应用的API。终端的价值和其数据流量与活性成正比。越靠近最终用户和消费者的公司，在产业链拥有越来越大的发言权公司价值与其拥有的数据规模、活性以及其解释、运用数据的能力成正比。数据资产演绎精彩的商业模式、推动公司变革。主要内容第一讲：大数据的认知框架第二讲：数据成为资产第三讲：行业垂直整合第四讲：泛互联范式第五讲：大数据飞轮之跨界颠覆第六讲：认识世界的新方法Splunk第一支大数据概念股票-20,000020,00040,00060,00080,000100,000120,000140,0002010年2011年2012年revenue（收入）operatingloss（运营损失）Netloss（净损失）Splunk收入情况（单位：千美元）注释：2012年表示从2011年2月初至2012年1月底的时间期间，其余类推洞悉未来的魔法水晶球•1华为如何预测公司业绩？•2马云何以推断经济危机？数据资产的水晶球特征•关于数据资产的几条建议：•“天下武功，唯快不破”。越快的处理数据，越早的获取信息，就会越及时的做出商业选择。•更多的数据来源，比更多的数据量更重要。这也是为什么数据资产评价模型中，把关联性、和多维度作为一个重要的指标•数据富含多种信息，取决于观察视角。不要因为短期内没有用途，而随意丢弃。•面对数据量指数般的增长，要早做打算。•大数据不是核心问题，要聚焦于业务发展，善于从大数据中挖掘利于业务发展的信息。•分享，而非保密。数据在流动中增值。流水不腐户枢不蠹。雅昌：设于1993年深圳，业务定位：印刷；目标集聚战略--印刷中的一个细分市场即彩色艺术印刷。使命与目标：成为最具竞争力和最具盈利能力的艺术印刷公司。竞争要害的变迁：第一阶段，拼技术和设备--拼资金拼胆量拼速度！第二阶段，拼服务！1995年，雅昌提出印刷业是服务业，要求员工做到：客户想不到的我们也要想到做到；不仅让客户满意，而且让客户感动。“第三阶段，拼系统解决方案！建立“业务项目”意识，对每一项业务的背景及其前因后果进行系统分析和策划，进而将服务提前介入和向后延伸。彻底让客户省心、满意！结果：产品质量一直居广东三甲地位，频频获奖，包括中国毕昇奖、美国BennyAward金奖（被誉为全球印刷界“奥斯卡”）、赢得了《北京奥运会申办报告》和《上海世博会申办报告》等的印制业务。形势：质量好、服务好、系统解决方案好，客户增，市场份额越来越大，盈利喜人。尤其在提供艺术类印品解决方案、拍卖行业印品解决方案及大型企业印品解决方案等方面即形成了核心竞争力。在国内拍卖业的印刷业务中，份额高居95%之多，几乎形成独家垄断地位。至此，雅昌战略目标达成，成为了一个最具竞争力和最具盈利能力的艺术印刷公司。想一想：一个印刷公司，下一步的成长空间在哪里，发展战略怎么选择？向非艺术类的印刷领域迈进？升级为印刷控股，并购或控股其他印刷公司？抓住暴利机遇，进入房地产或证券业或矿业或煤炭？······真实情景中的战略分析与选择事实的选择：从使命愿景的修订开始--雅昌要做最优秀的文化产业，而不仅是印刷厂。资源基础：中国艺术品数据库门户网站：雅昌艺术网拍卖行情发布：雅昌艺术网通过自身开发的“中国艺术品拍卖市场行情发布系统”，每年提供各大拍卖公司400多次中国艺术品拍卖专场、12万多件艺术品的网上预展信息服务。“雅昌艺术市场指数（AMI）”，成为艺术品投资分析工具和艺术品市场行情的“晴雨表”。让艺术家、买家、收藏家粘上雅昌，就像股民粘上股指。数据积累和垄断：积累了1993年至今2000多个专场、70万件中国珍贵艺术品的交易资料（图片、尺寸、估价、成交价、拍卖公司、拍卖日期和印鉴题识等详细资料），而且正以每年近10万件拍品的速度递增图片和成交数据。战略选择：雅昌将遵循以最低的成本收集资源、解决安全和版权问题、不断开发商业价值三个原则，将雅昌艺术网打造成为全球艺术家展示与分享艺术的舞台，更成为全球艺术家享受雅昌优质服务的平台。从物理资产像数据资产蜕变拥有6万余名艺术家、2000多万件艺术品的电子图文资料，形成“中国艺术品数据库”企业遗嘱：“不管雅昌将来遇到什么困难，雅昌‘中国艺术品数据库’保存的数据不属于某一个人，也不属于某一个企业，它将永远属于国家、民族和整个人类。”完成夕阳产业的时尚逆袭数据使能雅昌业务轨迹回顾：印刷—数据库—艺术门户网站—艺术品行情发布---拍卖---持续积累和垄断艺术品数据—数码艺术资产管理—艺术策划、展览、摄影—衍生品：CD-ROM、视频、电子书—艺术品收藏和艺术馆思考与启示：1、BigdataIsAmazing；Itwillchangeanything!2、在战略思考中，传统的产业概念需要全新审视，很多时候，“所谓产业，由你随便划，如果你有数据的话！”3、商业模式的识别和创新，实在是博大精深、商无止境！看待一个企业的战略价值，需要关注它是否可以持续的采集某类数据资产，是否具有足够的延展性，能否不断兼容和衍生新的商业模式和赢利区域！4、公司的价值与其数据资产的规模和活性成正比，与其解释、运用数据