英特尔中国研究院首席工程师吴甘沙《大数据的发展脉络：见自己,见天地,见众生》

1大数据发展脉络见自己，见天地，见众生@吴甘沙首席工程师，英特尔中国研究院2科学技术革命的宏观规律科技革命周期18世纪19世纪20世纪21世纪第1次机械化第2次电气化第3次信息化„第3.5次？第4次？经济波动周期(康德拉季耶夫)长波1长波2长波3长波4大科技革命的下一波高潮呼之欲出长波53信息技术革命的小周期132架构化1950-1970数字化1970-1990网络化1990-2010+物联网云计算大数据SomethingBigisHappeningNOW移动互联网4智慧化4大数据的应用模式5见自己（个人）1:1MarketingNanotargeting和Retargeting6见天地7见众生CancerGenomicsKnowledgeGraph8北京吉林辽宁天津江苏上海浙江陕西甘肃四川广东图例规模星级水平重庆山东湖南湖北河北黑龙江福建安徽珠三角17.1%环渤海20.3%长三角26.1%内蒙古智慧城市投资规模分布图带动的IT投资（单位长度10亿元）南海诸岛截至2012年底，我国已有154个城市提出建设智慧城市，41个地级以上城市在“十二五”规划或政府工作报告中正式提出建设智慧城市，80%以上的二级城市明确提出建设智慧城市的发展目标。可以说，智慧城市已在中国遍地开花。区域IT投资占比Courtesyof张涛CCID广州着力建设“智慧树”•建设“树”型智慧城市框架，囊括交通、信息服务、电子政务、城市综合管理、医疗、社区、市民卡等各方面。南京等重点铺开•由政府指导、电信运营商建设•围绕物联网技术，打造江苏智慧城市13个市分站。北京已全面启动•将围绕城市智能运转、企业智能运营、生活智能便捷、政府智能服务等方面，全面启动“智慧城市”建设工程。上海将建设国际型智慧城市•将在2013年底达到“基础设施能级跃升、示范带动效应突出、重点应用效能明显、关键技术取得突破、相关产业国际可比、信息安全总体可控”的目标。9DRAGONDRAGON时代的软件定义城市DatadrivenResilientAutomatedGamifiedOpenNetworked10通往DRAGON时代的必经之路新的大数据思维方式和方法学新的大数据生态系统和服务模式新的大数据采集、存储、管理、计算和安全技术11快杂大大数据的新思维(一)12大数据的新方法学(一)数据极大丰富前提下的新分析思维和技术多数据源的整合大数据+小算法实时性绝对的精确性描述性分析预测性和处方性分析基于主观因果假设机械穷举相关关系采样数据全集数据+上下文+知识积累13智能交通:多数据源的集成浮动车GPS:20M/day交通卡:19M/day出租车运营数据:1M/day高速路收费数据:0.5M/day手机位置信息:18M/day居民调查:80000户GIS数据视频/图像数据和元数据:100sofTB/day供水系统智能电网睡眠质量社交网络情感分析部分数据来源:BeijingTOCC14大价值大数据的新思维(二)15大数据的新方法学(二)数据资产、数据产品和社会化分析服务的货币化数据民主化和开放数据数据市场和数据定价社会化分析服务16数据数据产品和服务数据中介服务大数据的生态系统数据拥有者数据中介数据技术公司17智慧城市公共数据和服务平台城市操作系统城市应用商店数据交易市场DaaS/AaaS:数据定价和权利SaaS:城市,政府,企业,个人IaaS/PaaS:跨DC、多范式18大数据的技术栈计算、互联和存储数据处理和管理数据分析可视化应用和服务编程和管理工具数据权利19大数据系统的设计权衡大体量精确性实时性基于采样的查询流计算批量计算惰性数据的即席查询增量计算Littledata(个人计算)城市计算内存计算20Intel参与和资助的大数据计算范式ApacheMesosSparkGraphSparkStream21谁拥有数据？谁能用数据？谁在用数据？管理边界在哪里？道路状况数据库行车记录仪电子病历社交媒体数据道路摄像头22数据的拥有权、隐私和使用知情权•保障拥有权：法律与技术缺一不可•隐私与服务的辩证法–隐私数据的使用完全失控•数据拥有者对数据的使用可审计–数据有几份拷贝–分别在哪里–谁在使用它–数据转换中“血统”的存续–产生了多少价值–利润分享模型(数据GPL)23通往DRAGON时代的必经之路新的大数据思维方式和方法学新的大数据生态系统和服务模式新的大数据采集、存储、管理、计算和安全技术24敬谢聆听