走近大数据(贵阳)

宣讲：周矩贵州省委讲师团综合教研室主任科学理论上讲堂2016.5.25数博会大数据是继传统IT之后下一个提高生产率的技术前沿麦肯锡全球研究院(MGI)《大数据：下一个创新、竞争和生产力的前沿》麦肯锡公司是全球最著名的管理咨询公司，在全球44个国家和地区开设了84间分公司或办事处。麦肯锡目前拥有9000多名咨询人员，分别来自78个国家，均具有世界著名学府的高等学位。习近平总书记说：我听懂了，贵州发展大数据确实有道理陈刚1990年8月参加工作，研究生毕业（北京大学化学系无机化学专业），理学博士，教授级高级工程师。曾任中共北京市朝阳区委书记，中共北京市委常委等职务。2013年7月起，任中共贵州省委常委、贵阳市委书记。引言：贵州大数据的起步王小兰：时代集团公司总裁柳传志：联想集团有限公司董事局名誉主席维克托•迈尔-舍恩伯格1、地质优势贵阳尚未发生5级以上具有破坏性的地震。所以，在贵阳建大数据中心、分中心、灾备中心，的确是不错的选择。贵州发展大数据的优势2、能源优势数据中心要运转，靠什么，靠电。贵州有电啊，咋不差电，水、火、风、光、地互济。3、气候优势年平均气温为15.3℃，省好多电费呢。4、政策优势贵州搞大数据最大的优势就是政府高度重视，已经制定以下措施：A.争取获批建设互联网骨干直联点；B.加快“宽带贵州”建设；C.实现城镇建成区、高速公路、高速铁路沿线移动网络有效信号全覆盖；D.办好云上贵州·大数据招商引智(北京)推介会和全省大数据战略行动推进大会；E.争取更多有分量的大数据企业落户贵州。大数据和网络强国等战略，为我省弯道取直、后发赶超创造了宝贵契机力争国家支持贵州作为国家级数据交换南方中心、国家面向西南和东盟的数据服务基地，将贵阳增设为国家级互联网骨干直联点，打造全国信息交换枢纽。十三五：贵州将大数据定位为实现后发赶超的战略契机贵州大数据产业发展现状贵阳大数据产业技术联盟，聚集了英特尔、戴尔、华为、甲骨文等食品安全云、电子商务云、金融云等20朵云投入运营2015年高新区新增注册大数据企业达607家贵州大数据产业规模总量已超过5000亿元，年均增长20%以上高通、富士康、微软、阿里巴巴、腾讯、京东、百度等200多个大数据项目落户贵州注册企业达到1.7万家1.什么是数据数据(data资料)是事实或观察的结果，是对客观事物的逻辑归纳，是用于表示客观事物的未经加工的的原始素材。数据是信息的表现形式和载体，可以是：符号、文字、数字、语音、图像、视频等。条数据：例如一套房子定位数据：北纬26度,东经106度；用数字和字母书写是：26°N,106°′E.定性数据：贵阳市南浦路X号X单元号（靠近省委、十八中学、甲秀小学）定量数据：建筑面积90，使用面积75定时数据：建于1987年，1998年购置信息数据：周矩，男，XX岁，电话[phone]结论：估价45万2.大数据概念（1980年，托夫勒在《第三次浪潮》首提大数据）2008年，部分计算机专家首次提出大数据概念。2011年，麦肯锡公司发布《大数据：创新、竞争和生产力的下一个新领域》报告，大数据开始备受关注。2012年，美国政府发布了《大数据研究和发展倡议》，标志着大数据已经成为重要的时代特征。2013年，大数据元年，数据成为资源，几乎所有世界级互联网企业，都将业务触角延伸至大数据产业。2014年3月1日，贵州·北京大数据产业发展推介会在北京隆重举行，贵州大数据正式启航。2015年9月5日，国务院印发《促进大数据发展行动纲要》，大数据上升为国家战略。2009年，美国政府通过Data.gov网站开放政府数据。大数据与传统数据传统数据：普查数据统计数据抽样数据测量数据例如：国民经济和社会发展统计公报大数据有两层含义：一是海量数据，指其量大，或者称为全数据；二是指分析方法，指的是对所有数据进行分析大数据的5V特点（IBM提出）：Volume大量（积累性）Velocity高速（即时性）Variety多样（多维度）Value价值（有用性）Veracity真实性（客观性）传统数据主观统计（抽样）大数据客观统计（全数据）基本定义：大数据是指其大小超出了典型数据库软件的采集、储存、管理和分析等能力的数据集合。“大数据”与“大规模数据”的最大区别，就在于“大数据”这一概念中包含着对数据对象的处理行为。如何界定大数据智能数字采集（数字化）实时同步上传（云聚集）智能即时分析（云计算）自动需求发布（云推送）各种数字化设备采集同步传输到数据云（云存储）智能软件分类、归纳、分析，生成结果自动按需求发布到特定用户什么是“数字化”二进制：0（关）1（开）二进制编码：阿拉伯数字690102819104对应各数字的二进制编码：这几位条形码的二进制编码是：0110100100000001000000101000000110010001000001000011。数字化不是“数字”，而是编码化的“数据”3.大数据与云计算要搞清楚什么是“大数据”，首先得弄明白什么是“云”。不是天上的“云”，是“数据云”。“大数据”就是依靠各种自动采集手段获取的“天量数据”，并通过“云计算”自动处理、分类、分析，使大数据中所蕴含的价值得以发掘和展现。数据从何而来：人人都是数据源●人在街上走，数据被采集●人在家中坐，数据被上传只要你是活人，有行为，就会产生数据。比如，你在街上走，你就会被摄像头拍到。据说你每次上街平均会被拍8次；只要你看电视、用电脑、玩手机、打电话，数据就会被上传谁拥有大数据A.政府：（80%）贵阳在尝试政府数据开放（将条数据脱敏后向企业开放）交通、人口、医疗……B.电信：客户数据（实名制）通信数据C.银行：客户数据（实名制）金融数据（信用）如何制作炸弹D.网络平台搜索平台、电商平台、门户网站百度、阿里（淘宝）、腾讯（QQ、微信）、搜狐、新浪、你喜欢上网、喜欢百度搜索，告诉你，你的每一次点击都有记录。输入了什么“不雅”词汇，有什么特殊爱好。你会想，它不知道我是谁。但它知道你的使用电脑的IP地址……。很多程序要求你用手机号注册……所以很容易知道你是谁。智能手机GPS定位大数据的有用性在于：发现逻辑关联，得出科学结论。马云说：做淘宝不是卖货，而是为了获得大数据，获得零售和制造业数据。电脑会比你更了解你，大数据的核心不是对昨天的总结，而是对未来的预测和预判。4.大数据有什么用A商用大数据有效制造（预判消费，减少库存）精准广告（特定群体投放）信用兑现（方便信用调查）B公用大数据智能电网（有效调解发电量）智能交通（缓解拥堵）疾病预防（方便就诊）生态监控（空气、水质、土壤）21C政用大数据社会治理（危机预判）数据铁笼（反腐系统）“数据铁笼”：数据政用新构想管人：“是否来上班、上班干什么、干得好不好”，全程记录管权：权力运行全程电子化、处处留“痕迹”，让权力在“阳光”下清晰、透明、规范运行，置于社会公众的监督之下。管官：收入、财产（固定资产、存款）、消费行为……，网上行为，写什么、看什么、评什么、转什么……数据显示贵阳堵车指数：每个限行日允许通行一环的贵阳原段号牌和专段号牌小客车2周一为383071辆（1、6）3周二为385418辆（2、7）1周三为378852辆（3、8车最少）5周四为425534辆（4、7车最多）4周五为386440辆（5、9）中国堵城排行：北京杭州排第2第3第1是济南贵阳上榜全国十大最堵地级以上城市贵阳平均上班路途时间长达73.2分钟堵在贵阳是常态4月29—5月5日阅读数据微信分析案例微信后台管理数据：送达293人关注人群阅读15次公众号转发1次朋友圈再次转发72次朋友圈阅读1263次29日617次30日198次1日61次2日120次3日781次4日4115日215总计：1690人2403次读者地域分布（23省市）读者性别及使用使用手机品牌商业应用案例——百度旅游景区预测大数据2014年国庆，九寨沟运用百度大数据预测，预测游客数为188898人次，实际数为177159人次，准确率为93.79%。2013年10月2日，九寨沟景区因游客太多，导致交通线路瘫痪，拥堵数公里长。其间，甚至出现游客“攻陷”售票处的传闻。根据预测数，九寨沟从“吃、住、行、游、购、娱”等方面着手，提前做好各项准备工作，并发广告，超过接待4.1万人就停售门票，成功应对了10月4日旅游高峰期。政府治理案例——贵阳利用大数据打“黑车”凡属于选择行车路线不经济的、经常到人员密集地段“趴活”的、频繁上下不同乘客的，即可判断为“黑车”统计学判定模型嫌疑职业黑车分类器行为持续出现天数阈值d人工确认黑车特征普通私家车特征机器学习判定模型每天过车记录数阈值m出租车特征每天经过卡口数n嫌疑黑车全集待分类样本经分类确认的黑车样本结果分析嫌疑黑车数量在上午7时后逐渐增多，在下午3-6时达到最大值；全部嫌疑黑车8408辆，嫌疑职业黑车4705辆，而中心城区出租车6922辆民生服务案例——健康云平台以互联网推动医疗资源均衡以信息化促进医疗服务能力提高以大数据助力医疗事业的创新发展全面性健康档案电子病历人口个案所有核心的诊疗数据实用性居民管理综合监管诊疗数据平台服务以云技术为支撑实时获取医疗健康数据支撑医疗业务的实时运转实时性332014-02-28贵阳生态监控（水、空气、土壤）2015年10排名依次为：１毕节市２兴义市３安顺市４六盘水市５铜仁市６凯里市７都匀市８贵阳市９遵义市贵州省环保厅发布全省13个设市城市环境空气质量排名2016年1月排名依次为：1兴义市2凯里市3毕节市4都匀市5铜仁市6安顺市7六盘水市8贵阳市9遵义市5.如何挖掘大数据大数据是一个富矿，但如何挖掘，并使其产生巨大的社会效益和经济效益还没有现成的经验和成熟的模式银行账户实名制、手机实名制、飞机实名制、火车实名制、微信实名制，人在干、天在看、云在算，一切社会行为，都是数据，海量数据就是“大数据”。有行为、有数据、有存储，有什么用呢？通过采集、存储、归类、分析，就知道哪里堵车、哪里消费能力强、喜欢什么产品、吃什么、玩什么、有多少人生病、生什么病……于是数据就产生了价值。数据的有用性在于预测，根据大数据进行科学预测。谁来预测，数据分析人才，这个世界最最需要的是人才，最缺的也是人才。所以，搞大数据产业，最需要的是人才。数据分析是关键贵阳大数据交易所会员400余家大数据会成为一个独立的产业吗信息安全问题制约“大数据”发展真正的大数据时代人们没有隐私2015年网络信息诈骗950亿元今天的人们几乎处于无缝监控之下据中国工程院院士邬贺铨说：北京有80万个摄像头，只要上街，至少被拍8次以上3.15曝光的网络信息漏洞，让人心惊胆战：1.虚假数据（发空包）2.数据泄露（卖资料）3.非法采集（诈骗多）4.个人隐私（无保障）5.资金账户（怕盗刷）大数据“脱敏”结语成功是失败之母大数据是新兴的朝阳产业，抓住大数据就有可能抓住发展的先机。正因为它们是新产业，我们对其发展趋势、盈利模式、产品开发都还难以把握。这就要求我们密切关注大数据的发展动向，争取抓住机会，壮大自己。马云说：做企业很辛苦，跟农民也差不了多少，你要做下去，等待时机，每天维护，每天运营，才有可能有未来。谢谢大家40贵州省委讲师团综合教研室周矩