走近云计算、大数据与物联网

《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]厦门大学计算机科学系2014年4月林子雨厦门大学计算机科学系E-mail:[e-mail]主页：走近云计算、大数据与物联网本科生导师学术沙龙（2014年度）计算机领域最新技术报告《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]提纲什么是云计算云计算的层次云计算的发展与影响云计算相关技术云计算安全云计算市场角逐云计算在企业中的应用《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]什么是云计算•通过整合、管理、调配分布在网络各处的计算资源，通过互联网以统一界面、同时向大量的用户提供服务云计算概念云计算特点超大规模计算、虚拟化、高可靠性和安全性、通用性、动态扩展性、按需服务、降低成本云计算应用场景Google个人云服务企业应用实例：AnimotoAmazon云计算示意图《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]你身边的“云”•群雄逐鹿：国外有微软SkyDrive、苹果iCloud，亚马逊CloudDriver等网盘产品，国内有百度云、新浪微盘、华为网盘、金山快盘、115网盘和360云盘等•不以空间大小论英雄：以100K/s的均速上传，1T空间也需124天方可填满，合计2976小时。而如若想占满36T，估摸得熬上12年以上光景《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]你身边的“云”有道云笔记=12011年6月28日网易旗下的有道推出的云笔记软件，支持多种附件格式，拥有2G容量的初始免费存储空间，能够实时增量式同步，并采用“三备份存储”技术，同时上线的还有网页剪报功能。云电视、百度地图、百度音乐、云杀毒、云端备份《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]云计算的层次dataStorageasaServiceInfrastructureasaServicePlatformasaServiceSoftwareasaServiceSaaSPaaSIaaSdSaaSGoogleApps,Microsoft“Software+Services”IBMITfactory,GoogleAppEngine,Force.comAmazonEC2,IBMBlueCloud,SunGridNirvanixSDN,AmazonS3,CleversafedsNetServerStorageServerStorageVisualizationInfrastructurePlatformApplication从一个集中的系统部署软件，使之在一台本地计算机上(或从云中远程地)运行的一个模型。由于是计量服务，SaaS允许出租一个应用程序，并计时收费IaaS将基础设施(计算资源和存储)作为服务出租PaaS类似于IaaS，但是它包括操作系统和围绕特定应用的必需的服务SaaS《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]云计算的发展与影响网格计算利用并行计算解决大型问题GlobusAlliance使其成为主流公共计算将计算资源作为可计量的服务提供于上世纪90年代末推出SaaS基于网络预订应用程序于2001年推出云计算下一代因特网计算下一代数据中心云计算的演进《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]云计算相关技术云计算是一种业务模式创新《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]网格计算云计算网格计算一个用于计算任务的资源池环境网络上提供的不同种类的服务，可以运行在网格计算或公共计算环境中为了通用应用而设计的，没有专门以某种应用命名为完成某一个特定的任务需要，比如生物网格、地理网格、国家教育网格聚合分布资源，支持虚拟组织，提供高层次的服务，例如分布协同科学研究资源相对集中，主要以数据中心的形式提供底层资源的使用，并不强调虚拟组织（VO）的概念用执行作业形式使用，在一个阶段内完成作用产生数据支持持久服务，用户可以利用云计算作为其部分IT基础设施，实现业务托管和外包更多地面向科研应用，商业模型不清晰从诞生开始就是针对企业商业应用，商业模型比较清晰《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]虚拟化技术把物理的计算资源转换成了逻辑的计算资源通过创建虚拟机使得计算资源按需分配通常的虚拟化方法只考虑虚拟单个硬件资源，把虚拟的单个计算环境联结起来云计算所需的虚拟化技术必须虚拟架构技术，虚拟化不必局限于单个硬件资源虚拟化技术传统的虚拟化方式云计算环境中的虚拟化方式虚拟化是云计算的基石《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]数据中心数据中心是云计算的温床云计算推动数据中心向虚拟化和云架构的转型，不断提高IT基础架构的灵活性，以降低IT、能源和空间成本，从而让客户能够快速地提高业务敏捷性“那些正在兴建最大规模数据中心的公司一般都在云计算方面拥有巨大野心”--《数据中心知识》杂志主编RichMiller《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]通过浏览器把程序传给成千上万的用户，为用户省去在服务器和软件授权上的开支；供应商只需要维持一个程序，减少维护成本SaaS在人力资源管理程序和ERP中比较常用；GoogleApps和ZohoOffice也是类似的服务Salesforce.com是迄今为止提供这类服务最为出名的公司Salesforce的创始人贝尼奥夫，或许可以视为“云”的先行者。早在1999年，贝尼奥夫就大声宣布自己要成为“软件终结者”Salesforce以“即买即用”的服务模式，颠覆了传统软件销售方法论用户不需要通过购买软件许可证、安装和实施，才可以建立起CRM系统。用户只需要一个账户，就可以像访问网页一样，访问在Salesforce上运行的CRM系统贝尼奥夫Salesforce的创始人在“云”概念出来之后，Salesforce迅速宣称自己是第一家提供云产品的公司SaaS（软件即服务）《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]云计算安全问题访问权风险管理风险数据风险数据恢复风险长期发展风险…“使用云计算的局限是企业必须认真对待的敏感问题，企业必须对云计算发挥作用的时间和地点所产生的风险加以衡量。”Gartner咨询公司副总裁兼分析师DavidCearley《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]云计算市场角逐CompetingforcloudcomputingGoogleGFS、MapReduce和BigTableGoogleAppEngineGoogleApps------------------------------------------AmazonAWSS3、EC2、SQS和SimpleDB------------------------------------------Sun公司推出“黑盒子”计划------------------------------------------IBM“BlueCloud”蓝云计划------------------------------------------Microsoft：Azure、MatrixDB------------------------------------------Salesforce：Force.com------------------------------------------HP联手Intel和Yahoo!建实验室云计算《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]云计算在企业中的应用中小企业的产业环境中小企业信息化面临的压力–信息系统爆炸式膨胀带来的“经济”压力–信息系统建设周期越来越短带来的“时间”压力–对新技术、新产品、新理念的“研究”压力–信息系统面临的“数据存储量和计算量”的压力越来越大–“人才“压力–维护“客户粘性”的压力云计算可以促进中小企业转型升级云计算促进中小企业转型升级《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]总结•云计算，在本质上并非一种新的技术，而是一种服务模式•云计算关键词：虚拟化、数据中心、面向服务、按需付费•云计算让中小企业受益《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]提纲大数据时代大数据应用大数据的影响大数据的四个特征大数据的产生大数据关键技术Hadoop体系结构参考：林子雨主讲研究生课程《大数据技术基础》，并编写了配套教材。下载配套教材请访问《大数据技术基础》网站：《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]大数据时代《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]大数据应用场景KevinSpaceyDavidFincher英国同名小说《纸牌屋》风靡全球的美剧《纸牌屋》大数据分析《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]大数据应用场景美国零售商和怀孕预测VISA信用卡与商户推荐股票投资智能电表广告投放中国粮食统计人的数字化阿里信用贷款和淘宝数据魔方UPS快递的最佳行车路径《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]典型的大数据应用实例从谷歌流感趋势看大数据的应用价值“谷歌流感趋势”，通过跟踪搜索词相关数据来判断全美地区的流感情况《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]大数据的影响•大数据对行业发展的影响•大数据对思维方式的影响全样而非抽样效率而非精确相关而非因果《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]大数据的影响：对科学研究的影响图灵奖获得者、著名数据库专家JimGray博士观察并总结人类自古以来，在科学研究上，先后历经了实验、理论、计算和数据四种范式实验理论计算数据《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]大数据无处不在科学研究–基因组–LHC加速器–地球与空间探测企业应用–Email、文档、文件–应用日志–交易记录Web1.0数据–文本–图像–视频Web2.0数据–查询日志/点击流–Twitter/Blog/SNS–Wiki《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]大数据的四个特征《走近云计算、大数据与物联网》厦门大学计算机科学系林子雨[e-mail]—数量大根据IDC作出的估测，数据一直都在以每年50%的速度增长，也就是说每两年就增长一倍（大数据摩尔定律）人类在最近两年产生的数据量相当于之前产生的全部数据量预计到2020年，全球将总共拥有35ZB的数据量，相较于2010年，数据量将增长近30倍《走近云计算、大数据与物联网》厦门大学计算机科学