经典的云计算入门教材：云里雾里的云计算

     云里雾里的云计算（外一篇） 发表by邓侃cchere.com2009.01整理by许栋2009.09第I页共93页目  录 第1章 云里雾里的云计算........................................................................................3序................................................................................................................................................31.1云计算要解决什么问题？...............................................................................................31.2从Google集群到云计算，云计算的商业模式..........................................................41.3Google云计算的矛头指向谁？....................................................................................81.4云计算大战，Google出招..........................................................................................131.5是云计算，还是云存储？.............................................................................................181.6安全性的难题，有解还是无解？.................................................................................231.7天上究竟会有几朵云？..................................................................................................301.8云中说禅...........................................................................................................................341.9赚钱才是硬道理..............................................................................................................391.10结束语............................................................................................................................431.11补1：赚点钱不容易....................................................................................................451.12补2：云计算经济学之一现金流.............................................................................471.13补3：云计算经济学之二时间成本.........................................................................501.14补4：云计算经济学之三声誉成本.........................................................................531.15补5：商机与商战之一...............................................................................................561.16补6：商机与商战之二...............................................................................................601.17补7：商机与商战之三...............................................................................................621.18补结束语.......................................................................................................................66第II页共93页第2章 外一篇：闲话Google集群.......................................................................672.1引子...................................................................................................................................672.2存在的理由......................................................................................................................702.3布局...................................................................................................................................732.4数据流和控制流的分离..................................................................................................772.5同步的诀窍......................................................................................................................812.6同步的苦恼......................................................................................................................86第3章 相关论文资料............................................................................................91第3页共93页第1章云里雾里的云计算 序 有一次去开会，台上的人在讲云计算。我问身边的听众，“听懂了吗？感觉如何？”听众答，“云里雾里，感觉特神秘。”我说，“这说明讲员讲得好。有没有注意到寺庙里的气氛也很神秘？不神秘，就没有崇拜。不崇拜，你怎么肯掏钱买香火？”1.1云计算要解决什么问题？ 1997年，Google的两位创始人，LarryPage和SergeyBrin，找AndyBechtolsheim募集投资。Andy问，“你们打算做什么？”Larry和Sergey答，“打算把互联网上所有网页都下载，然后建一个搜索引擎。”Andy说，把互联网上所有网页统统下载？！需要多大空间？几个Giga不行吧，几个Tera也不行吧，几个Peta，几个Zetta？。。。嗯，我看几个Googol也许才能撑得住。知道Googol吗？就是10的100次方，就是一个1后面拖100个0！估计是Andy觉得这个项目不太靠谱，所以给的钱不多，只有1百万美元。只有这么一点钱，如果去买高端的存储系统，显然是不够的。走投无路的情况下，第4页共93页Larry和Sergey决定用PC之类便宜的机器，组建一个机器集群。先凑合着用，等以后数据量增加以后，再购买更多的PCs，扩大集群的容量。这个故事的真实性，有待考证。但是从中可以看到Google集群，也就是Google云计算的核心，要解决的四个问题。1.大规模的存储空间，用于存储海量的数据。2.随着业务的发展，新的数据源源不断地增加，存储空间需要相应扩大。用术语讲，这叫可扩展性，scalability。3.系统的硬件设备必须便宜，通常使用大宗产品（commodity），譬如PC，或者价格便宜，中等性能的Dellserver。4.便宜的硬件设备，经常死机。所以在设计这个集群的时候，必须保证不能因为个别机器死机，导致整个系统的崩溃。也就是系统的稳定性要好，reliability。1.2从Google集群到云计算，云计算的商业模式 起初Google集群是供内部使用的系统。Google为什么要开放这个系统，包装成云计算平台，给外界使用呢？这要从Google的商业模式说起。Google的绝大多数收入来自于广告，其它产品和服务的收入十分有限。其它产品包括Google盒子，这是给企业内部网用的搜索引擎。把Google盒子安装到企业内部网，企业员工就可以搜索企业内部的文档，包括可以公开的文档，也包括仅供企业内部查阅的资料。虽然技术很新颖，但是卖得并不好。据ZDNet的报道，2008年度，Google盒子的收益，占Google总利润的份额，不到2%。第5页共93页Googlesearchappliance,俗称Google盒子。单一的收入来源，抗风险的能力差。譬如经济危机一来，各个企业的广告预算缩减，势必影响到Google的利润。怎么办？挖掘自身的优势，发现更多卖点，搞多种经营。Google的技术优势在哪里？有人说，Google的搜索结果精确，所以PageRanking算法是其精髓。其实，算法容易模仿复制，即使几年前PageRanking是Google的独家秘籍，但是今日各大搜索引擎，都有类似算法。让Google独步天下的是它的集群。2006年，Google集群的规模是45万台机器。两年过去了，有人推测现在的规模又翻了一番。由于Google从不公布准确数字，所以大家只能靠Google给硬件厂商下的订单推测。推测虽然不准确，但是即便是10万台机器的规模，在历史上也是从无古人的，在当代也是独一无二的。而且，更重要的，是这个超大规模的集群系统经历了10年的实际运行，被实践证明是可靠的，是可扩展的，每台机器的价格也是低廉的。完全符合上一节列举的四个要求。但是如何依靠这个独门神器挣钱呢？思路有两条。第6页共93页1.做hosting，数据托管。其它企业不用建自己的数据中心了，把数据存