Google：以创新赢得用户

Google:以创新赢得用户2•公司简介•创新的文化•产品开发流程•技术发展趋势–搜索技术发展–云计算谷歌:以创新赢得用户公司简介4整合全球信息，让人人能获取，使人人都受益Google(谷歌)的使命51998年Google核心技术新概念-PageRank几十亿相互关联的网页，它们的关系类似网站彼此间在投票这一概念使全球搜索结果的相关性和准确性大大提升•PageRank技术&网页的PR值6Google在全球市场…北美洲•Google网络覆盖80%的互联网用户•Google是美国和加拿大No.1的搜索引擎•在北美有12个区域销售机构澳洲•81.6%当地搜索流量来自Google•Google是No.1的搜索引擎•在悉尼设有区域销售机构欧洲•85%当地搜索流量来自Google•Google在比利时、丹麦、法国、德国、意大利、荷兰、西班牙、瑞典、瑞士均是No.1的搜索引擎•在欧洲有6个区域销售机构:英国、法国、德国、意大利、荷兰、西班牙拉丁美洲•75%当地搜索流量来自Google•Google在有市场数据统计的阿根廷、巴西、墨西哥均为No.1•18个国家域名•在圣保罗及墨西哥城均有区域销售机构亚洲•54%当地搜索流量来自Google•在中国及香港地区是No.2大搜索引擎,在印度处于No.1位置•8个国家域名，全面覆盖简繁体中文、日文、韩文、印度尼西亚文非洲与中东•66%当地搜索流量来自Google•13个国家域名近70%的全球搜索流量！7Google从核心搜索向新的应用领域探索核心搜索70%核心搜索20%搜索周边产品10%其他广告通讯产品(Gmail,GoogleTalk,GoogleGroups,Orkut)免费工具(GoogleEarth,Picasa,Blogger,Scholar,Print)8Google的众多产品Google金融Google视频Google学术搜索Google大学搜索GooglePack9Google的优势技术和创新规模品牌企业文化10Google创新奇迹的四大理由1.使命：公司必有有一个长久的使命感，坚持执著的理想2.文化：平等、客观、利众3.机制：符合时代的创新机制4.人才：创新实践者的天堂使命+文化+机制+人才=Google的奇迹谷歌:以创新赢得用户创新的文化12GoogleDoodle13Google式的创新需要什么样的企业文化？•平等互重•创新+实干•透明+客观•利众、不做恶•激情+Fun•以人为本14用创新的企业文化吸引最好的人才•创新实践者的乐园–一切自己动手：连服务器都自己做•自由创新，改变世界–拿世界当实验室，今天就改变世界•技术比管理更重要–杜绝“学而优则仕”的过时思想•学习、培养的机会–吸引世界级大师帮助培养新员工•新颖的环境和福利–美食、大厨、健身房、按摩15以人为本的办公环境16Google总部17劳逸结合谷歌:以创新赢得用户产品的创新19GoogleScholarGoogleAlertsFroogleWirelessMuchofGoogleLabsGoogleNews（１）２０％时间（２）点子库Google（谷歌）产品创新的两个基础20创新的模式•象牙塔式•只考虑理论，不思考应用•Builditandtheywillcome•科学家主导产品的制定•脑力出租式•产品部门（甚至客户）出经费主导科学家•研发互动式•科研部门“推销”创新，开发部门“要求”创新–Google式创新RRＤDRDRR=DD?21Google（谷歌）产品创新•研发合并–创新实践者的乐园，创新和编程能力并重•个人自由–20%的时间做自己想的项目，容易换组•平等民主–以“用脚投票”的方式参与自己认可的项目•实时回馈–把互联网当作实验室，即时得到用户回馈•用户中心–以用户满意和使用为目标，不考虑赚钱•清晰使命–整合全球信息，服务所有用户符合互联网的特性平等实时用户中心海量信息22Beta产品员工投票产品原型Google”实验室“下一个点子Google（谷歌）创新机制：产品是怎样炼成的新点子新产品23产品周期产品设计产品概念初步定义相关产品调研开发资源分配技术规范界面设计发布计划发布小范围测试发布审查产品维护新功能对外沟通测量检验24产品经理的角色•三个比喻–制片人–粘合剂/填充剂–园艺工人PMSalesEng&UI&QAMarketingFinance&LegalOps谷歌:以创新赢得用户核心搜索技术26搜索引擎技术的革新W•第一代：单一搜索的时代-无法满足用户对多元信息的需求•第二代：垂直搜索的时代-众多垂直搜索使用户无法有效地获取有用信息•第三代：整合搜索的时代ABCDE27搜索引擎技术的革新–从垂直搜索到整合搜索ABCDE用户体验的整合核心引擎的整合谷歌的理念：打造全面整合的搜索引擎28整合搜索整合搜索数据智能29跨越地域限制：整合地域化信息30跨越时间限制：从几个小时，到几十年•即时信息•历史信息31跨越时间限制：即时索引32跨越媒体限制：图片33跨越媒体限制：视频34跨越渠道限制：从网上，到桌面，书本，手机复杂的互联网网页通过Google移动搜索自动转换成适合手机屏幕显示的格式马特拉奇互联网图片WAPGoogle搜索本地信息谷歌:以创新赢得用户迎接云计算36如今的用户需要什么？•接入–随时随地通过各种终端方便接入网络•共享–方便与人共享•自由–不希望数据受限制•简便–快速学习、简单使用•安全–数据不会丢失或泄漏37云计算——因需而生云计算的特性：•数据存储在“云端”；•软件与服务分布于“云端”–浏览器成为新平台•基于公共标准和协议–Linux,AJAX,LAMP：避免垄断•任一设备方便接入38云计算:历史沿革个人电脑客户端/服务器云计算硬件为中心软件为中心服务为中心39云计算的驱动力39宽带普及编辑工具大众化存储成本下降40云计算时代的突破用户为中心1任务为中心2性能强大3智能化4廉价硬件5并行编程641云计算时代的突破用户为中心1任务为中心2性能强大3智能化4廉价硬件5并行编程642音乐个人偏好地图新闻联系人消息邮件列表照片邮件日历电话号码投资信息用户为中心•存储在“云端”•“跟随”您和您的设备•随时随地可访问•方便与人共享数据43用户为中心的邮件管理:GMail出差在北京周一，旧金山周三，家里–只需浏览器+用户名+密码！–一旦登录，设备就成为“您的”设备–数据存储在“云端”的服务器上（大容量）44云计算时代的突破用户为中心1任务为中心2性能强大3智能化4廉价硬件5并行编程645任务vs.应用应用任务和五位同事合写一篇文章和五位老师一起开发一门课程46谷歌表格的协作任务：沟通编辑表格时与他人聊天沟通47云计算时代的突破用户为中心1任务为中心2性能强大3智能化4廉价硬件5并行编程648强大的云计算:超越PC所能•谷歌搜索比Windows/Outlook/Word中的搜索快吗？–存储所有的网页，需要多少存储空间啊？–1000亿网页×10K/每网页=1000T的硬盘存储空间•云计算可以很好处理这些难题–存储空间可以几乎无限扩充–计算量也可以是几乎无限的–（假定这些都可以并行化）范例：谷歌搜索49谷歌Web服务器拼写检查广告服务器I0I1I2INI0I1I2INI0I1I2IN……D0D1DMD0D1DMD0D1DM……用时0.25秒，涉及机器1000+台一个搜索请求由超过1000台服务器同时计算完成索引服务器文档服务器请求其他服务器副本副本索引段文档段50云计算时代的突破用户为中心1任务为中心2性能强大3智能化4廉价硬件5并行编程651智能来源于海量数据挖掘重要启示：“一斤数据优于一两算法”在互联网时代，收集海量数据相当容易云计算能够处理更高数量级的数据云计算帮助解决之前不可行的或不可能的问题海量数据存储海量数据分析智能52机器翻译：数据+分析=智能•对齐双语字词•抽取短语•获取统计结果最新25%最晚40%最迟30%thetwosidesdiscussedthelatestdevelopmentofthesituationintheMiddleEast,双方讨论了中东局势的最新发展，最新97%最晚2%最迟1%LatestLatest(development)53有些时候，谷歌机器翻译胜出人脑54云计算时代的突破用户为中心1任务为中心2性能强大3智能化4廉价硬件5并行编程655例子：服务器硬件成本•PC级服务器具有33倍的性价比优势！•一台约1000颗CPU的PC集群与一台64CPU的高端服务器价格相当…但性能提升30倍！高端对称多处理(SMP)服务器•HPIntegritySuperdome•641.5GHzItanium2s•128GBDDRDRAM•每CPU性能:13KtpmC•每CPU价格:~$42,000PC级两路(DP)服务器•HPProLiantDL-360•23.0GHzPentium4Xeons•4GBDDRDRAM•每CPU性能:26KtpmC•每CPU价格:~$2,50056谷歌计算基础设施•最低成本，最高可靠性系统•基于低成本，运行Linux的商用PC机•每个系统每天都有可能发生故障！-假定一年中廉价PC出几次故障；-若我们假定2万台机器，那就是每天约110次故障。•超高可靠的硬件系统不仅昂贵，而且还是会发生故障-应用和系统仍需要有容错机制•谷歌解决方案：-创建软件层以容错-标准化机器运行任何应用57云计算时代的突破用户为中心1任务为中心2性能强大3智能化4廉价硬件5并行编程658如何基于10000台“片状”服务器的谷歌服务器群进行编程？•分布式容错存储•分布式共享内存•新的编程模式59分布式容错存储：谷歌文件系统(GFS)谷歌文件系统(GoogleFileSystem)•数据有3个副本（复制3次）；•一旦出错，重新复制；•Master:管理文件的元数据•Chunkserver:管理64MB的数据块Chunkserver1ChunkserverNChunkserver2ClientClientClientGFSMasterC0C1C2C5C0C2C5C1C3C5…谷歌有200多个GFS集群大的集群：•5000台以上的机器•5PB(5000万亿)以上的存储空间60分布式共享内存：谷歌BigTable•分布式、连续、多层存储大表格•行和列抽象化以存储数据•支持基本的数据库操作（比如：Join）•最大的表格单元容纳700T以上，涉及2000多台机器Tablets“cnn.com”“contents:”“html…”“language:”EN“cnn.com/sports.html”“zuppa.com/menu.html”…“yahoo.com/kids.html”“yahoo.com/kids.html”……“website.com”“aaa.com”61新的编程模式–MapReduceMapReduce:我们自己的编程技术来实现–Map：把数据分布到很多机器上–基于所拥有的数据集，每台机器上进行同样的运算–Reduce：合并所有计算结果成一个结果mapmapmapmapmapReduceDataBlock1DataBlock2DataBlock3DataBlock4DataBlock5数据datadatadatadatadatadatadatadatadatadata结果datadatadatadatadatadataMap例子：清华大学云计算课程(2007年秋季学期)学生在谷歌公司展示课程项目“基于MapReduce技术的模拟太阳系运行系统”基于谷歌云计算技术的“大规模数据处理”课程；谷歌工程师讲授部分课程内容；正拓展到更多的高校。大规模数据处理模拟太阳系运行的项目截图63Thanks