CSDN大数据应用大会PPT――07-丛磊：NoSQL在SAE中的应用

NoSQL在SAE中的应用SinaAppEngineteamweibo.com/saet11年11月25日星期五国内领先的PaaS新浪及合作第三方支持微游戏、微盘、校园微博、Q微博、互联网的那点事...云计算产品研发计算类服务、存储类服务、云应用商店、云服务商店、CDN...新浪云计算SinaCloud.com2009.82009.112011.5.182011.72010.10.10云计算小组成立SinaAppEnginealpha版上线SinaAppEnginealpha2版上线微盘上线SinaAppEngineBeta2版上线正式开放注册开通支付云应用商店上线2010.22010.9SinaAppEngineBeta版上线SAE诞生TmpFS支持首个公测版本发布11年11月25日星期五国内领先的PaaS012500250003750050000200920102011注册用户0250005000075000100000200920102011应用数0250000005000000075000000100000000200920102011日均PV11年11月25日星期五国内领先的PaaS•Q3宕机时长：45分钟•Q3宕机次数：4次•Q3整体服务SLA：99.95%11年11月25日星期五国内领先的PaaS活跃开发者：10000+名，开发者认证与PHP官方合作：应用商店：11年11月25日星期五SQLonSAEMySQLinstance@VMMySQLinstance@VMClientClientClient2009.11MySQLinstance@VMNeed?Cost?11年11月25日星期五SQLonSAEMySQLinstance@PMClientClientClient2010.6Safe?RelationalDBCluster11年11月25日星期五SQLonSAERDC(RelcationalDBCluster)mysql_connect(‘w.rdc.sae.sina.com’,3307,u,p)SQL预判并发执行时间和慢查询11年11月25日星期五NoSQLonSAERDC不能解决的问题：ScalabilityStaticalDynamical11年11月25日星期五NoSQLonSAE数据存储关系型数据存储简单存储RDCStorageKVDBRank更多功能性存储CounterMemcacheX11年11月25日星期五MemcacheX•morethanmemcache•namespace•status&LRU•connectionLRU11年11月25日星期五MemcacheXMemcacheXClusterClientMemcacheXinstanceClientMemcacheXinstanceMemcacheXinstanceMemcacheXinstance11年11月25日星期五KVDB•又⼀一个NoSQLDB？•存储引擎可替换•任意模块水平扩展•支持读写分离•支持前缀查找•支持secondaryindex•支持认证•支持重平衡，无缝迁移11年11月25日星期五KVDBBDBClusterClientMetaServerInternalDBmasterslavemasterslavemasterslavemasterslave指令流数据流11年11月25日星期五KVDB•如何保证metaserver⼀一致性？differentpaxos•重平衡做到无缝迁移？doublewritesingleread•如何触发重平衡？expectionvariance11年11月25日星期五KVDB•secondaryindex•事务•跨IDC容灾•单应用写压力实际遇到的问题：目前日均请求1亿，日均流出带宽100Gb11年11月25日星期五Rank•应用场景•周排行榜、日排行榜•toprank&allrank11年11月25日星期五RankRankClusterClientClientMetaServerRankinstanceslaveRankinstancemasterRankinstanceslaveRankinstancemaster11年11月25日星期五RankRBTkey=valueERBTvalue=rankset(key,value)=O(log(n))get_rank(key)=O(log(n))get_top_n()=O(1)increase=O(log(n))11年11月25日星期五Rank•in-memorymasterslavesync•syncwithoutbin-log•dumptimer11年11月25日星期五NoSQLonSAE•Counter的应用场景•NoSQL的选型速度容量可靠性11年11月25日星期五欢迎加入SAEQ&[e-mail]/kobe11年11月25日星期五