高性能分布式计算云平台解决方案

高性能分布式计算云平台解决方案联智科技2015年3月高性能分布式计算云平台解决方案版权声明联智科技（北京）有限公司版权所有，并保留对本文档及本声明的最终解释权和修改权。本文档中出现的任何文字叙述、文档格式、插图、照片、方法、过程等内容，除另有特别注明外，其著作权或其它相关权利均属于联智科技（北京）有限公司。未经联智科技（北京）有限公司书面同意，任何人不得以任何方式或形式对本文档内的任何部分进行复制、摘录、备份、修改、传播、翻译成其他语言、将其全部或部分用于商业用途。高性能分布式计算云平台解决方案免责条款本文档仅用于为最终用户提供信息，其内容如有更改，恕不另行通知。联智科技（北京）有限公司在编写本文档的时候已尽最大努力保证其内容准确可靠，但联智科技（北京）有限公司不对本文档中的遗漏、不准确或错误导致的损失和损害承担责任。高性能分布式计算云平台解决方案信息反馈如果您有任何宝贵意见，请反馈：地址：北京市海淀区苏州街维亚大厦907-908邮编：100080电话：[phone]传真：[phone]您也可以访问联智科技网站：全面监控，自动高可靠...........................................................................................103.4.8多级用户管理模式..................................................................................................113.4.9轻量级虚拟化及并行计算支持...............................................................................113.4.10分布式存储及并行文件系统支持............................................................................113.5CHESS产品介绍...............................................................................................................123.5.1CHESSV4.0简介.......................................................................................................123.5.2CHESSV4.0架构.......................................................................................................133.5.3CHESSV4.0功能介绍...............................................................................................143.5.4CHESSV4.0优势.......................................................................................................29高性能分布式计算云平台解决方案61.概述经过多年的发展，云计算技术已日臻成熟，相对于传统部署模式而言，其配置灵活、资源利用率高和节省成本的优势愈发显著。云计算解决方案通过对企业现有的硬件资源（包括计算服务器、存储、交换机和路由器等）和软件资源（各种操作系统、中间件、数据库及应用等）进行整合，形成统一资源池，为企业内部用户、外部中小企业及公众用户提供云计算服务，根据用户请求自动地管理和动态地分配、部署、配置、重新配置以及回收资源，大幅提高了资源利用率，降低企业的IT成本。IT技术的发展，给各行各业带来了业务操作流程的自动化和信息化，使得企业内部产生了大量的业务数据。随着互联网尤其是移动互联网、物联网的快速发展，同时随着运营商、互联网公司不断推出移动互联网产品如应用商店、阅读、游戏、社区等移动产品，如何分析挖掘这些产品生成的海量数据，已成为运营商迫切需要解决的问题。2.需求分析云计算技术的进一步发展，使得数据挖掘平台有了新的发展方向，也使得新一代的数据挖掘平台成为可能。传统云计算解决方案的关注重点是能够提供动态资源、虚拟化和高可用的计算平台，而分布式计算和并行计算需要解决的问题通常具有计算量大、IO吞吐量大、需要低延时网络等特点，虚拟化带来的额外的性能损失使得在传统的云计算平台上实现的分布式计算环境的实用性大打折扣。为了能让用户在享受到云计算带来的便利性的同时，又能在云计算的环境下高效的实现分布式计算平台用来解决大数据处理等实际问题，联科结合在高性能、分布式计算领域十多年来的技术积累和在云计算领域的实际经验，在完全自主开发的CCMP云管理平台上整合了高性能和分布式计算平台，实现了虚拟化云计算环境和分布式计算环境的完美融合。在同一套硬件环境下，在实现传统意义上的云计算平台的同时，同时实现了常见高性能计算环境如MPI以及常见大数据处理分布式环境Hadoop的部署及管理。高性能分布式计算云平台解决方案73.总体设计3.1系统逻辑架构系统整体逻辑架构如图所示，3.2性能测试采用业界标准的Linpack进行性能测试，结果如图所示。左侧为在云平台环境下的性能，右侧为物理机的性能，可见性能损失1%。高性能分布式计算云平台解决方案83.3CCMP产品介绍联科开创性的提出了软硬件一体的解决思路，融合先进的高性能计算技术和云计算技术，将计算中心的服务器、存储和网络资源统一池化，打破传统的单个用户对物理资源独占的使用模式，同时将应用程序和操作系统以及硬件之间的强耦合关系进行解耦，并结合虚拟化技术，提高资源的利用率，快速的将传统的计算中心改造成智能化的动态高性能计算中心。3