蓝鲸PPT――BWStor CSA 蓝鲸SAN文件系统网关简介

版权所有@2009-2010天津中科蓝鲸信息技术有限公司BWStorCSASAN文件系统网关朱智力产品经理(010)59851155-260713391798651Mail:[e-mail]:[e-mail]版权所有@2009-2010天津中科蓝鲸信息技术有限公司BWStorCSASAN文件系统网关简介版权所有@2009-2010天津中科蓝鲸信息技术有限公司目录•BWStorCSA概述•BWStorCSA的产品形态•BWStorCSA的特点•BWStorCSA的应用方式•BWStorCSA的易用性•BWStorCSA的性能•BWStorCSA的产品规格版权所有@2009-2010天津中科蓝鲸信息技术有限公司BWStorCSA概述•BWStorCSASAN文件系统网关–用于将多台通用FCSAN/IPSAN转换成高性能可扩展的跨平台文件共享系统–BWStorCSA集成MDC硬件，支持高可用–内置BWFS，充分发挥SAN的带宽和性能优势–大幅提升应用程序处理能力•BWStorCSA可应用于数字媒体、勘探数据分析、遥感信息处理、流媒体、科学计算、模拟仿真等高性能计算和更加广泛的信息处理领域。版权所有@2009-2010天津中科蓝鲸信息技术有限公司BWStorCSA的产品形态•成对的元数据控制器•客户端软件•核心文件系统—BWFS•能与各种通用存储设备配合成方案MDC元数据控制器BWFS客户端软件各种通用存储设备BWStorCSASAN文件系统网关版权所有@2009-2010天津中科蓝鲸信息技术有限公司平滑扩展无缝升级高聚合性能BWStorCSA方案的特点同时支持FC（4Gb、8Gb）、以太网（1Gb、10Gb）接入等丰富接入方式提供统一命名空间下文件级跨平台共享、同时还提供数据块级的存储服务既具备先进的存储架构与未来接轨，又兼容现有成熟的SAN存储架构包含盘阵实时容灾在内的高稳定性和高可用性保证可平滑扩展，按需购买有利于控制成本，降低TCO具备海量存储能力、满足计划内的未来需求系统聚合带宽高，整体传输能力强管理简便易用版权所有@2009-2010天津中科蓝鲸信息技术有限公司BWStorCSA高可用保证•MDCHA：–正常读写“0”切换：多数切换操作能在秒级完成，并且配合客户端缓存，成功实现了MDC非元数据操作切换的零中断。–容错能力超强：通过多重保护，避免出现MDC出现“脑裂”，确保切换更安全可靠。–简化配置：HA通过图形化配置简单，加快系统部署。•客户端：–具有增强的日志内容和提示信息，能够帮助用户尽早发现问题和排除故障。•盘阵与存储网络：–可进行全冗余配置消除单点故障。–文件级盘阵镜像可实现存储设备级故障情况下的业务连续性。版权所有@2009-2010天津中科蓝鲸信息技术有限公司盘阵实时容灾功能•盘阵冗余：支持将两组盘阵配置成冗余模式，当任意一个盘阵整体出现故障不能正常工作时，文件系统仍然能正常访问，其上正在运行的业务不会中断。版权所有@2009-2010天津中科蓝鲸信息技术有限公司盘阵实时容灾功能•与传统基于文件复制的方案相比：–对应用完全透明，客户端只有单一盘符，故障发生后不需要显示在客户端切换盘符；–盘阵无缝切换，不需人工干预，业务没有中断；–盘阵间数据实时同步，没有文件复制窗口，没有任何数据丢失；•与基于应用复制的方案相比：–基于应用的复制需要应用自己实现，难度大，成本高；–基于应用的复制方案没有办法修改文件系统，难以处理诸如缓存一致性的问题；•与基于盘阵的复制方案相比：–盘阵复制是在设备底层服务，需要配置高端盘阵，并且盘阵型号必须一致，成本非常高；–在文件系统下层，所以在切换之前备用盘阵都不能使用，也无法确实文件是否一致；•相同SAN网络环境下，容灾等级最高的文件共享解决方案。容灾等级最高的SAN文件共享解决方案对应用完全透明使用方便盘阵整体故障数据不丢失文件层实现性价比高盘阵整体故障业务不中断版权所有@2009-2010天津中科蓝鲸信息技术有限公司多卷与多套文件系统•多卷支持–实现效果：能够在支持在1个或多个卷上建立1套文件系统；–作用：用多卷的不同raid级别与存储策略组合来满足用户应用中同时存在的不同应用需求。•多套文件系统支持–实现效果：能够在一套CSA上实现多套文件系统；–作用：用多套文件系统中的不同分配粒度与存储策略组合来满足用户应用中同时存在的不同应用需求。版权所有@2009-2010天津中科蓝鲸信息技术有限公司BWStorCSA存储策略•文件级错误隔离：–原理：客户端写下来的数据，会以“文件”为最小单位落在某个卷上–适用于：文件不太大，多机并发但分别读写多个文件时•条带：–原理：客户端写下来的数据，会以“条带”为最小单位散落在某个卷上–适用于：特别大的文件，多机并发读写相同文件时•顺序填充：–原理：客户端写下来的数据，会顺序的落在卷里，直到这个卷写满然后开始写下一个卷–适用于：顺序填充和MAID技术（绿色存储节能技术）配合来实现应用无关的绿色存储版权所有@2009-2010天津中科蓝鲸信息技术有限公司存储策略—文件级错误隔离•文件级错误隔离：–原理：客户端写下来的数据，会以“文件”为最小单位落在某个卷上–适用于：文件不太大，多机并发但分别读写多个文件时SAN文件文件文件文件高速工作站版权所有@2009-2010天津中科蓝鲸信息技术有限公司存储策略—条带•条带：–原理：客户端写下来的数据，会以“条带”为最小单位散落在某个卷上–适用于：特别大的文件，多机并发读写相同文件时SAN大文件A高速工作站A2A4A3A1版权所有@2009-2010天津中科蓝鲸信息技术有限公司存储策略—顺序填充•顺序填充：–原理：客户端写下来的数据，会顺序的落在卷里，直到这个卷写满然后开始写下一个卷–适用于：顺序填充和MAID技术（绿色存储节能技术）配合来实现应用无关的绿色存储SAN文件文件文件文件高速工作站版权所有@2009-2010天津中科蓝鲸信息技术有限公司应用方式•直连FCSAN•直连IPSAN•FCSAN+NAS机头•FCSAN+MDC双活NAS机头•FCSAN+IPSAN混合模式版权所有@2009-2010天津中科蓝鲸信息技术有限公司应用方式--直连FCSAN•该方式中的数据从应用服务器端通过光纤直接写入光纤盘阵，而元数据通过单独的IP网络从MDC获取。•该方式能够使客户端以接近光纤盘阵块级IO的性能进行共享文件系统的读写，提供所有方式中最高的IO性能和数据可靠性。适用于对IO性能、数据可靠性和业务连续性具有很高要求的环境。版权所有@2009-2010天津中科蓝鲸信息技术有限公司应用方式--直连IPSAN•将直连FCSAN方案中的光纤盘阵替换成iSCSI盘阵，不仅可以有效降低方案的采购成本，也有效地降低方案部署的难度。但由于iSCSI盘阵的IO带宽和效率上仍逊于光纤盘阵，所以，所以在IO性能上比直连FCSAN方案要差一些。该方案适用于对系统性能和可靠要求较低的环境。版权所有@2009-2010天津中科蓝鲸信息技术有限公司应用方式--FCSAN+NAS机头•该方案特点是底层为光纤盘阵，前端则通过NAS机头，将FCSAN转化成标准文件共享协议。应用服务器使用IP网络，通过NAS机头将数据保存入光纤盘阵。这种情况下，数据保存于光纤盘阵中，可以充分使用已有的FCSAN环境；而前端应用服务器使用IP网络，有效降低成本。采用标准协议兼容性更好，性能略低于IO节点模式。版权所有@2009-2010天津中科蓝鲸信息技术有限公司应用方式—FCSAN+MDC双活NAS机头•与FCSAN+NAS机头的区别就是用MDC来做NAS机头，可以节省2台硬件设备并减少故障点。版权所有@2009-2010天津中科蓝鲸信息技术有限公司应用方式--FCSAN+IPSAN混合•本方案的特点是应用服务器一部分与光纤盘阵直连；一部分通过IO节点进行转换。对于一部分对应用追求高带宽，另外一部分对性能要求一般的环境特别适合。版权所有@2009-2010天津中科蓝鲸信息技术有限公司BWStorCSA的易用性•图形管理界面–基于浏览器WebGUI，不需要在客户端安装软件–QuickStart界面：简化SAN文件系统环境准备工作–MDCHA基于图形界面配置，降低配置复杂度–MDC故障诊断界面：在单一图形界面上完成系统软硬件，包括以太网链路、光纤链路、多路径、HA、文件系统服务等各种日常巡检工作，大大简化日常维护工作量•在线文件碎片分析与整理•与Windows整合的性能计数器，以及独立的性能日志,负载现状图形显示•相同SAN网络环境下，安装和维护工具最完善的文件共享解决方案版权所有@2009-2010天津中科蓝鲸信息技术有限公司易用性—WebGUI,QuickStart版权所有@2009-2010天津中科蓝鲸信息技术有限公司易用性—性能分析与状态监控版权所有@2009-2010天津中科蓝鲸信息技术有限公司BWStorCSA的性能•MDC端内核级实现，效率高，内存和CPU资源占用率小•客户端独立的内核级实现，并且采用高效元数据通讯协议，效率高，内存和CPU资源占用率小•客户端支持元数据缓存，提升访问性能，降低延迟•客户端性能优化–支持异步IO接口：–内部异步IO优化：对于非异步IO进一步优化性能–独立数据缓存设计，破解WindowsVFS限制–效果参考相同环境下Widnows客户端的性能对比【优化前：优化后=15层DV25:32层DV25】•FileSequencing：提供一个API，供应用程序提供该文件存放位置的“建议”，提高这些应用程序文件读写性能*•支持分层存储，支持系统加入高性能设备自动迁移热点数据，提升系统性*•相同SAN网络环境下性能最好的文件共享解决方案版权所有@2009-2010天津中科蓝鲸信息技术有限公司BWStorCSA的性能050100150200250300350400450151101151201251301351401451501THROUGHPUT(MB/S)FRAMESREADPERFORMANCEREAD版权所有@2009-2010天津中科蓝鲸信息技术有限公司BWStorCSA产品规格文件系统规格BWStorCSA5000系统容量64ZB文件数量1,000,000,000单目录文件数量62,500,000文件大小2PB文件名长度Windows:255ASCII字符,85中文字符Linux/Mac:255ASCII字符,255中文字符目录深度Windows:244字符Linux:4096Bytes支持LUN数量4093元数据控制器(MDC)数量2多文件系统支持支持文件系统数量256/MDC元数据控制器高可用支持支持系统全冗余配置支持*需要iSCSI盘阵/以太网交换机/以太网卡和操作系统支持系统扩容支持（应用离线）支持操作系统WindowsXP/Vista/Win732/x86_64Windows2003/2008Server32/x86_64RHEL4(U1-U7)32/x86_64RHEL5(U1-U3)32/x86_64SUSE10(SP1/SP2)32/x86_64MacOSX10.5/10.6版权所有@2009-2010天津中科蓝鲸信息技术有限公司BWStorCSA产品规格元数据控制器规格BWStorCSA5000尺寸外形1U标准机架(每控制器)系统缓存2GB电源模块ActivePFC数据接口前端元数据接口:1GEx2后端IPSAN接口:1GEx2（与前端元数据接口共用）后端FCSAN接口:4Gbx1/4Gbx2（仅限于MDC5003-2）HA接口:1GEx2工作环境温度+～+工作环境湿度20%～80%（未凝结）贮存环境温度～+贮存环境湿度10%～90%（未凝结）系统软件功能v5.3.3全局命名空间，Windows/Linux/Mac跨平台文件共享WebGUI/CLI多文件系统支持存储策略支持智能故障检测系统在线扩容容量限额(quot