数据存储与备份基础知识培训..

汇报提纲存储1备份2恢复与容灾3传统计算机存储系统的问题硬盘的容量有限有限的硬盘槽位，难满足大容量需求单个硬盘存放数据，数据可靠性难以保证存储空间利用率低本地存储，数据分散数据被破坏的原因自然灾害系统管理员及维护人员的误操作计算机设备故障病毒感染造成的数据破坏Internet上“黑客”的侵入和来自内部网的蓄意破坏存储备份的意义随着信息技术的飞速发展，人们对计算机信息系统的依赖程度越来越强，信息化给人们带来快捷的服务和方便的管理时，也给人们带来数字信息丢失的风险。数据的丢失会中断企业的正常运行，同时也会给企业造成巨大的经济损失。数字信息丢失、破坏，就无异于丢掉了过去、失去了现在，甚至断送了未来。数据丢失的主要原因可分为二大类，一类为存放数据的硬件设备出现故障，另一类是人为因素，如计算机犯罪、计算机病毒、软软件错误及人为的误操作。其中，人为的误操作是最常见的现象。因此，数据的存储、备份成为保证数据安全的重要措施。存储备份也称为数据备份，数据备份是将数据以某种方式加以保留，以便在系统遭受破坏或其他特定情况下重新加以利用的一个过程。而数据备份的最终目的不是备份，而是快速恢复数据。存储1存储的概念存储的组网形态主要协议RAID磁盘热备与重构什么是存储1、存储是信息的载体，是围绕“信息、数据”而展开的，提供信息保存、信息备份、信息安全以及信息生命周期管理设备。2、存储是根据不同的业务，采用合适、安全、有效的技术方案将信息存放在具有冗余、保护、迁移等功能的物理媒介。3、存储是实现核心业务数据存放、关键数据保护、高效率的备份恢复和归档，以及搭建容灾系统提供业务连续性等的一个完整的系统。存储（磁盘阵列）的构造1、控制器2、磁盘柜、扩展柜3、磁盘影响磁盘阵列可靠性稳定性的因素•电源系统•散热系统•背板设计•控制器•环境监控•HostSpare存储的分类存储的三种常见模式DASDirectAttachedStorageNASNetworkAttachedStorageSANStorageAreaNetworkDASDAS（DirectAttachedStorage—直接连接存储）是指将存储设备通过SCSI接口或光纤通道直接连接到一台计算机上。DAS的适用环境为：1）服务器在地理分布上很分散，通过SAN或NAS在它们之间进行互连非常困难时(商店或银行的分支便是一个典型的例子)；2）存储系统必须被直接连接到应用服务器（如MicrosoftClusterServer或某些数据库使用的“原始分区”）上时；3）包括许多数据库应用和应用服务器在内的应用，它们需要直接连接到存储器上，群件应用和一些邮件服务也包括在内。当服务器在地理上比较分散，很难通过远程连接进行互连时，直接连接存储是比较好的解决方案，甚至可能是唯一的解决方案。利用直接连接存储的另一个原因也可能是企业决定继续保留已有的传输速率并不很高的网络系统。DAS基于DAS结构的存储备份DAS优点低费用使用简单容易安装价格相对较低缺点不能共享连接距离有限升级困难缺乏较好的高可用性维护复杂•适宜于小型机构的存储解决方案网络附加存储设备（NetworkAttachedStorage，NAS）是一种专业的网络文件存储及文件备份设备，它通过标准的网络拓扑结构连接到计算机网络上，利用现有的网络资源来接入专用的网络存储设备，因此也称为网络直联存储设备、网络磁盘阵列系统。NAS优点容易安装，维护简单共享数据跨平台文件共享远程访问减轻服务器负担充分利用网络带宽缺点不适合数据库存储孤立的存储设备传输速率低成为瓶颈•主要适宜于文件存储的解决方案NASSAN基于SAN结构的存储备份存储域网络（StorageAreaNetwork）以数据存储为中心，采用可伸缩的网络拓扑结构，通过具有高传输速率的光纤通道直接连接，提供SAN内部任意节点之间的多路可选择的数据交换，并且将数据存储管理集中在相对独立的存储区域网内。光纤通道=是SANFabric的基础为存储系统提供一个网络连接模式客户机LAN(局域网)广域网存储区域网（第二网）Fabric=第二网“Fabric”是一个由智能光纤通道交换机构成并具有良好系统设计的高智能网络,这一数据网络可以提供企业级的性能,扩展能力,可管理能力,可靠性和可用能力服务器存储子系统第一网SANFiberChannelSwitchesDiskArray主机服务器光纤交换机磁盘阵列简单的SAN存储结构线缆（光纤或铜线）FCHBA、GBIC、&MIAFCHUB/交换机数据网关服务器存储管理软件:TivoliSANergyVERITASSANPointDirectADICCentravisionSGICXFSTransoftFibreNetATTOStudioNet存储系统RAID，JBOD磁带存储设备光存储设备SAN的组成优点设备整合，维护方便存储资源利用率高高扩展性高数据存取效率充分利用网络带宽缺点成本较高安装和升级比NAS复杂•主要适宜于大型数据存储的解决方案SANDAS（直连式存储）NAS（网络式存储）SAN（存储区域网络)传输类型SCSI、FCIPIP、FC、SAS数据类型数据块文件数据块典型应用任何(适用于小型机构的存储解决）文件服务器数据库应用优点磁盘与服务器分离，便于统一管理使用简单容易安装价格相对较低容易安装，维护简单共享数据跨平台文件共享，支持多系统远程访问减轻服务器负担充分利用网络带宽高扩展性高可用性数据集中，易管理缺点不能共享连接距离有限升级困难缺乏较好的高可用性维护复杂不适合数据库存储孤立的存储设备传输速率低成为瓶颈相比NAS成本较高安装和升级比NAS复杂•存储传输的硬件通道有三种：&传输通道&通过以太网线连接通过SCSI线缆连接通过光纤线缆连接iSCSIHBACardiSCSI磁盘阵列SCSIHBACardSCSI磁盘阵列FCHBACardFC磁盘阵列以太网线SCSI线缆光纤线缆主机GECardRAID概念级别RAID0RAID1RAID3RAID5RAID6RAIDDPRAID10RAID01早期外部存储系统JBOD（JustaBunchofDisks）：是在逻辑上把几个物理磁盘一个接一个的串联在一起，其目的纯粹是为了增加磁盘的容量，并不提供数据安全保障。CPU硬盘RAMServerRAID功能SCSI卡JBOD(JustBoundOfDisk)存储技术的核心：RAIDRAID是“RedundantArrayofIndependentDisks”的缩写，中文意思独立磁盘冗余阵列，早期又称“RedundantArrayofInexpensiveDisks”廉价磁盘冗余阵列，由美国加州伯克利分校的D.A.Patterson教授在1988年提出。简单的说，RAID是一种把多块独立的硬盘（物理硬盘）按不同方式组合起来形成一个硬盘组（逻辑硬盘），从而提供比单个硬盘更高的存储性能和提供数据冗余的技术。组成磁盘阵列的不同方式成为RAID级别（RAIDLevels）。RAID0：条带化结构以条带形式将RAID组的数据均匀分布在各个硬盘中，因此具有很高的数据传输率。它没有数据冗余，尽管不占用CPU资源，但并不能算是真正的RAID结构。RAID0只是单纯地提高性能，并没有为数据的可靠性提供保证，而且其中的一个磁盘失效将影响到所有数据。RAID0不能应用于数据安全性要求高的场合。最少磁盘数2个允许坏0颗磁盘容量计算：C=N*DC：可用容量N：磁盘个数D：磁盘容量优点：传输率和硬盘利用率最高，价格便宜。缺点：无冗余，可靠性最差，其中一个磁盘发生故障，所有数据将丢失。应用：通常使用在暂存数据和高I/O速率的工作站。RAID0yMyFileliFMeRAIDLevel0:带区集RAID1：镜像结构它是通过磁盘数据镜像实现数据冗余，在成对的独立磁盘上产生互为备份的数据，100%的数据冗余。当原始数据繁忙时，可直接从镜像拷贝中读取数据，因此RAID1可以提高读取性能。RAID1的成本比较高，其硬盘空间利用率只有1/2。当一个磁盘失效时，系统可以自动切换到镜像磁盘上读写，而不需要重组失效的数据，提供了很高的数据安全性和可用性。最小磁盘数2个。允许坏1颗磁盘容量计算：C=(N/2)*DC：可用容量N：磁盘个数D：磁盘容量优点：可用性高，即使一个磁盘发生故障，逻辑硬盘上的数据依然可用。缺点：需要2个磁盘，但只使用其中一个存储数据。应用：通常使用于较小的系统，其中一个磁盘的容量足够，并用作启动盘。RAID1RAID1:镜像MyFileyyeeMMFFiillRAID3：带奇偶校验码的并行传送将数据条块化分布于不同的硬盘上，RAID3使用简单的奇偶校验，并用单块磁盘存放奇偶校验信息。如果一块磁盘失效，奇偶盘及其他数据盘可以重新产生数据；如果不过如果校验盘也损坏，就无法恢复数据了。RAID具有较高的读速率，适合大文件连续操作的应用。但有数据盘故障时，每次读操作时都需要进行校验计算，读性能大幅度下降。最小磁盘数3个。允许坏1颗磁盘，但不能是校验盘容量计算：C=(N-1)*DC：可用容量N：磁盘个数D：磁盘容量优点：可用性高，即使一个磁盘发生故障，逻辑硬盘上的数据依然可用优点：很好地利用了磁盘空间（如n个磁盘的阵列，n-1被用作数据存储）缺点：必须计算冗余信息，这样就限制了写入性能应用：由于安装容量与实际可用容量的比率较高，通常用于较大的数据存储系统RAID3RAID3:带专用校验驱动器的带区集yMyFileliFMePPPRAID5：分布式奇偶校验的独立磁盘结构实际是由RAID3所衍生而来的技术。RAID3的工作速度比RAID0要慢一些，如果存储数据的硬盘发生损坏，可利用校验盘上的校验信息恢复数据，不过如果校验盘也损坏，就无法恢复数据了。RAID5针对RAID所存在的安全隐患，将数据奇偶校验信息均匀分布在各数据硬盘上，硬盘同时保存数据和校验信息，这样就不用担心校验盘损坏所带来的数据安全问题，RAID5是最常用的RAID方式之一。允许坏1颗磁盘最小磁盘数3个。容量计算：C=(N-1)*DC：可用容量N：磁盘个数D：磁盘容量优点：可用性高，即使一个磁盘发生故障，逻辑硬盘上的数据依然可用；很好地利用了磁盘空间缺点：必须计算冗余信息，这样就限制了写入性能应用：由于安装容量与实际可用容量的比率较高，通常用于较大的数据存储系统RAID5yMyFileliFMePPPRAID5:带分布校验位的带区集RAID10：高可靠性与高效磁盘结构是将镜像和条带进行两级组合的级别。第一级是RAID1镜像，第二级为RAID0累加，这种组合提高了读/写速率，并可用允许硬盘损坏，因此RAID10也是一种应用比较广泛的RAID级别。但是RAID10和RAID1一样只有1/2的磁盘利用率。最小硬盘数4个。适合银行、证劵类对数据非常敏感的企业允许坏2颗磁盘容量计算：C=N*D/2C：可用容量N：磁盘个数D：磁盘容量优点：高读取速度；高写入速度，写开销较小；特定情况下，可以允许N/2个硬盘同时损坏缺点：磁盘利用率低，只有1/2的硬盘利用率，至少需要4块磁盘应用：数据量大，安全性要求高的环境，如银行、金融等领域RAID10RAID-0RAID-1RAID-1MMyyFFiilleeMyFileRAID10和RAID01是否一致？RAID1RAID1RAID0RAID0RAID0RAID1RAID10模型RAID01模型RAID6（独立的数据硬盘与两个独立分布式校方案）RAID6等级是在RAID5基础上，为了进一步加强数据保护而设计的一种RAID方式，实际上是一种扩展RAID5等级。与RAID5的不同之处于除了每个硬盘上都有同级数据XOR校验区外，还有一个针对每个数据块的XOR校验区。当然，当前盘数据块的校验数据不可能存在当前盘而是交错存储的，具体形式见图。RAID6DP的工作原理D12D0D4D8D13D1D5D9D14D2D