在一台服务器上实现VSAN环境

1/31在一台服务器上实现VSAN环境《测试文档》前言本文档描述了在一台物理服务器上嵌套ESXi主机并搭建VSAN环境，同时通过了HA和DRS功能的测试过程！目录1.基本环境介绍.........................................................................................................................222.在物理服务器上安装ESXI主机............................................................................................223.用VCSA方式部署vCenterServer.........................................................................................224.安装三台嵌套ESXI主机....................................................................................................13135.VSAN配置...........................................................................................................................16166.功能测试.............................................................................................................................25257.测试过程中遇到过的一些小问题整理.............................................................................3131邓新日期：2016年1月5日欢迎加QQ群276783670交流技术问题2/311.基本环境介绍物理服务器配置：1颗2620-V32.4GMHz6C/64G内存/2块300G10KSAS盘，安装ESXI6.0，用直通或RAID0方式来配置磁盘阵列；vCenterServer：采用VCSA方式部署，部署在物理ESXI主机上（不要部署在第二层嵌套的虚拟上）；虚拟ESXI主机：部署在物理ESXI主机上，部署3台，每台配置为12G内存，一个40G虚拟磁盘用来装ESXI，一个50G虚拟磁盘用来做VSAN存储的缓存盘，二个80G虚拟磁盘用来做VSAN的容量盘。以上4个磁盘都使用精简备置格式。设备名类型IPVMware版本172.16.20.1物理服务器ESXI主机172.16.20.1vSphere6.0U1VSANTest-vCenterServer虚拟机(vCetnerServer)172.16.20.2vSphere6.0U1VSANTest-Esxi-01虚拟机(嵌套的ESXI主机）172.16.20.11vSphere6.0U1VSANTest-Esxi-02虚拟机(嵌套的ESXI主机）172.16.20.12vSphere6.0U1VSANTest-Esxi-03虚拟机(嵌套的ESXI主机）172.16.20.13vSphere6.0U12.在物理服务器上安装ESXI主机安装过程省略。3.用VCSA方式部署vCenterServer第一步：在把VCSA安装包放到安装vSphereClient的电脑上并解压VCSA安装包，打开解压后的VCSA安装包，进么VCSA文件夹里面，在本地电脑上安装客户端集成插件“VMware-ClientIntegrationPlugin-6.0.0.exe”安装过程略。第二步：打开vcsa-setup.html，如果客户端集成插件安装正确并与浏览品匹配就会出下如下和页面，如果显示不出来或是有乱码，就多换几个3/314/31第三步：安装过程此处应填写物理ESXI主机地址，建完后vCenter会建在物理ESXI主机上。5/316/317/318/31如果不建DNS则系统名称处使用IP地址。9/3110/3111/3112/3113/314.安装三台嵌套ESXI主机安装过程省略，下面是几个关键选项点。（在ESXI上部署ESXI时的选项）14/31（虚拟ESXI主机的配置）（虚拟ESXI主机的安装位置）15/31下图是建好了三台嵌套ESXI和安装好vCenter后的界面16/315.VSAN配置第一步：登陆到vCenter上添加主机。主机添加完成后就可以开始VSAN的配了，要配置VSAN需要先关闭HA和DRS，其次要有至少一个开启VSAN流量的VMKernel。17/31第二步：配置网络我们本次测试的主题是用最简单最少步骤的方式来实现VSAN环境的搭建，所以不对网络设计过多描述，实际上网络的设计对VSAN还是相当重要的。如下图所示，我们找到第一台ESXI主机的VMkernel，点“铅笔”图标对VMkernel进行编辑。把”VirtualSAN流量”勾选上即为在这个VMkernel上开启了VSAN流量,如图所示我们这个测试只使用一个VMKernel所以我们也需要“管理流量“，同时后面我们会进行HA的测试，所以“vMotion流量”也是要选上的，但此时我们可以先不选上以后用于选也可以。用同样的方法设置另外的2台ESXI主机。18/31第三步：网络配置好后我们根据图示导航到对应菜单和选项卡，点编缉，在弹出的选项框内选中“打开VirtualSAN”选项即可在群集内开启VirtualSAN功能。开启VirtualSAN功能的同时会有个“向存储中添加磁盘”的手动或自动的选择，如果我们选上自动那系统就会自动的将本群集内的所有适用磁盘进行一系列动作后新生成一个VSANDatestore数据存储，或是将还未加入到vsanDatastore的适用磁盘自动加入到VSAN数存储中。VSAN对磁盘的一系列动作是指：首先会对磁盘进行声名，声名它是容量盘还是缓存盘，然后新建磁盘组，再把磁盘加到磁盘组内。本测试中我们使用手动，以使大家了解整个过程。19/31开启VSAN功能后，稍等一下会看到如下信息，以下信息中可以得出目前VSAN群集内有3台ESXI主机，共有9块磁盘但没有一块可以用，没有闪存盘。同时网络配状态正常。此时VSAN群集会提示vsanDatastore内内没有可用容量，vsanDatastore是我们开启VSAN功能后系统自动生成的共享存储，他会自动被添加到群集内所有ESXI主机上。20/31现在我们可以根据导航来看下每个服务器的数据存储，我们会看到有个vsanDatastore的存储，可以看到容量为0。第四步：将磁盘标记为闪存盘。我们观察下每台ESXI主机的存储器，从图中可以看到我们本台ESXI主机的磁盘情况，如图我们有一块40G的ESXI系统盘，1块将要用作缓存的50G盘，和2个将要用作容量的80G盘。接下来我们要选择50G的磁盘，并点带F字样的“将所选磁盘标记为闪存盘”按钮。用同样的方法把其它2台ESXI主机的50G磁盘标记为闪存盘。21/31第五步：对磁盘进行声明声明磁盘类型，类型是指磁盘是用于容量层还是用缓存层，容量层对应的是HDD，缓存层对应的是SSD。按图示选择群集和磁盘管理功能选项，再点右边的“声明磁盘”。22/31根据图示系统已经自动对行了分类，选择HDD磁盘后点左上角“磁盘的图示”针对HDD磁盘进行容量声明。选择SSD磁盘后点左上角“闪电的图示”针对闪存磁盘进行缓存层声明。23/31声明完后如下图，点确定即完成了磁盘的声名。第五步：创建磁盘组系统太智能了只要我们一点“创建新磁盘组”系统就自动完成了所有ESXI主机的磁盘主创建，实际上分解步骤是需要我们点选每台ESXI主机然后一台台建的。24/31第六步：检查配置信息是否正常经过以上步骤，我们就己经配置好了VSAN，让我们来看下VSAN状态，以下状态信息表名这个VSAN群集里有3台ESXI主机，共有3个可用的闪存盘和6个可用的数据磁盘。整个VSAN的可用容量为6个80G即480G。25/316.功能测试接下来我们将要对这种嵌套的VSAN环境进行HA和DRS的测试第一步：打开HA和DRS功能26/31第二步：处理开启HA后的警告如图所示，第一个警告是ESXI主机没有配网关或是配了网关但网关不通。第二个警告可以对ESXI主机添加1块，共两块虚拟网卡并加到虚拟交换机的上行链路即可。27/3128/31第三步：对每台ESXI主机的VMKernel开启“vMotion流量”。29/31第四步：创建虚拟机这里有个小技巧就是，我们只是想测虚拟机的HA和DRS功能，并不需要运行真实的操作系统，因为我们是在一台ESXI主机嵌套的ESXIVSAN群集所以性能比较差，所以如果真的安装一个完整的操作系统效果是很差的，技巧就是我们新建虚拟机但不装系统，也可以达到HA和DRS功能的测试效果。再一个需要知道的就是这种嵌套的ESXI主机无法创建64bit的操作系统。如下图所示：本图信息可以看到目前有两个虚拟机都运行在172.16.20.11这个ESXI主机上，都为开机状态。现在我们关闭掉这ESXI主机，注意我们是在第一层物理服务器上关闭的。VSANTest-Esxi-01对应的就是172.16.20.1130/31我们会看到172.16.20.11己经“无响应”了同时下面这两个图说明在172.16.20.11上的两台虚拟机己经分别HA到其它两台服务器上并自动重启了。31/31当172.16.20.11连机后又通过DRS机制自动从172.16.20.13迁移回了172.16.20.11。7.测试过程中遇到过的一些小问题整理1.嵌套的ESXI主机不能新建64bit虚拟机，错误提示如下：2.如果是用一个群集内的一台物理机搭建这种嵌套的ESXIVSAN环境，则环境搭好后可以把虚拟建在嵌套的ESXI主机的本地磁盘上，但不能把虚拟机建在vsanDatastor上，错误提示如下：出现了常规系统错误:PBMerroroccurredduringPreCreateCheckCallback:Connectionrefused3.如果遇到虚机卡死的情况，如：“启动客户机操作系统关机时：出现了常规系统错误:Invalidfault，造成虚拟机在vCenter上无法关闭，而实际上虚拟机己经宕掉了”可以用以下命令解决esxclivmprocesslistesxclivmprocesskill-w52224-tsoft/*52224是用list查出来的ID号。