hdd网络上是什么意思( 四 )


“3+1”的模式
回到龙哥的实验室,龙哥拉开另一个机柜的门,我一眼就看到这么一套组合,相比上午给我反复讲解的2U8节点FC430的配置,这套环境给我的启发更大,因为我觉得已经清楚怎么在自己的环境中使用FX2了…?
老司机开腔了,让我的思绪转回到“如何落地”上:
这是一套致力于高可用的关键业务系统,由两套FX2节点构成,上面这套是3台FC630双路计算节点+1台FD332存储节点构成的全闪存储池+HDD存储池的SDS环境,运行的正是你刚才问的Ceph;下面的一眼就能看明白了——两台FC830全宽四路计算节点构成的双机高可用(HA)计算平台 。
看图学画“SDS”
接着龙哥开始为在FX2上搭建一套基于Ceph的Server SAN分布式存储系统做准备 。“当然了,社区版的Ceph不能称为产品(连界面都没有),不适合你这样的用户,我这里用的是XSKY的X-EBS 。XSKY(星辰天合)与戴尔同属未来就绪企业云联盟(Future Ready Enterprise Cloud Organization,FRECO)的成员,我去他们的研发机房看过,大量使用戴尔的服务器,对戴尔服务器的优化工作肯定没问题——你知道SDS与硬件的紧密集成还是很重要的……”
戴尔与XSKY联合推出的飞云存储系统
“R730xd被大量用于SDS这我知道,还是接着说FX2吧 。”我太了解龙哥了,这家伙思维很跳跃,必须及时把他拉回正题 。
“好吧 。看看我这套配置:2U4节点的FX2中使用3个FC630计算节点,和一个FD332存储节点(分配给两台FC630,形成HDD存储池);每个FC630分配至少两个PCIe扩展槽,分别安装双端口万兆网卡和PCIe NVMe SSD(形成的SSD存储池) 。”
整个Server SAN架构大致如下图所示:
“理论上,使用FX2的网络模块FN IO就可以构建一套Server SAN,但遗憾的是,这台FX2上配置的是较老的千兆模块,对于多副本数据保护机制的Server SAN来说,使用万兆网络更有利于性能发挥,所以添加一台Mellanox(迈络思)的万兆交换机来连接FX2的各个节点 。“追求架构“优美”的龙哥一脸遗憾地解释 。
我问了龙哥关于FX2的一些详细的配置,最后整理成下表:
平台/子系统
详细配置
计算平台
【hdd网络上是什么意思】戴尔 PowerEdge FC630 ×3每节点:Intel Xeon E5-2690 v3 ×2,2.6GHz,12核24线程64GB内存,2133MHz
存储平台
SSD资源池:1.6TB NVMe SSD ×3(每FC630节点1个)硬盘资源池:戴尔 PowerEdge FD332 ×115,000 RPM SAS HDD 600GB ×810,000 RPM SAS HDD 600GB ×8软件:XSKY X-EBS 2.2
网络平台
Mallanox SX1024交换机
操作系统及软件
操作系统:CentOS 7.2.1511
FD332:存储拆分小秘辛
我正在整理这套FX2的具体配置,突然想到一个问题:FD332里面的硬盘怎么分配?
设置存储资源池的第一个小目标:把FD332上的16个2.5英寸SAS硬盘分配给2个FC630节点
抬头一看,龙哥早就进入了FX2的CMC(Chassis Management Controller,机箱管理控制器)管理界面,手指着屏幕正回头看我,似乎已经“恭候多时”了 。
我顺着龙哥的手指望过去,“存储模式”下面有三个选项,不由得问:拆分式双主机、拆分式单主机、联合的,这都什么意思?”
龙哥反问道:你知道FD332是什么吗?
我感到有些奇怪:看起来不就是一个JBOD吗?Just a Bunch of Disks,简单说,就是把一堆硬盘连在一起,供主机访问,自身没什么智能 。
龙哥笑道:JBOD此言差矣!FD332的官方名称是“超高密度直连存储(DAS)模块”,可不仅仅是JBOD——倒是可以理解为SAS HBA/RAID卡加上JBOD,怎么能说没有智能呢?HBA或RAID都有智能在内啊——你刚才听我说过“Dual PERC”吧?

推荐阅读