hdd网络上是什么意思( 六 )


“这有什么难的,肯定是SAS啊!”我没经过大脑,脱口而出 。
“再想想,这个Dual PERC可是在FD332上的哈!”龙哥给出提示 。
我一下就悟了:对啊,就是PCIe!
“没错,是通过PCIe连接的 。并且,结合FX2背部的8个PCIe插槽设计来看,FX2的背板核心是PCIe Switch 。包括FD332、PCIe插槽及其旁边的FN IO网络模块都是通过PCIe Switch与前面的服务器节点连接 。正是因为PCIe Switch的存在,所以其连接更加灵活,而且也可以实现更多功能 。”
我真的被震惊了,没想到外观看似如此简单的一个小东西,内部设计却如此的有“门道”……既然FD332的连接都可以如此灵活,借助PCIe Switch,PCIe插槽的灵活性也就毋庸置疑了 。龙哥接下来的操作证明了这一点 。
这是FX2当前的PCIe分配模式:
节点1上有4个PCIe插槽,但只有两个插槽接入了PCIe设备,节点2和节点4上各有两个接入了PCIe设备的插槽 。
为什么节点1上面会有4个PCIe插槽?节点3又到哪里去了?这台FX2里明明是有4个半宽节点的啊 。
龙哥耐心地解释说:FX2后面的8个PCIe插槽,默认分别对应一个四分之一宽插槽位 。譬如,8个FC430的配置,每个FC430分到自己对应的1个PCIe插槽;4个FC630的话,每个节点分到2个PCIe插槽,以此类推 。当某节点不能拥有PCIe插槽时,譬如我们这个配置里节点3是FD332,不需要也无法接入PCIe设备,它原本对应的2个PCIe插槽,就被FX2自动分配给靠前的节点,也就是节点1 。
如果我们对这种“将无主的PCIe插槽追加到第一台服务器节点上”的分配方式不满,FX2也提供了另一种选项:在PCIe插槽的“设置”页面,勾选“PCIe重新分配”,FX2就会用另一种规则自动分配PCIe插槽,如下图:
在PCIe插槽的“设置”页面,勾选“PCIe重新分配”选项,然后点击“应用”即可重新分配PCIe插槽
与默认的自动分配方式不同,“PCIe重新分配”希望在有权瓜分PCIe插槽的节点之间尽可能做到平均分配 。比如在当前的这台FX2中,其有8个PCIe插槽,无法平均分配到3台FC630服务器上,“PCIe重新分配”的策略是干脆舍弃最后面的服务器节点,将8个PCIe插槽,平均分配到靠前的2台FC630服务器上,每台FC630上会有4个PCIe插槽 。
两种不同的分配方式,具体可见下面的逻辑拓扑图:
图上为PCIe默认分配方式,首先满足每个FC630上都有基本的2个PCIe插槽,再将FD332空出的2个PCIe插槽追加给第一个FC630节点;图下为开启“PCIe重新分配”选项,舍弃一个FC630节点,将8个PCIe插槽平均分配到2台FC630上
由于我们为安装Server SAN准备的SSD资源池,需要在每个FC630上都安装1个PCIe NVMe SSD,最终还是采用了默认的PCIe插槽分配方式 。
看到这里我终于想明白了:FX2的FD332直连存储模块和PCIe插槽,分配方式都既支持Scale-out(尽可能分给多个节点),也支持Scale-up(尽可能分给一个节点),而这种灵活性就是PCIe交换所赋予的……
“安装Server SAN需要的硬盘资源池和SSD资源池都准备好了,接下来看哥用一个小时给你装好Server SAN,还有超融合!”龙哥的话又打断了我的思绪 。能有这么快?我看了眼手机,龙哥不想跟我吃晚饭,也不用这么拼吧?!
下午
一小时部署Server SAN,还有超融合
“Server SAN和超融合系统,在部署上有什么区别?”龙哥确实有点儿赶时间的意思,直奔主题 。
看我不知从何说起,龙哥自答:Server SAN是把用于替代传统SAN的软件定义存储(SDS)部署在多个物理节点上,超融合则是在虚拟化环境中进行类似的部署 。
你是说超融合系统多了个部署虚拟化环境的环节?不过,“一小时”能做完这些么?想想我给办公室搭一台文件共享的NAS,还花了一天的时间,这涉及到多个节点的Server SAN和超融合,虽说有可以并行的环节,真能在一小时内搞定?

推荐阅读