admin 生活百科 2023-04-20

刀片服务器-当Gen-Z遇上CXL：重温刀片 & 多节点服务器

《》

2. Dell|EMC展示了一个Gen-Z的模块的原型。是一个基于Xilinx的FPGA做的模块刀片服务器，使用了类似于PCIE的连接接口。

3. 对于目前的Gen-Z的路线图的展望。和最初的memory-centrical 的架构相比，大家更接受使用Intel 的CXL来连接本地的内存，存储和加速器，Gen-Z更倾向于用作chassis和chassis之间的连接。在2020年，会出现基于CXL的产品，因为理论上PCIE 5.0 在这个时间点会出现。对于支持Gen-Z的模块，也就是关键的内存控制器，Dell|EMC估计会在DDR5的标准中出现。

4. 现在在Gen-Z的网上有38个会员，但是现在已经有57个会员，有好几个重量级的会员加入。

对于未来支持Gen-Z的服务器的架构，在2017年的时候，就有一个设想。[2]

可以看到，系统厂商的演进速度比较保守，在原来的基于PCIE的fabric中构建一个小系统。但是这里面的桥接芯片如何和现有的CPU进行连接。并没有明确的说法。

这里就有一个比较有意思的猜想，在CPU和Gen-Z的桥片之间可以使用CXL，从Intel的宣传上来看，CXL可能会在未来取代UPI成为Intel CPU和加速器之间的标准协议，毕竟现在的UPI不是公开标准。

因此，拿媒体的话，Dell的PowerEdge MX7000 可以说是未来服务器的一个原型，或者代表着未来。TheServerHome同样有一篇对于MX7000的深度报道。[3] 这个报道更加TL;DR, 俺用两句话概括：

1. 没有midplane的设计

2.在设计中突出了interconnection的重要性刀片服务器，计算，存储和网络的分离。

对于第一点，作为Dell DCS的早期成员，Dell DSC的2U4，以及3U8服务器都是Multi-Node 服务器的代表，当时推广这种架构的目的是：

1. 传统的机架的密度太低，2U4可以提高计算密度

2. 传统的Blade server的成本太高。多节点服务器牺牲了管理，但降低了成本。

对于现在Dell MX7000无midplane说将的降低故障，多节点服务器倒是不敢这么讲，主要是：

1. 大部分的midplane采用的都是无源设计，故障率很低，这个比较著名的是IBM 的SystemX 的midplane

2. 多节点服务器中存储和计算节点的互联非常烂，用一句话说就是靠SATA cable，当年我的一个大客户的2U4的硬盘连线都是我在实验室里用线连好，然后交代工厂生产的，不能更加山寨了。这里面还有很多趣闻，如何把前面的storage 背板上的24个硬盘分配给4个node，每家都在机械结构上费工夫。

3. 多节点服务器的外部连线太山寨了。当年部署了2000个node，花了整整一个星期做各种连线，和现在人家百度一天部署上万个几点差远了。

因此，大家肯定是认为Dell PowerEdge MX7000 的确是Blade和Multi-node的结合，未来的方向了。

要注意的是后面的Fabric的类型，A，B, C。目前A是是Ethernet交换机；B1、B2与A1、A2是对等的，也可以做高可用。C是一对FC或者SAS Switch。在没有midplane的情况下，如何连接，俺启示也没有看明白。希望在2019九月发布后可以仔细看看。

但是这就是未来了吗？我是不情愿的。在我在服务器的那个年代，有一个情节一直挥之不去，那就是Sun Microsystem。早在2005年的时候，我看到他们的Blade 6000的时候，才觉得那是未来。什么Fabric ABC，不都是通过PCIE和CPU连接的吗？搞什么飞机，直接上PCIE Fabric就好了。