专栏名称: 企业存储技术
企业存储、服务器、SSD、灾备等领域技术分享,交流 | @唐僧_huangliang (新浪微博 )
目录
相关文章推荐
51好读  ›  专栏  ›  企业存储技术

Dell PowerEdge R640:NVMe直连、NDC网卡、PERC10一览

企业存储技术  · 公众号  ·  · 2017-07-18 23:57

正文

请到「今天看啥」查看全文


本文内容非商业用途可无需授权转载,请务必注明作者及本微信公众号、微博ID:唐僧_huangliang,以便更好地与读者互动。


接前文:《 Dell PowerEdge R940 解析:四路顶配服务器维护平民化

Dell PowerEdge R740xd 解析:服务器只看参数那就错了

Xeon SP 服务器的 M.2 SSD RAID :揭秘 PowerEdge 14G BOSS

今天带大家一起看看 Xeon Scalable 平台的 1U 双路机型—— Dell PowerEdge R640 服务器,同时也通过回顾上一代 13G ,体会下哪些是沿用下来、哪些属于新的设计。


R640 前面板风格,与 14G 中的 2U 3U 服务器都比较接近。


R640 的机箱后端可以有多种布局可选,除了上面的 3 PCIe 扩展卡 +NDC NetworkDaughter Card )网络子卡的配置之外,还可以在此处选配 2 2.5 英寸热插拔驱动器托架。

8 个直连 NVMe SSD ,适用于高性能 SDS/ 超融合


这台 PowerEdge R640 是前面板 10 2.5 英寸 SAS/SATA 盘的配置,根据资料,该机型可以支持最多 8 NVMe 直连 SSD


从这张打开机箱上盖的照片来看, R640 的主板布局与上一代的 R630 比较接近。


从这个角度,我们可以看到 8 40mm 热插拔风扇模块,以及 SAS 扩展器子卡。我还用红圈标出了驱动器背板上的 5 个连接器——与 R940 背板上的相同, 其中 4 个也是用于连接 NVMe SSD (对应 8 U.2 盘)。


由于 1U 服务器不支持那么多的 PCIe 扩展卡, 2 Xeon SP 提供的 96 lane PCIe 3.0 扩展能力可以分出一部分来专门连接 NVMe SSD 。如上图,在其中 1 CPU 散热器与电源连接部分之间,就有 4 x8 PCIe 线缆连接器 ,可以从这里直通背板。

The Register 网站的报道中, PowerEdge R640 搭配 ScaleIO 存储软件,可达 每节点 20 IOPS 、号称提升至 250% 10GB/s 带宽 。以及每节点 76TB 的容量(这个应该是指 10 SAS SSD )。

扩展阅读:《 温故知新: ScaleIO Oracle 性能测试解析

相比之下, R740 系列和 R940 由于要保证 PCIe 扩展槽位的能力( 14G 机型 x16 的支持增加),所以前面板 U.2 NVMe 热插拔 SSD 需要加转接卡,效率上差不多数量增加到 12 个( x4 PCIe )。

NDC 网络子卡与三维导风板散热设计

大家可能也看到了,我拍摄 14G 服务器的环境光线不太好。由于 R640 NDC PERC PowerEdge RAID Controller )结构等相关布局基本上沿用 13G 设计,所以这部分我可以直接拿 R630 来做参考。


请注意从内存插槽到 NDC 网络子卡之间,有一个三维的组合导风板。下面方形的底下应该是 PCH 南桥的散热片,而上面的不规则三角形,则应该是为了将通过内存之后的气流,大部分导到右边的 PCIe 扩展卡位置(位于 CPU-PERC 风道的后方)。


这块 NDC 与我们在 PowerEdge 14G 样机上看到的型号不同,是来自 Intel 的双万兆 SFP+ 加双千兆 BASE-T 设计。


从底面来看, NDC 的散设器比较讲究,包含有 2 根热管和 1 个散热排。


拆下散热器之后,我们可以看到在 Intel 82599ES 双端口万兆 和千兆控制器(应该是 i350 )芯片的 4 个角的位置,都点了底部填充胶来保护。这应该是为了 避免震动带来散热器的晃动引发芯片底部 BGA 虚焊

NDC 除了节省空间和标准 PCIe 槽位之外,其最大价值是模块化,不像主板集成网卡那样固化无法更换。 Dell 目前提供了 不同品牌,不同速率—— 4x1GbE 2x10GbE + 2x1GbE 4x10GbE 2x25GbE 等多种 NDC 选择

PERC9 PERC10 :模块化 RAID 卡、大 Cache& 电池


由于前文中我列出过 PERC H730 Mini RAID 卡安装在 R740 服务器中的照片,这里我们直接看拆下来的模块。请大家留意左边的金属触点,以及散热片右上方固定的电池。


这块电池是不是和手机用的锂电池比较像? 3.7V 电压, 500mAh 容量。


PERC H730 Mini 背面的一侧也有几排 细小的金属触点——确切地说是弹片 ,有点像 Intel LGA CPU 插座里的那些,但周围加上了保护。关于 PCB 正反两面触点的定义,继续看下面这张照片就能理解。


可以看出, PERC H730 Mini 就是夹在主板上的金属触点 PCIe )和 SAS 端口线缆 的触点之间。也就是说这样一个固定设计,同时解决了 RAID 卡的主机和驱动器两部分信号连接,感觉还挺高效的。


最后给大家简单介绍下 PERC H740P ,它属于 Dell 第十代 RAID 家族中的一员,同样有标准 PCIe 扩展卡和上图中的 Mini 两种 Form Factor

不知您注意到没有, PERC H740P 上的 锂电池容量增大了 ,从照片中我隐约看到 2.8wh 的字样。因为它最多支持 8GB Cache 的掉电保护(备份到闪存 PERC H730 只有 1-2GB ),还要为 3-5 年后电池容量下降留出一定的裕量。

在《 炉石传说故障另类分析:这锅 RAID 卡电池背吗? 》一文中,我曾经介绍讨论过 PERCRAID 卡在电池 Cache 保护方面的改进。


不出意外, Dell H740P RAID 卡使用了新一代的 LSISAS 3508 Broadcom/Avago RoC 控制芯片,内置 双核 ARM A15 处理器。根据资料,除了性能提升之外, H740P 应该具备 8GB 非易失性缓存,本次发布时将使用其中 4GB ,而余下 4GB 将通过后续发布的 Firmware 版本来激活。

参考资料

Dell PowerEdge RAID Controller H740P DataSheet

http://www.dell.com/learn/us/en/04/shared-content~data-sheets~en/documents~dell-poweredge-raid-controller-h740p.pdf


:本文只代表作者个人观点,与任何组织机构无关,如有错误和不足之处欢迎在留言中批评指正。 进一步交流 技术 可以 加我的 QQ/ 微信: 490834312 。如果您想在这个公众号上分享自己的技术干货,也欢迎联系我:)


尊重知识,转载时请保留全文,并包括本行及如下二维码。感谢您的阅读和支持!《企业存储技术》微信公众号: huangliang_storage


长按二维码可直接识别关注

历史文章汇总 (传送门): http://chuansong.me/account/huangliang_storage

点击下方“阅读原文”,查看更多历史文章
↓↓↓






请到「今天看啥」查看全文