冬瓜哥送你元宵大礼盒啦！！

祝各位元宵节快乐！

看文章，一字不落从头看到尾，方能得元宵大礼盒！

大家知道，高端存储系统的架构有别于中端双控/多控存储系统，比如最经典的EMC Symmetrix DMX4，以及同时代的HDS USPv。冬瓜哥之前写过一篇论述高端存储架构的文章，其中也提到过，这两款产品属于高端存储系统最终的辉煌，而老奸巨猾的EMC早就看出了端倪，这种将部件拆分松耦合、以及将缓存外置以避免缓存一致性问题实现真多活的彰显逼格的架构，已经走到尽头了，没有什么东西可以继续拆的了。而HDS不死心，继续往前演进了一步，那就是把前后端IO适配卡与主控的主板再拆成两个独立部件，搞出了VSP这一代架构的高端，成为传统高端存储最终的绝唱，当然，这个绝唱也略显凄惨，无人喝彩，无人唱对台戏，自己在台上继续装逼，而更多观众们似乎都去买了云计算大数据分布式超融合等场次的票了。

而VSP，乍一看逼格很高，但是细细一品的话，冬瓜哥却忍不住笑出了声来。拆成部件之后，你还必须得把它们连起来，所以VSP采用了PCIE Switch的方式，在主控主板、缓存板、前后端IO适配卡板的前端各放置了一片或者多片PCIE Switch，所有这些单板在利用核心PCIE Switch交换板星形互联起来。

冬瓜哥点评VSP硬件架构：

主控板。你说说，你既没有USB口，也没有SATA口，就一颗CPU和两条内存，搞这么大一个板子，这是作甚呢，如果没有前端那颗PCIE Switch，其实明明可以将这个小系统做成一个多手掌的大小。但是必须做大，因为高端啊，高端就得大气，上档次，板子太大了导线信号变弱，那就加信号中继器啊，中继器也要占用面积，刚好让硕大的板子显得不那么空荡。难道你能让HDS这么高逼格的老一辈资产阶级革命家跟新一代无产阶级革命家这么实在（下图右侧）啊。不过，人家是要来卖的，而后者是DIY自用的，定位就不同了。

缓存板。看看看看，硕大一个板子，就8条DIMM，有必要么，你说你直接把DIMM放到上面的主控板上放一块不行么？照样可以实现集中式数据缓存啊，只是物理上放一起而已。为啥不放呢？不能放啊，兄弟，放上去不就看着和传统服务器主板没啥区别了么，逼格不够啊！

前后端IO板。惊了！瞠目结舌。硕大一个板子，就出4个SAS连接器，用了两片SAS控制器，一定是Broadcom（原Avago/LSI）的，因为其单片最大只能支持8个SAS PHY（2个连接器）。再加上两个边缘PCIE Switch和对应的信号Retimer芯片，这板子看上去相比标准PCIE卡的逼格真是高了不少，唬人~

来看看市售的同样单芯片支持四个连接器（16个PHY）的12Gb SAS HBA卡的尺寸，下图是Microsemi公司的Adaptec系列Raid卡，半高半长标准PCIE卡搞定。就算再加上个PCIE Switch，也不至于上面这么大一张啊。

核心交换板。整个系统的互联就靠这个了，原本CPU与RAM通过DDR直连、IO卡与CPU通过PCIE直连，现在所有部件（CPU本地代码运行内存还是DDR）都通过PCIE网络互联。

如此一看，VSP这种硬件架构设计，本质上就是把原本能够紧凑在一起的各个部件，拆开，然后用华丽的外衣（各个独立的大型板卡）包裹，然后再用一个大盒子（PCIE网络）罩起来，弄成了一个超级豪华大礼盒！内部的东西其实还是那些东西：Intel CPU，DDR内存、SAS/FC控制器。而这些东西原本可以紧凑在一个板子上的。这套大礼盒也有好处啊，比如抗压啊，一屁股坐上去压不坏里面东西啊。的确，将各个部件拆分成更加细粒度的板卡之后，故障粒度变小，可靠性增强。数据缓存共享，可以实现真多活。

正因如此，HDS去年已经宣布不再继续在高端存储系统投入研发，这套豪华大礼盒套装连自己做的都疲倦了。不过也的确没有什么可拆分的部件了。紧耦合架构除了在可靠性上存在故障粒度过大问题之外，相比上述架构，更加紧凑，时延也能够保证。

scrolling="no" frameborder="0" class="vote_iframe js_editor_vote_card" data-display-src="https://mp.weixin.qq.com/cgi-bin/readtemplate?t=vote/vote-new_tmpl&__biz=MzAwNzU3NzQ0MA==&supervoteid=461572355&token=313391924&lang=zh_CN" data-src="/mp/newappmsgvote?action=show&__biz=MzAwNzU3NzQ0MA==&supervoteid=461572355#wechat_redirect" data-supervoteid="461572355" allowfullscreen data-display-style="width: 556.8px; height: 146px;">

冬瓜哥这里没有礼盒，只有满满的知识分享，这就是冬瓜哥送给大家的元宵节大礼！祝大家阖家欢乐，团团圆圆，来年一帆风顺！

历史链接

高端存储江湖风云录

原来高端存储架构是这样演进的