奇东WSA600N-2U服务器搭载KD-9036TMF万兆交换机组建万兆光纤汇聚无盘网络方案测评
一、网吧应用需求分析:
1.服务器数据传输瓶颈。随着服务器硬件的发展,制约服务器性能最关键的磁盘也得到了极大提升。SSD超高的IOPS(磁盘每秒进行读写I/O的次数)以及读写速度与内存缓存的应用,目前服务器的数据传输瓶颈实际上从磁盘最转移到服务器网卡与核心交换机传输之间了。
2.网吧业务多元化需求。WINDOWS 7 DirectX11和3D等新技术、新应用在网吧的流行,蓝光硬盘、3D高清视频的逐步成熟,都加大了网络的数据流量。网吧新一代的客户机操作系统WIN 7 数据量是WIN XP的八倍以上。客户机数量众多,千兆网络难以负荷。
3.千兆网卡的性能瓶颈难以发挥高配置服务器的最大性能,带机量有限。服务器扩展为万兆网卡和万兆交换机组成万兆核心,同样硬件配置的无盘服务器将会获得数倍于千兆网卡的性能效果。不仅能提升数据吞吐量,而且还能大幅提高带机量,保证服务器的高利用率,让网吧投资回报最大化。
4.万兆设备价格大幅降低为万兆方案提供了经济基础。万兆网卡一般是PCI-E x8规格,目前主流的服务器主板均支持PCI-E x8和x16,升级扩展万兆方便。
所以,目前网吧无盘网络规划首先要解决的是无盘服务器与交换机之间的瓶颈问题。无盘服务器与核心交换机采用万兆连接,核心交换机与子交换机采用双千兆光纤汇聚连接,接入交换机与客户机千兆连接,就是未来几年内万兆网吧的基本方案。因此,奇东锐腾适时推出了以奇东WSA600N-2U服务器和奇东KD-9036TMF(核心管理型万兆交换机)为核心的万兆网络方案。
二、硬件环境:
【服务器硬件配置】:
※Intel C602双路新至强服务器芯片组
※XEON E5-2403,10M缓存,LGA1356,最多支持2颗
※32GB RegECC DDR3服务器内存,最大可扩充至192G
※Intel PCI-E双万兆光纤网卡,提供2个SFP+插槽※板载INTEL 千兆服务器网卡※2个SATA3接口,支持RAID0、1、5
※4个SATA2接口,支持RAID0、1、5
※8个SAS2接口,支持RAID 0、1
※奇东2U银天使,含8硬盘抽屉盒,提供9个3.5寸硬盘位,可兼容18个2.5寸硬盘,可扩充热插拔背板※航嘉HK600-2U电源
奇东WSA600N-2U
【硬 盘】:
※1个intel 520 120G SSD (SATA3)(系统镜像)
※1个intel 520 240G SSD (SATA 3)(常玩游戏)
※1个WD 2T RE4 (SATA 2)(游戏盘)
※3个60G SLC SSD (SATA 3)(回写分流)
※1个WD 1T RE4 (SATA 2)(服务器系统+无盘服务端+3层更新临时目录)
【网络设备】:
※奇东KD-9036TMF(核心管理型交换机)4万兆SFP光口,24千兆光口,8千兆电口,168G背板带宽
※奇东KD-3024MF(汇聚型接入交换机)2千兆光口,24千兆电口
※10G万兆光纤模块,千兆光纤模块
※万兆直连线、千兆光纤线等
奇东KD-9036TMF
奇东KD-3024MF
二、软件环境:
1、操作系统:WINDOWS SERVER 2008 32位企业版
2、Intel英特尔Rapid Storage Technology驱动
3、SSD测速工具:AS SSD Benchmark
4、主板IDE开启AHCI模式,以提升SSD磁盘性能。
5、奇东锐腾5.0无盘系统
三、设备规划:
1、硬盘功能分配:
A)效果最佳方案:原则是各硬盘功能独立,以减少因磁盘IO不足造成的客户机秒卡等问题。
1个WD 1T RE4企业盘:分三个区,C盘操作系统,D盘无盘服务端+备份+工具,E盘三层更新临时目录
1个intel 520120G SSD:分二个区,按默认4K格式化,一个区放系统镜像,另一个区做冷门游戏SSD缓存。
1个intel 520 240G SSD:分一个区,按默认4K格式化,存放网吧点击率比较高的热门游戏。
1个WD 2T RE4企业盘:分一个区,按64K格式化,存放冷门游戏。
3个60G SLC SSD : 分一个区,按默认4K格式化,不做阵列,分盘回写,设置客户机交叉回写。
PS:SSD按4K格式化是因为4K读写是SSD盘的强项。
B)各硬盘主板接入分配:主板板载4STAT2+2SATA3 接口,8个SAS2接口,共14个磁盘接口
lintel 520 120G SSD和intel 520 240G SSD,接在SAS2(6GB/S,与SATA3接口一样)口上。
这个2块SSD均是SATA3接口,作为读盘,其读取速度在SAS2卡上读取速度是最快的。
速度对比如下图:左图为接在板载SAS2接口上,右图为接在SATA3接口上。
iaStorA-OK:表明开启主板AHCI模式,磁盘接在板载SATA3接口上,1024K-OK:表明SSD已做4K对齐。
LSI_SAS2-OK:表明磁盘接在SAS口上
lWD 1T RE4企业盘,接在板载SATA2口上。其功能定位不需要占用SATA3接口,当然也可以接在SAS2口上。
lWD 2T RE4企业盘,接在SAS2口上。作为读盘,接在SAS2口上速度有微弱提升。
l3个60G SLC SSD,2个接在板载SATA3接口上,一个接在SAS2口上。60G SLC SSD作为回写盘,接在板载SATA3或SAS2接口上,都可以获得相当快速的写入速度。性能对比如下图:上图为板载SATA3,下图为SAS2卡上。
板载SATA3接口上SLC SSD写入速度:
iaStorA-OK:表明开启主板AHCI模式,1024K-OK:表明SSD已做4K对齐。Iops:磁盘每秒输入输出的次数
SAS2接口上SLC SSD写入速度:
LSI_SAS2-OK:表明磁盘接在SAS口上,1024K-OK:表明SSD已做4K对齐。Iops:磁盘每秒输入输出的次数
2、缓存分配:
l操作系统预留:win2003系统预留2-3G,win2008系统预留4-5G。
l客户机镜像包:按镜像包占用空间大小分配内存缓存。建议2G/镜像包。
l热门游戏盘:剩余的大部分内存分配给热门游戏盘,其他的分配给冷门游戏。
l冷门游戏盘:内存缓存+SSD缓存
l回写盘:由于回写盘的数据大都是随机性,相同文件重复使用的几率不大,再加上SLC SSD的强大写入能力,所以一般不用分配内存缓存。若服务器内存充足也可为回写盘少量分配内存缓存。
3、网络设备规划:
l奇东KD-9036TMF(核心管理型交换机)做中心交换机,4个万兆SFP光口连接服务器万兆光纤网卡,其他千兆光口作为子交换机汇聚接入口。
l奇东KD-3024MF(汇聚型接入交换机)2个千兆光口,汇聚接入中心交换机。组成主干光纤方案,降低主干网络延迟,提升网络吞吐量。
l服务器万兆光卡:做汇聚,负责奇东锐腾无盘客户机系统启动和游戏虚拟盘,为关键业务提供冗余备份功能。
l服务器板载千兆网卡:用于游戏三层更新、客户存档和网络备份。
4、网络拓扑图:
四、性能测试:
1.多台PC同时开机测试。
万兆与千兆对比测试数据。为了测试数据的准确性,都是在一台服务器带120台WIN7客户机的情况下测试的。
120台电脑同时启动的时间:客户机四千兆网卡汇聚网络客户机万兆核心网络
启动时间(秒)启动时间(秒)
120台启动时间约4分钟120台最慢一台约1分38秒,平均时间在1分20秒左右
2.服务器网卡使用率(多机同时开启,单口测试):
万兆核心在处理突发数据时远远高于千兆核心;
万兆核心在处理大流量数据时远远高于千兆核心,千兆核心的处理速度满载也就100M/S左右,而万兆核心的数据流量能高达1000M/S,充分的把硬盘的速度发挥了出来。