博威---云架构决胜云计算

 找回密码
 注册

QQ登录

只需一步,快速开始

搜索
查看: 2492|回复: 4

深入剖析IBM X5架构与eX5服务器

[复制链接]
发表于 2011-2-23 10:36:51 | 显示全部楼层 |阅读模式
深入剖析IBM X5架构与eX5服务器


为了让中国的媒体与客户更进一步的了解X5架构与eX5服务器的设计理念与竞争优势,在发布会之后,IBM方面也安排了相关的高层与媒体交流,交流的内容我们也将有针对性的在下文不同地方予以体现。

IBMSystem x产品线对我们很重要


前不久我刚写过一篇《好马更需配好鞍:写在IBM X5架构发布之前》来展望X5架构,几天之后,就在3月3日,IBM
X5架构以及基于它而诞生的三款全新eX5服务器就向世界揭开了神秘的面纱。有关于IBM
x86服务器的X架构在之前的那篇文章已有交待,而X5发布会的盛况,亦有报道,因此今天我们也就将精力全部放在X5架构与eX5服务器的深入介绍上。

为了让中国的媒体与客户更进一步的了解X5架构与eX5服务器的设计理念与竞争优势,在发布会之后,IBM方面也安排了相关的高层与媒体交流,交流的内容我们也将有针对性的在下文不同地方予以体现。

IBM大中华区系统科技实验室主任Sidney S. Chow先生,IBM系统与科技部System x全球总经理Adalio Sanchez先生,IBM系统与科技部大中华区System x总经理孙丹女士在X5发布会之后接受了媒体的采访

就在一年前,英特尔推出革命性的双插槽Nehalem-EP处理器(至强5500)之时,有关IBMSystem x服务器部门将被出售或是裁减的传闻就一直不断,如今一年过去了,IBM又再次隆重推出了X5架构,相信已经没有人怀疑IBMSystem x家族的信心,IBM系统与科技部System x全球总经理Adalio Sanchez先生也表示,System x占据了IBM服务器销售收入的53%,出货量的96%,所以对于IBM极为重要。虽然IBM也有UNIX小型机System p业务,但在Adalio Sanchez看来并不冲突,反而还是IBM的优势所在。“UNIX服务器全球的销售额在160-170亿美元,而x86服务器则大约是240亿美元,IBM在UNIX市场占据了约40%的份额,所以完全可以为不同的用户提供相关对应的解决方案,而有些应用在UNIX上表现好一些,有些应用在x86上的速度更快一些,所以两者并不是谁取代谁的关系,”的确,POWER7发布之后,IBM又推出了X5,两块市场可谓齐头并进。

IBM
eX5服务器全家福,由上至下分别是双插槽HX5刀片服务器、双插槽3690X5服务器、最高端的4插槽3850X5服务器

对于开发X5架构的初衷,Adalio Sanchez表示,“根据IBM的调查有85%的x86服务器未能充分的利用起来,还处在空闲的状态,这对于整个世界的IT是一个很大的问题,包括了能耗、空间占用以及维护成本等等,这其中有很大的原因在于服务器的内存资源不够,当需要更多的内存时,就只能购买新的服务器,而如果要做服务器的整合,以简化基本架构,则要面对虚拟化的问题,它对内存的需求更为明显,所以我们需要对它们进行充分的整合,这就涉及到了虚拟化问题,可是虚拟化能力与内存容量关系更密切,所以最大限度的扩展内存容量就是X5架构的最大目的。”

在了解完大体的市场与研发背景之后,我们就来仔细看看X5架构有何独门绝技!

X5架构创新之一:MAX5加速器


既然Adalio Sanchez已经明确表示,X5架构的首要目标就是内存,所以其最大的创新也就是与内存相关的MAX5加速器,而纵观X架构的发展史,我们也能发现其在内存上所做的文章是最多的。

MAX5加速器简介,它共有两种,一种是给机架式服务器使用(上),下方中笔者称之为MAX5-R,一种是给刀片式服务器使用(下),下文中笔者称之为MAX5-B

MAX5加速器是X5架构中最具革命性的创新,充分利用了英特尔新一代的QPI总线的特性,以一种巧妙的方式为服务器平台扩展了内存。这么说可能有些让人容易糊涂,我们可以先看看Nehalem-EX服务器的设计,再来看看MAX5又是如何为其提供额外的内存扩展能力的。

标准的4插槽Nehalem-EX服务器平台设计

在英特尔的给出的标准的4插槽Nehalem-EX服务器设计中,4颗Nehalem-EX处理器点对点全互联,每两颗处理器连接I/O Hub(英特尔的代号为“Boxboro”芯片组),每颗处理器通过4颗可扩展内存缓冲芯片(SMB,Scalable Memory Buffer)控制4路DDR3内存通道,每路DDR3内存最多支持4条DIMM,所以一颗CPU可配16条DIMM,4插槽时就是64条DIMM,这就是4插槽Nehalem-EX服务器的标准配置,而IBMX5架构就是要打破这一限制。

IBMNehalem-EX服务器也仍然是使用英特尔的Boxboro芯片组与SMB来搭建,就服务器本身来讲是标准的Nehalem-EX服务器设计,在这其中并没有采用自己的芯片组,而在MAX5加速器上则采用了自己的芯片,IBM称之为eX5,我认为这是X5架构的最重要的精髓所在。

X5刀片服务器HX5所使用的MAX5-B,红圈部分为IBM自己开发的eX5芯片,主板上的小块的银色散热片下面是SMB芯片,每颗负责4条DIMM,共6颗,所以刀片用MAX5的内存扩展能力最大为24条DIMM,按每条DIMM的容量8GB计算,为192GB,比现有的双插槽至强5500服务器还要多

X5机架式服务器3690X5和3850X5所使用的MAX5-R,绕圈部分为IBM自己开发的eX5芯片,主板上有8颗SMB芯片,总扩展能力为32条DIMM,按每条8GB计算,合256GB

机架式MAX5-R的结构,可以看出它留有QPI端口,在使用时,它通过外连专用的QPI电缆与服务器相连,由此就可以知道它如何为服务器扩展内存了吧

MAX5-R的eX5芯片与端口特写,可以看出有4路QPI,而最上方的则是IBM自己开发的高速EXA端口,用于MAX5的级联

3850X5服务器与MAX5-R的连接示意图,与上面的那个标准的4插槽Nehalem-EX服务器的架构图相比较就可以看出其中的玄机了

IBMeX5芯片可以看做是一个QPI与内存控制器的桥接芯片,4个插槽的Nehalem-EX服务器中,每颗Nehalem-EX的处理器均出一路QPI通过QPI电缆与MAX5相连,所以MAX5与服务器相连的带宽就是4路QPI的带宽,按照6.4GT/s的传输率峰值计算,就是102.4GB/s。但笔者认为,这是QPI双向的总带宽,单向带宽为51.2GB/s。如何MAX5上的一个SMB也是代表一个内存通道的话,就意味着MAX5-B有6个内存通道,按Nehalem-EX标称的最高速率1066MHz来计算就是51.2GB/s左右,而对于MAX5-R,那就是8通道68.2GB/s,看样子4路QPI的单向通道将成为瓶颈,当然这只是笔者的猜测,而即使真的如此,内存容量往往也比内存速率更重要,况且当内存满配时速率会降到800MHz,此时MAX5-R的内存带宽正好就是51.2GB/s的。

IBMeX5芯片在内部也为与其连接的CPU做好了互联准备,我们可以回过头来再看一下前面MAX5的介绍,可以发现它仍然具有Snoop Filter(侦听过滤器,或称轮询过滤缓冲,减少多处理器间所数据查询所产生的延迟和不必要的轮询操作),只是不知道具体的容量(上一代eX4芯片中是384MB的容量),所以从这个意义讲eX5也可算一个具备内存扩展能力的节点控制器。

有人可能会问,HX5是双插槽的刀片,又是如何提供4路QPI与MAX5-B连接的呢?在此先卖个关子,在下文介绍HX5刀片时再说,而由MAX5设计所带来的另一个重要特性——级联扩展。IBM所新推出的三款eX5服务器都可以通过级联成倍的扩展插槽数量,就像X4时代的3950M2一样。当然,这个能力并不是由MAX5所带来的,可是由于MAX5的设计,所以预留了外连QPI的端口,这同样也就为级联扩展做好了准备,这一点将在下文做进一步的介绍。

X5架构创新之二:高性能eXFlash固态盘系统


随着服务器所使用的CPU的性能不断提升,人们越来越感觉到周边数据设备的I/O带宽已经成为了服务器整体性能提升的瓶颈,以前人关注到了内存带宽的不足,当内存通过自身技术的改进与多通道技术的弥补而大大减轻了瓶颈效应之后,I/O带宽的局限性也就再次外移,首当其冲的就是存储系统。传统的硬盘驱动器由于自身的进步缓慢,必须采取“人海战术”,通过RAID方式来集群作战以满足应用的需求。所以,当这次英特尔推出更高性能的8核心Nehalem-EX之后,面向存储I/O的压力也变得更为巨大。

IBM以一个大中型企业的IT应用为例,共用30个数据库(比如ERP、CRM、HR等数据库),每个数据库规格100GB,如果要满足每个数据库15000IOPS的访问负载,则需要巨大的存储系统予以支撑,而它所占用的成本也是巨大的

eX5服务器上IBM引入了eXFlash固态盘(SSD)技术,以3850X5为例,它采用8块高性能的SSD(RAID 5模式),根据IBM的测算,性能相当于800块传统硬盘,与800块硬盘的存储系统相比,成本节省97%,而功耗也只有1%

从某种角度上讲,eXFlash并不像MAX5那样具有创新性,然而从中也能看出SSD在服务器中的地位也将越来越重要,在很多应用中,对容量的需求远没有对性能的需求强烈,而当新一代高性能处理器推出之后,这种反差也将更加强烈,因此eXFlash也完全是顺应潮流之举。

IBM表示,eXFlash包括了SSD与控制器两大部分,SSD采用了高寿命的SLC型产品,而控制器也进行了算法的优化,以最大限度的在保证高性能的同时保证eXFlash系统的可用性和可靠性。

X5架构创新之三:虚拟化I/O


eX5服务器之所以要通过MAX5去扩展内存,就是为了要能提供更为强大的虚拟化性能,而虚拟化发展至今,瓶颈也已经不再是CPU与内存,而是存储与网络。即使已经有了eXFlash解决了存储方面的问题,那么在网络呢?那就是具备虚拟化I/O能力的网卡(NIC)。

此次eX5服务器采用了著名的企业级HBA/NIC厂商Emulex所出品的虚拟矩阵适配器(VFA,Virtual Fabric Adapter),它采用了Emulex的OneConnect统一聚合网络适配器架构(UCNA,Universal Converged Network Adapter),在提供标准的传统以太网连接的同时还具备有虚拟网卡(vNIC)与未来聚合光纤通道与iSCSI传输的能力。

通过I/O虚拟化,NIC可以将数据通道虚拟为4个,应对不同的应用

图中右上角就是两款用于eX5服务器的VFA(上方用于机架服务器,下方用于刀片服务器),为双10Gb/E端口设计,可虚拟出8个NIC或聚合网卡(CNA),再配合BLADE Networks Technologies(BNT)的交换机为不同的应用(如数据库、HR等)提供虚拟网络通道

从上至下的三幅图可以很好的说明Emulex的VFA技术,传输的双端口10Gb NIC只能提供固定的两条10Gb的以太网连接,可是这种带宽对于很多应用来说是浪费的,而通过以太网端口虚拟化设计,每个物理端口可以虚拟出4个端口,即vNIC,而每个vNIC的带宽是可根据应用需求调整的。在未来,Emulex的VFA还将具备FCoE与iSCSI聚合传输的能力(届时就是vCNA了),以最大限度的优化利用10Gb带宽,而这也是于虚拟端口分不开的

Emulex的VFA除了用于eX5服务器之外,还用于其他4款IBM已经发布或即将发布的服务器,分别是2U的x3650 M3(采用6核心至强5600处理器),1U的x3550 M3(采用6核心至强5600处理器)以及HS22与HS22V刀片服务器。

X5架构创新之四:FlexNode级联扩展

虽然在发布会上,IBM将这一特点列为创新之五,但我觉得有必要把它提前来讲,这也有助于理解第五个创新——OnForever可靠性。

前面讲过,由于MAX5的外连QPI的设计,这使得eX5服务器也同时具备了通过外连QPI电缆以进行级联扩展/组合的能力,而且还可以加入MAX5扩展,这就是FlexNode。

eX5服务器自身扩展和与MAX5组合时扩展的级联架构

通过QPI电缆进行互联,HX5刀片可以扩展成4插槽刀片,3690X5也可以扩展成4插槽的机架服务器,而3850X5则可扩展成8插槽的系统,而内存容量也将成倍增加,与其他厂商标准化设计的Nehalem-EX服务器相比,内存容量最多可达对手的两倍,如果以当前最高水平的单条DIMM 16GB容量计算,两台带有MAX5-R内存扩展的3850X5的级联之后的8插槽系统即可获得高达3TB的内存容量

FlexNode可以让用户很灵活的使用双节点配置,从而带来很多相应的好处

eX5服务器不仅可以自身进行级联,即使加入MAX5也没有问题。现在我们可以再回想一下前面所讲到的MAX5的内存扩展设计,在MAX5-R的结构图中,我们也可以看到它的后端还有一组EXA接口,这个端口的作用就是承上启下,连接另一个MAX5加速器。

两台均带有MAX5-R的3850X5级联架构图,MAX5-R之间采用了IBM自有的高速EXA总线互联,然后再通过4路QPI与另一台3950X5相连,从而使MAX5-R成为了级联的节点,这种方式也同样适用于3690X5

从这张图中我们可以看到3850X5与3690X5带有MAX5-R时的级联结构

现在我们就能进一步了解IBM
eX5芯片所发挥的作用,以3850X5为例,均以4路QPI进行互联(这其中应该涉及到了EAX与QPI之间的转换),虽然肯定会因为节点桥接有延迟上的增加,但相对于成倍的扩展插槽与内存容量的效果,这点损失显然是值得的。在下文相关产品的具体介绍中,我们还会讲到FlexNode的设计。

X5架构创新之五:OnForever可靠性

俗话说合久必分,分久必合,什么时候会分呢?肯定是一方有问题了,什么时候会合呢?当然是两方很要好的时候,那么对于eX5的FlexNode的级联扩展设计来说,也是如此,既然能合在一起,也就能分得开,而且这一切是自动的,从而使eX5服务器在获得级联扩展能力的同时,也具备了节点容错能力。而与其他的容错技术加在一起,就具备了eX5服务器的最后一个创新之处——OnForever可靠性。

通过FlexNode技术的介绍,我们不难理解2插槽+2插槽变4插槽的二合一的原理,那么反过来也一样,通过专用的固件与管理软件的配合,FlexNode也具备了Node FailOver的能力,当级联的两个节点其中一个有问题时,或是应用的需求要让级联的节点分开时,可以再一分为二,将有故障的节点隔离,或是变成两个独立的节点,这种灵活的设计显然增加了级联系统的可靠性。

此外,eX5还具备很多其他的容错技术,包括ChipKill的内存校验功能(可应对数据位错误)、Memory ProteXion内存保护能力(可应对单颗内存芯片失效)、内存镜像功能(可应对单块内存插失效)和内存擦洗功能(定期的内存可靠性检测),另外还有预测性的故障警报功能,可覆盖CPU、内存、硬盘/SSD、风扇以及电源、QPI电缆等关键设备,再配合Nehalem-EX自己的容错技术,以最大限度的保证eX5服务器的高RAS特性。

图解eX5服务器——4U服务器3850X5

在介绍完X5架构的技术细节之后,我们来看看eX5服务器的具体设计。需要强调的是,本次发布只是X5架构,eX5服务器的细节并没有谈太多,在英特尔于3月底发布Nehalem-EX处理器之后,IBM将会正式发布新一代的X5服务器,届时才会有更为具体的规格公布。

3850X5的基本特点

3850X5服务器的基本结构

秉承免工具拆解设计,前面板很容易拆下来,之后就是两个薄型的散热风扇,它们是为内存散热准备的

4颗Nehalem-EX处理器一字排开,前面是8个内存插卡,可两两互为内存镜像

内存插卡特写,每个插卡配有两个SMB,共8条DIMM

内存卡上的内存特写,为美光公司的2GB DDR3-1066内存条

取下一个CPU散热器,可以看到Nehalem-EX处理器

在CPU之后是两个1975W的电源,电源风扇也起到了为CPU散热的作用

注意电源下方的可伸缩金手指插口,这是电源热挺拔的设计重点

当提起电源扳手后,金手指插口收起,就可以从后方拔出电源了

机箱的后半段(电源+I/O仓)也是免工具折解,可以整体的拆出来

在电源之下就是QPI外连接口,总共有4路QPI(两两一组)

3850X5所使用的Emulex VFA

3850X+MAX5-R后情形,就像在底下加了一台1U的服务器

3850X5做级联时的架构图,可以看出级联也是通过4路QPI来完成的,而在没有级联或是接入MAX5-R时,4颗Nehalem-EX做到了全互联

IBM从2001年推出第一代X架构之日起,其4插槽的英特尔至强服务器就一直具备可扩展至16插槽的能力,而到了第五代X架构时,只推出了最高8插槽的扩展设计,难道是遇到了什么难题了吗?按理有了更为方便的QPI点对点总线技术,扩展至32路都是没有问题的。对此,Adalio Sanchez表示借助于MAX5IBM的确有能力扩展至更高插槽数量的Nehalem-EX服务器,但目前看来似乎还没有这个必要,因为8插槽的Nehalem-EX已经非常强大了,至于是否需要进一步向上扩展,要看市场的需求做决定。

图解eX5服务器——2U服务器3690X5

3690X5是一款双插槽服务器,这也是IBM
X架构首次引入到双插槽的系统中(以往都是4插槽系统),通过Nehalem-EX的高性能和高RAS性能来打造顶级的双插槽服务器,IBM甚至宣称,可以通过MAX5-R来使至强6500系列(只有两路QPI的Nehalem-EX)也具备级联扩展至4插槽的能力。

3690X5的基本特点

3690X5的结构图

3690X5的一个设计亮点在于双层的内存插板设计,一层有4颗SMB共16条DIMM,总共32条DIMM

上层的内存插板可以很方便的取下

下层的内存插板

3690X5内存插板特写

3690X5的级联设计,在非级联或MAX5-R扩展时,可以看出两颗Nehalem-EX是双互联架构(有两条QPI互联),而做级联后则是标准的全互联架构

图解eX5服务器——HX5刀片


与3690X5一样,这次IBM也首次在刀片服务器上引入了X架构了,从而也让HX5刀片具备与众不同的能力,大大提高了其在刀片市场上的竞争实力。

HX5刀片的基本特点

HX5刀片的基本结构,图中显示的是两个刀片级联的状态

HX5刀片(左)与MAX5-B背板(右),HX5处理器上方的缺口就是QPI扩展接口

HX5的两个I/O插槽,可以用来插Emulex的VFA(CFFh)

HX5的级联架构图,与3690X5基本一致

IBM预计会在英特尔发布Nehalem-EX之后立即正式发布eX5服务器,届时我们将会做进一步的详细介绍,敬请留意!







 楼主| 发表于 2011-2-23 10:36:59 | 显示全部楼层
X3850 X5 2C/2个板/8条最优插法:2011-01-06 10:032C/2个板/8条最优插法:
18,36,27,45,
多个内存板时,对应就可以了。
如:4个板,4个条时,都插1111,其实不按顺序也可以认到。
 楼主| 发表于 2011-2-23 10:41:59 | 显示全部楼层

System x 3850 X5 DAU系统安装测试报告


       System x 3850 X5 DAU机器的一些照片:
       1、x3850X5内部:

       2、x3850X5内存板:

       3、x3850X5内置USB接口:

       4、x3850X5正面:

       5、x3850X5正面风扇:

       6、x3850X5CPU位置:

      System x 3850 X5 DAU系统安装测试报告:
       DAU x3850 X5配置:

CPU

4颗Intel Nehalem EX X7560 2.27GHz 8-core 130W处理器,HT

内存

8个内存板,每个内存板上2条2GB DIMM,共32GB(16×2GB)内存

RAID卡

ServeRAID 5015,512MB缓存,带有电池

硬盘

2块146GB 2.5” 10Krpm SAS硬盘,最大可安装8块硬盘

其他

2个1975W电源,带有机架导轨,uEFI,iMM

       x3850 X5操作系统测试:

Vendor

OS Version

测试结果


注释

Microsoft

Windows Server 2008 企业版64位 with SP2

通过


安装过程需要手动加载ServeRAID 5015驱动程序。系统安装完成后,需要安装Intel Chipset、Broadcom网卡和iMM USB Over LAN的驱动程序。

Microsoft

Windows Server 2003 企业版 32位 with SP2

通过


可以识别32个CPU,需关闭HT
安装过程需要手动加载ServeRAID 5015驱动程序。系统安装完成后,需要安装Intel Chipset、Broadcom网卡和iMM USB Over LAN的驱动程序。

Microsoft

Windows Server 2003 企业版 64位 with SP2

通过


安装过程需要手动加载ServeRAID 5015驱动程序。系统安装完成后,需要安装Intel Chipset、Broadcom网卡和iMM USB Over LAN的驱动程序。

RedHat

RHEL5 U3 i386

通过


可以识别32个CPU,需关闭HT

RedHat

RHEL5 U3 x86-64

通过


可以识别64个CPU

RedHat

RHEL5 U4 i386

通过


可以识别32个CPU,需关闭HT

Red Hat

RHEL5 U4 x86-64

通过


可以识别到64个CPU

Red Hat

RHEL5 U4 x86-64 XEN

通过


XEN核心可以识别32个CPU

Novell

SLES11 x86-64

通过


可以识别到64个CPU

Novell

SLES11 x86-64 XEN

通过


XEN核心可能识别32个CPU

Novell

SLES10 SP3 x86-64

通过


可以识别到64个CPU

Novell

SLES10 SP3 x86-64 XEN

通过


XEN核心可以识别32个CPU

VMware

VMware 4.0 U1

通过




       x3850 X5使用ServeRAID 5015阵列卡,这个卡的配置方法和之前的ServeRAID MR10代卡相同。如果需要具体配置方法可以参考FanQi放在2008年Teamroom中的“ServeRAID MR10M RAID配置指南”文档。
       Windows Server 2008 Enterprise Edition x64 with SP2安装:
       Windows Server 2008本身不提供ServeRAID 5015的驱动程序,因此在安装系统的时候需要手动加载ServeRAID 5015驱动程序。
       下载和制作ServeRAID 5015驱动程序的方法:
       ServeRAID 5015驱动程序下载地址:
       http://www-947.ibm.com/systems/support/supportsite.wss/docdisplay?lndocid=MIGR-5082161&brandind=5000008
       下载驱动程序包ibm_dd_sraidmr_4.17.2_windows_32-64.exe,运行解压后,可以看到针对Windows 2003和Windows 2008不同版本的驱动目录,根据我们要安装的操作系统版本,选择相应目录中的驱动程序。
       如果有USB软驱的话,可以将驱动程序复制到软盘上进行加载。
       也可以通过类似WinImage、WinISO这样的软件,将驱动程序打包成为.IMG或者.ISO的文件。然后在iMM Remote Control中的Virtual Media Session中进行加载。如下图是在Virtual Media Session中同时加载Windows 2008的ISO和驱动程序的IMG进行系统安装的方式。

       驱动程序加载方法:
       Windows Server 2008安装启动到选择“您想将Windows安装在何处?”的时候,在可安装的磁盘列表中是空的,请点击“加载驱动程序(L)”,如下图:
      
       然后点击“确定”,系统会扫描所有磁盘上的驱动程序,找到可以加载的驱动后,出现如下窗口:
      
       选择“ServeRAID 5015 SAS/SATA Controller”(在A上和在B上的是相同的,选择哪个都可以)。然后点击“下一步”。驱动正确加载后,就可以识别到磁盘,点击“下一步”就可以继续系统安装。(如果需要分区,点击“新建”创建分区即可)

       Windows Servr 2008安装完成后,我们还需要另外加载Intel Chipset、Broadcom网卡和iMM USB Over LAN的驱动程序。
       IBM网站Intel Chipset驱动程序下载页面:
       http://www-947.ibm.com/systems/support/supportsite.wss/docdisplay?lndocid=MIGR-5082466&brandind=5000008
       另外也可以从Intel网站下载最新版本的Chipset驱动程序:
       http://downloadcenter.intel.com/Detail_Desc.aspx?agr=Y&ProdId=816&DwnldID=18494&lang=eng
       Broadcom网卡驱动下载页面:
       Broadcom NetXtreme II驱动程序For Windows:
       http://www-947.ibm.com/systems/support/supportsite.wss/docdisplay?lndocid=MIGR-5081939&brandind=5000008
       Broadcom NetXtreme II驱动程序光盘(包含对所有操作系统的驱动程序):
       http://www-947.ibm.com/systems/support/supportsite.wss/docdisplay?lndocid=MIGR-5081963&brandind=5000008
       iMM USB Over LAN驱动:
       iMM USB Over LAN的驱动程序包含在uEFI或iMM或DSA的Windows版本刷新程序包里,通常在系统下进行uEFI/iMM/DSA刷新的时候,会自动将这个驱动程序安装上。因此这个驱动程序对系统运行没有任何影响,可以不用安装。如果需要安装的话,可以从网上下载x3650M2或者x3550M2机器的uEFI/iMM/DSA微码Windows刷新包,然后运行选择解压缩系统安装完成后,在系统的设备管理器中看到的未知设备列表:
      
       RHEL5 U4 x86-64安装:
       直接使用RHEL5 U4 x86-64的安装光盘或者通过iMM Remote Control加载ISO文件启动安装即可,无需额外加载驱动程序。
       SLES10 SP3 x86-64安装:
       直接使用SLES10 SP3 x86-64的安装光盘或者通过iMM Remote Control加载ISO文件启动安装即可,无需额外加载驱动程序。
       SLES11 x86-64安装:
       直接使用SLES11 x86-64的安装光盘或者通过iMM Remote Control加载ISO文件启动安装即可,无需额外加载驱动程序。
      
       VMware vSphere 4.0 Update 1安装:
       直接使用vSphere 4.0 Update 1的安装光盘或者通过iMM Remote Control加载ISO文件启动安装即可,无需额外加载驱动程序。
       注意:在配置管理IP网卡的页面中,请不要选择cdc_ether Network Adapter的这一项,这个网卡是iMM USB Over LAN使用的虚拟网卡,并不是真正的网卡。请选择Broadcom NetXtreme II的网卡。
      
       System x 3850 X5 DAU安装Windows系统所需要的一些驱动程序:
       ServeRAID 5015驱动程序下载地址:
       http://www-947.ibm.com/systems/support/supportsite.wss/docdisplay?lndocid=MIGR-5082161&brandind=5000008
       安装Windows系统的时候,如果使用iMM Remote Control中的Virtual Media加载驱动,需要将驱动程序制作为.IMG格式的文件,或者复制到U盘中,再通过Virtual Media功能加载到服务器上。
       Intel Chipset驱动程序:
       IBM网站Intel Chipset驱动程序下载页面:
       http://www-947.ibm.com/systems/support/supportsite.wss/docdisplay?lndocid=MIGR-5082466&brandind=5000008
       另外也可以从Intel网站下载最新版本的Chipset驱动程序:
       http://downloadcenter.intel.com/Detail_Desc.aspx?agr=Y&ProdId=816&DwnldID=18494&lang=eng
       Broadcom NetXtreme II驱动程序:
       Broadcom NetXtreme II驱动程序For Windows:
       http://www-947.ibm.com/systems/support/supportsite.wss/docdisplay?lndocid=MIGR-5081939&brandind=5000008
       Broadcom NetXtreme II驱动程序光盘(包含对所有操作系统的驱动程序):
       http://www-947.ibm.com/systems/support/supportsite.wss/docdisplay?lndocid=MIGR-5081963&brandind=5000008
 楼主| 发表于 2011-2-23 10:45:07 | 显示全部楼层
精彩不容错过图解--IBM X3850 服务器拆机秀

作者:  转载自:  发布日期:2010-8-9

eX5是IBM的第五代企业级X86服务器设计架构,不过跟其高高在上的前辈eX4不同,今年这一架构已经开始向双路和刀片系统下移,不再仅限于四路以上平台,这也使得市场对于这一代产品充满了更多期待。据了解,IBM基于eX5架构的X5系列服务器正陆续上市销售,包括4路服务器x3850 X5、双路服务器x3690 X5和刀片服务器BladeCenter HX5。
  7月26日,IT168服务器频道记者受邀参观了IBM位于上海张江高科的中国系统与科技开发中心(CSTL)实验室,CSTL是IBM系统与科技事业部(服务器存储是其主要业务)在中国唯一的研发中心。CSTL System x服务器软件工程师雷鸣现场对System x3850 X5进行了“搭积木”式的拆解与组装。
System x3850 X5是何方神圣?
  在看产品拆解之前,我们不妨先来了解一下System x3850 X5是一款怎样的产品:
  x3850 X5是一款支持4颗至强处理器的4U 机架优化式企业服务器,拥有模块化灵活配置、大内存扩展和节点分区等功能,也是目前IBM X86服务器产品线中的旗舰级产品,为计算密集型和内存密集型工作负载提供最大的利用率、可靠性和性能。
  模块化的构造块设计让你既能够按照当前需求自定义系统、同时又能够应对不断变化的工作负载。借助于eX5架构带来的QPI超高速CPU直接技术以及MAX5内存扩展技术,x3850 X5 拥有4个CPU插槽+64个内存DIMM,也可以扩展为 4个CPU插槽和 96个内存DIMM,而最高可达8个CPU插槽和192个内存DIMM。用户可根据环境的变化重新分配资源和分区系统,可以多支持 50%的虚拟机和提供领先的数据库性能。
  跟前几代产品相比,x3850 X5的内存容量、内核数和硬盘驱动器数量都增加到了两倍,加上基于IBM第五代企业级架构的eX5 芯片组,不仅实现了灵活的高可扩展性,也拥有了更高的性能、可为虚拟化和业务应用提供更高的利用率、吞吐量和带宽。
  除此之外,其他值得一提的设计与重要组件还包括:eXFlash固态存储模块、IBM Systems Director管理软件、IBM Systems Director Active Energy Manager能耗管理软件、电源优化与节能智能型设计、光通路诊断、Predictive Failure Analysis故障预警分析、可选嵌入式虚拟机管理程序等。IBM X3850 X5服务器是IBM一款高端的X86服务器,这款4U机架式服务器拥有4个CPU插槽+64个内存DIMM,也可以扩展为 4个CPU插槽和 96个内存DIMM,而最高可达8个CPU插槽和192个内存DIMM。同上一代产品相比,x3850 X5的内存容量、内核数和硬盘驱动器数量都增加到了两倍。IBM X3850 X5服务器还有eXFlash固态存储模块、IBM Systems Director管理软件、IBM Systems Director Active Energy Manager能耗管理软件、电源优化与节能智能型设计、光通路诊断、Predictive Failure Analysis故障预警分析、可选嵌入式虚拟机管理程序等组件。
  下面是IBM上海实验室的专家表演的拆机秀,由于IBM X5服务器设计上秉性无工具拆装,所以整个拆解和拼装过程所花费的时间只有10分钟不到:
   
    图一:IBM技术专家开始取出组件,拆机秀正式启动。
   
    图二:专家所指就是IBM的著名的光通路诊断面板,如果服务器任何不见出现问题,都能在此面板上显示。
   
    图三:光通路诊断面板近照。
   
    图四:专家讲解X3850服务器内存插槽设计原理,特别是散热通道和挡风板设计原理。
   
    图五:专家取出内存模块,由于X3850 X5服务器都是采用模块化设计,所以组件取出和安装都非常简便。
   
    图六:专家讲解内存通道散热原理。
   
    图七:IBM X5服务器之所以采用无工具拆装,是因为其在设计思路上“无微不至”,如上图所示:蓝色表示拆装时的关键部件,橘红色表示该部件可热插拔。
   
    图八:专家打开CPU上方的盖子,即将对CPU进行拆解。
   
    图九:IBM专家取出CPU风扇。
   
    图十:IBM专家取出电源模块。
   
x3850 X5拆机秀

先取下带有两个大风扇的前面板

开始取内存模块

这就是众所周知的光通路诊断面板

蓝色表示拆装时的关键部件,橘红色表示该部件可热插拔

这是已经取下来的内存板

掀开CPU上方的盖子

取出CPU上的散热器

取出机箱后端的电源模块

不到3分钟,已经拆得差不多了

整个取下后部分的笼子

露出了QPI接口,这个可以用来接另外的X3850进行扩展

拆下来的一些组件

继续拧开螺丝

前面的架子也可以拿出来

    图十一:短短几分钟,专家就完成了对X3850 X5服务器的拆解。


    在拆解完成之后,笔者与其他媒体的记者一起参与了X3850 X5服务器的安装,对于平日里只动笔头的记者们来说,刚开始感觉安装起来可能会比较费事儿,但是经过专家在一些小细节的提示,记者们安装起来丝毫不费劲,短短几分钟就完成了对X3850 X5服务器的安装。
   
    图十二:安装内存模块,由于内存模块采用独立的模块和散热设计,所以安装位置一目了然,刚开始由于不了解橘红色纽扣和蓝色纽扣的区别,所以不知道怎么把模块固定,经过专家指点,记者们很快就把内存模块和散热通道给安装好了。
   
    图十三:插入内存模块。
   
    图十四:插入散热挡风板。
   
    图十五:将CPU风扇扣好。
   
    图十六:将电源模块插入。
   
    图十七:安装好前面的风扇。
   
    图十八:安装好前面的面板。
   
    图十九:整机安装完成,IBM X3850服务器的设计不可谓不精妙。


[/td][/tr]
[/table]
 楼主| 发表于 2011-3-6 15:29:29 | 显示全部楼层
您需要登录后才可以回帖 登录 | 注册

本版积分规则

小黑屋|手机版|Archiver|boway Inc. ( 冀ICP备10011147号 )

GMT+8, 2024-3-28 23:15 , Processed in 0.122910 second(s), 16 queries .

Powered by Discuz! X3.4

Copyright © 2001-2021, Tencent Cloud.

快速回复 返回顶部 返回列表