存储 频道

2006超级计算大会展现存储未来趋势

    【IT168 专稿】[编者按] 11月14日,2006高性能计算和网络国际会议BOF研讨会(The traditional Birds of a Feather) 在美国佛罗里达州坦帕市正式开幕。IT168率先报道了全球TOP500组织正式对外发布的全球超级计算机最新一期排行榜和相关统计数据,参考“最新TOP500 HPC 14日发布 中国大幅跌落”。

    超级计算大会已经举行了20余年,每年的超级计算大会无疑是一场优异的高端技术的饕餮盛宴。在这里,你可以看到某些可能对未来IT模式产生重大影响的最新技术,即使这些技术有可能在这场充满竞争与喧嚣的舞会中,还处于毫不起眼的位置。

    高性能计算往往基于高效的数据中心,一个超级的存储环境则是一台超级计算机所必不可少的组成部分之一。因此每年的超级计算机大会也展现了许多存储领域的最新技术。而在网络环境发展日益融合的趋势下,这些技术不仅仅预示着存储的未来方向,也极有可能影响整个全球的IT环境。

    下面让我们看看2006年超级计算机大会上都展现了哪些存储的亮点:

蓝色巨人想做大
    IBM在本次展会上展出了一个基于分层存储架构的联合集群文件系统。

    蓝色巨人给GPFS增加了一个DMAPI(数据管理应用程序编程接口),并且展示了这个接口。GPFS(General Parallel File System)是IBM公司开发的高性能集群文件系统,从1998年开始首先应用于AIX集群,2001年后应用于Linux集群。在集群的环境中,GPFS文件系统允许集群中所有的节点访问同一文件的数据,并提供统一的文件存储空间。IBM把该技术和YottaYotta结合起来,使用块级镜像技术提供了更长距离的远程数据镜像。

    有两个原因使这个看起来很有趣:集群文件系统与分层存储的结合对运行大规模集群的站点有很大的吸引力,数据的远程复制也变得更加可行。当文件系统的增长跨越物理边界时,仍然可以通过分层存储管理。

为iWARP做好准备
    iWARP(广域远程数据存储器存取协议)是IETF发布升级的通过TCP/IP运行在以太网上的标准,该标准采用零复制TCP/IP技术来提高速度。最近,很多TCP/IP协议栈通过多内存复制从NIC取得数据。

    iWARP具有通过WAN连接实现RDMA的能力,同时能够在本地的机器之间实现快速连接。因为iWARP运行在标准以太网上,所以可为并行应用的集群计算机提供内部互连。现在,iWARP一般都是通过InfiniBand来实现的。当然,由于目前所采用的是较为超前的10Gb以太网,而不是1Gb以太网,因此实际实现的费用还比较高。

    对于超过4096节点的大型集群系统来说,有很多交换技术可以选择采用,多端口的10Gb交换正在开发当中,预计明年就可以投入应用。

    如果采用iWARP,那么有两个显而易见的优点:

    一,多核心大型交换机能够为更多的节点提供高速连接,而不是像采用小型交换机那样必须采用管理系统维护一个复杂的交换系统。这样也可以创造一个单独的管理系统,因为你可以在管理系统的同时,通过标准以太网通信。

    二、如果iWARP协议被接受,那么不久我们在高端PC主板上就可看到集成的iWARP芯片组。我们都知道,最常用和普遍的产品往往比某些需要还改进的专业型产品更能够赢得市场。

    例如,仅仅几年以前,当人们还在广泛谈论“Fibre on”,意思说在个人电脑主板上集成光纤通道芯片组。IBM 有一段时间也曾经销售“Fibre on”的主板,但是Fibre on没有大规模发展,因为大多数PC用户并不需要光纤通道。对于个人用户来说,谁会为家庭使用的PC配备一个光纤通道RAID?尽管PC拥有庞大规模的市场前景,但是Fibre on的成本太高,IBM依然很快就放弃了这个产品。光纤通道还是通过PCI(PCI-E 或者PCI-X)通过总线适配器来接入。

    Dell网站透露的信息表明,到今天为止,Dell的高端家庭游戏机都支持千兆以太网。某些人士认为,这表明千兆以太网已经成为一个通用产品。

    那么在无线路由器上看到千兆以太网接口是否还需要很长时间?这些乐观的业内人士认为不需要。如果千兆以太网技术现在能够进入普通家庭,那么理论上来说,10Gb技术也会很快到来。如果这样的话,10Gb以太网的费用很快就会变得可以接受,就像0 BaseT, 100 BaseT 和1Gb一样。让我们想象一下iWARP技术在家庭环境应用后优势吧,高速下载和在线游戏,相信这个技术很快会得到大规模应用。

一站式采购
    两家企业- DataDirect Networks和Linux NetworX,展示的产品显示了一些有趣的产品组合。

    DataDirect 公布了他们宣称性能最高,集成度最好的集群存储解决方案,S2A 集群存储方案。该方案是专为高性能,大容量网络集群应用而设计的,性能好,容量大,价格低。

    Linux Networx 宣布了性能可调节的超级系统,LS-P系列系统已经调试完毕,可以立刻投产,该系列产品提供了吞吐量高,价格低。LS-P系统性能可调,对分析以及结构分析应用有很大的影响。

    这两个声明的有趣之处在于,两家厂商都是通过集合了几家厂商的软硬件产品来提供他们的解决方案的。这样你可以通过一站式采购直接购买整个解决方案,并且只需要签一次合同。

    HP已经这样做了,而且好像不少数量的其他厂商业打算步其后尘。这无疑降低了客户的负担,因为厂商不断的作重复的工作,具有丰富的经验。在其他领域这也是一个趋势,比如,Oracle现在也同时提供Red Hat的支持。

其他一些趣事
    SGI 正在进入集群计算的市场,他们在主板上集成了InfiniBand,并且使用多核心CPU:配置了Altix XE1300 Ultra-Dense,以及新的四核Intel Xeon 5300系列处理器。在一个 1U的机箱内,配置了基于Atoka的主板,加上Intel和Supermicro,整个系统集成了16颗内核,InfiniBand和千兆以太网。

    新上市的Cray XT4超级计算机(先前叫做“Hood”)以及Cray XMT多线程系统(Eldorado)都是Cray's Rainier计划的一部分。SGI 的自适应超级计算规划将会使所有的Cray处理技术都采用统一的系统架构。 Cray XT架构为用户体提供了一个通用的用户登陆环境,脚本编辑和运行,通用的资源管理工具,工作调度程序,一个高性能并行文件系统和一个可变的系统接口。这两个系统是完全不同类型的系统。XT4采用AMD处理器,而XMT采用定制的芯片,允许多线程同时运行。

    HP宣布,Unified Cluster Portfolio是专门为高性能计算而设计的产品,性能有了大幅度提高。产品的新特点包括,对HP采用4核intel系列处理器的服务器,工作站的支持。HP的集群平台现在可以运行基于4核处理器的ProLiant服务器,能够给客户提供更多的计算能力,系统性能的提升接近50%。

超级计算大会的变化
    今年的超级计算大会与去年,前年,甚至10年之前相比,并没有很大的不同。新的产品,新的软件,新的赠品,一切都是遵循惯例,但是超级计算大会的意义并不仅仅只是这些,还包括参观和被参观。如果一家公司没有来超级计算大会,那么人们会猜测这家公司发生了什么事儿。结果就是业界的发展和变化都可以在这里看到。

    多年以来,许多倾向都是最先在超级计算大会上展示出来,比如集群,光纤通道,InfiniBand,10G以太网。
尽管厂家已经在其他的展览会上展示了他们的这些技术。但是,在同一个展览会上见到这么多的新技术,仍然是一件让人高兴的事。

0
相关文章