第二页，共二页
此外，考虑到整个机群系统的监控、日常管理工作以及大型存储系统互联、NFS文件的共享，系统还配备了监控节点，并根据存储互连及共享需求采用了具有较强的内存读写能力的存储节点。
曙光4000L系统整体框架图
网络系统平台：突破瓶颈布局天下
在以曙光超级计算机构建起自身高性能计算平台之后，中山大学继而投入到了中国教育科研网格的首批入驻工程当中。在高性能网格计算平台的搭建过程中，长期以来IA架构机群一直存在的I/O瓶颈问题亟待攻克。问题主要表现在两方面，一是网络带宽，二是存储系统带宽。为了解决这个问题，也为了充分发挥各类设备现有的性能，本方案充分考虑到了各计算节点、I/O节点、以及核心交换机的性能参数。在保证了系统稳定的前提下，使每台设备都能得到最大限度的利用。在这套系统中，整个机群系统采用数据通讯网络和管理网络双网分离的解决方案。所有节点有两套网络，1套是管理网，1套是数据通讯网。采用数据网和管理网分开的方式可以减轻数据网的负载，同时由于每个节点都配置了自适应的多块千兆网卡，在今后的升级中可以仅仅增加交换机就可以构造双千兆的网络，增加传输带宽，形成动态分配系统。所以，采用这样的网络配置，不仅仅满足了现有的性能需求，也有着很强的扩展能力，机群中增加的节点可以直接接入交换机，可以保障数据网的带宽，具有很高的性能价格比。
本方案中采用两台千兆交换机来进行并行计算的数据通讯网络，为保障数据通讯有足够的带宽，2台交换机采用堆叠的方式。交换机选用Foundry网络公司的EdgeIron 48GS千兆交换机。该款交换机提供了48个10/100/1000M自适应以太网端口，2个堆叠端口，1个可选的万兆上联模块；交换容量160Gbps，转发性能116Mpps；支持堆叠，最大可完成8个交换机的堆叠，提供384个1000M以太网端口。根据实际情况的不同，对参与同一计算任务的计算节点机设为同一网段，默认出厂为所有节点都在同一网段。
管理网络是由2台D-LINK公司的DES-1048交换机构成的100M网络。该交换机有48个百兆RJ45端口。由于该网络系统主要以管理、监控为主，其数据流量不是很大，本着“接合实际、保证投资”的原则，我们选用了百兆位以太网连接方式。管理网络主要用于机群的管理、监控、登录、任务调度等系统管理员常用工作。
在科学计算应用中，会产生大量、频繁的I/O操作，存储系统有着举足轻重的作用。选择高性能的存储设备，突破I/O存储的瓶颈，成了机群设计中的重要任务。针对用户要求，系统采用2Gbps的光纤通道网卡，并已经过EMC公司PowerPath软件的授权。
网格背后：
曙光公司全面参与了国家网格、教育网格等一系列的项目研究、开发工作。截止到目前，我国已经在北京上海建立了两个国家网格主节点，其中，由曙光公司联合中科院计算所采用美国AMDopteron处理器研制生产的中国第一台运算速度超过每秒10万亿次的超级计算机——曙光4000A也即将问世并落户上海超算中心，成为国家网格南方主节点，它将使得中国成为继美国、日本之后第三个能制造和应用10万亿次商用高性能计算机的国家。
网友评论