机房360首页
当前位置:首页 » 存储资讯 » 高性能计算实战:解读三种HPC存储方案

高性能计算实战:解读三种HPC存储方案

来源:机房360 作者:Lily编辑 更新时间:2011-7-20 11:01:03

摘要:一直以来,HPC的计算部分都是用这种方法选择处理器和内存并设计互联结构、规定软件栈和工具。当然,这一切都和存储密不可分。

  
  这三种方案能够很灵活地解决HPC的存储问题,满足您的需求并提供给您一个高效存储方案。如果您需要一种以上的存储方式,您可以轻松地以高效、低成本的方式对它进行扩展。如果您的应用程序和用户不需要高速暂存器,那么您就可以不用付费购买并行I/O存储方案。
  
  接下来,我们将要讨论第一种方案——联机永久存储,它专注于为小型系统提供合理的性能表现。另外,如果大型系统对用户主目录和应用程序目录的性能没有迫切的需求,那么联机存储也是一个不错的选择。
  
  HPC联机永久存储:NFS是候选方案之一
  
  HPC的计算节点都需要一个常见的文件系统。NFS为这个常见的文件系统提供了一个简单、稳固的解决方案。基于NFS标准的存储方案被广泛用于Linux的HPC集群空间,因为NFS简单易操作并且历经考验,故障模式为公众所知,而且在每一个Linux发行版中都是事实上的标准安装包,非常方便。这种特性让NFS成为了许多HPC装置的联机存储方案的一个较好的选择。根据2009IDC的调研,在110个HPC站点中,NFS是使用最为广泛的文件系统。91个最大的HPC系统中,56%都在使用NFS。同样的,近期展开的64个HPC系统中,其中64%使用的是NFS。这份调查说明在HPC部署中,NFS作为一个顶级文件系统的选择是很重要的。
  
  无论以下哪种情况,NFS都可以为HPC集群提供一个稳定的文件系统方案:(1)集群应用程序的I/O要求可以通过单个或者多个集群服务器满足,(2)计算节点数量与连接后台存储的带宽相称,(3)存储容量能够满足集群需要,(4)您需要一个可靠、容易理解并易操作的存储。
  
  从理论上来说,如果应用程序的文件访问模式是N个用户访问N个文件,而且并行应用程序只有单个进程执行I/O,在这种情况下NFS作为主应用程序存储将运行得很好。许多使用NFS作为主存储的应用程序都能符合要求并运行得非常好。目前的最佳实践是无论HPC计算集群多大,统一使用10Gb以太网或者InfiniBand连接NFS服务器。
  
  然而,当系统开始庞大起来或者数据集增加,或者当许多计算客户同时存取一个单一文件(N对1文档存取),NFS可能就不是最佳选择方案了。在这种情况下,应用程序可以运用专用的高性能存储器来执行应用。

本文地址:http://www.jifang360.com/news/2011720/n756225320.html 网友评论: 阅读次数:
版权声明:凡本站原创文章,未经授权,禁止转载,否则追究法律责任。
相关评论
正在加载评论列表...
评论表单加载中...
  • 我要分享
更多
推荐图片