XDFS-高性能计算

 

应用需求


  HPC高性能计算是一种数据密集型和计算密集型相结合的应用,对计算能力和I/O处理能力都有较高的要求,存储系统已经成为决定高性能计算集群效率高低的重要因素。高性能计算系统的复杂度与响应要求越来越高,对存储系统提出了更为复杂的挑战:

  1、数据规模不断攀升,要求存储系统快速扩展;

  2、持续增加的带宽要求,GB级的带宽需求已非常普遍;

  3、数据统一存储及数据共享;

  4、长时间密集计算场景下存储的持续服务能力;

 

方案描述


oo.png

     采用TaoCloud XDFS构建分布式存储平台,提供可靠、高效的数据存储服务和弹性的存储扩展能力。作为一套面向海量数据环境的的分布式文件存储系统,XDFS最大支持1024个全活存储节点,整体数据量高达40PB。借助复制卷或纠删码,XDSF可实现故障检测、修复,确保数据可用性和存储服务的持续性。XDFS支持Infiniband的RDMA访问,单个节点可实现1GB+的稳定带宽。

 

方案优势


  1、高可用存储,数据多副本,存储多活,持续服务;

  2、PB级海量存储系统,弹性存储,支持在线快速扩容;

  3、高性能存储,可实现GB-几十GB的整体带宽;

  4、统一命名空间,便捷的共享实现;

  5、支持NFS/POSIX协议,可根据需求灵活选择不同的接入模式;

 

典型应用


  1、石油勘探地震资料处理;

  2、基因预测及分析;

  3、遥感测绘;

  4、材料、力学、高能物理等科研应用;


2