分布式集群是否需要用到IB(Infiniband)组网?

请问在分布式存储集群架构技术,如ceph、swift、HDFS、Amazon S3等等,哪些是需要使用IB(Infiniband)组网呢?或者说在什么场景下需要使用IB组网?个人拙见,集群内各个节点的磁盘IO不会太高,一般1-2GB已经算很快的了,而整体集群与外部网络的通信带宽也不会太大,所以就想咨询下:集群内节...显示全部

请问在分布式存储集群架构技术,如ceph、swift、HDFS、Amazon S3等等,哪些是需要使用IB(Infiniband)组网呢?或者说在什么场景下需要使用IB组网?

个人拙见,集群内各个节点的磁盘IO不会太高,一般1-2GB已经算很快的了,而整体集群与外部网络的通信带宽也不会太大,所以就想咨询下:

集群内节点间本地IO到多少,或者集群与外部网络IO到多少,才会用IB组网?在此之下的,可以使用10Gb万兆网卡就能够满足了?

收起
参与18

查看其它 3 个回答sdtimothy8的回答

sdtimothy8sdtimothy8系统工程师浪潮商用机器有限公司

市场上已经有支持IB网络的分布式方案,但是IB网络的低延迟特性需要高性能存储介质才能在用户端获得收益,目前通用的混合存储(HDD+SSD)分布式集群中10Gb网络比较流行,全闪存配置下可以考虑40Gb以太网,全NVMe存储可以考虑IB网络。

系统集成 · 2019-04-26
浏览4574

回答者

sdtimothy8
系统工程师浪潮商用机器有限公司
擅长领域: 存储灾备分布式系统

sdtimothy8 最近回答过的问题

回答状态

  • 发布时间:2019-04-26
  • 关注会员:5 人
  • 回答浏览:4574
  • X社区推广