分布式存储集群规模是否有一定上限?

最佳实践中分布式存储集群规模是否有一定上限?

参与29

7同行回答

sdtimothy8sdtimothy8  系统工程师 , 浪潮商用机器有限公司
理论上是没有上限的,为了整体性能和更好的维护性,会把集群规模控制在一定水平。目前在我们IPS&XSKY联合分布式存储方案中,最大支持存储节点扩展到4096个,按照单机40盘位480TB的数据规模来测算,可以实现1.8EB裸容量规模的数据管理能力,足以支撑海量数据存储的业务需求和场景...显示全部

理论上是没有上限的,为了整体性能和更好的维护性,会把集群规模控制在一定水平。目前在我们IPS&XSKY联合分布式存储方案中,最大支持存储节点扩展到4096个,按照单机40盘位480TB的数据规模来测算,可以实现1.8EB裸容量规模的数据管理能力,足以支撑海量数据存储的业务需求和场景。

收起
系统集成 · 2019-04-24
浏览4504
三虎三虎  系统运维工程师 , 中国邮政储蓄银行
不建议做特别大的集群(比如200节点以上),不管是单纯的存储,还是海量的并行计算,随着数据量增大,集群的管理(重启后的数据上线,扩容),系统的健壮稳定都不是很好,特别在开源架构下,很多不可控不可查的问题接连出现,另外集群规模过大,必然导致集群中断情况下业务的影响范围。另外做开源...显示全部

不建议做特别大的集群(比如200节点以上),不管是单纯的存储,还是海量的并行计算,随着数据量增大,集群的管理(重启后的数据上线,扩容),系统的健壮稳定都不是很好,特别在开源架构下,很多不可控不可查的问题接连出现,另外集群规模过大,必然导致集群中断情况下业务的影响范围。
另外做开源没有人是不行的,维护量很大,小集群还可以自己摸索,大集群还是找实力相当的厂家背书,这样大家都睡得好。

收起
银行 · 2019-04-26
浏览4285
kw002007kw002007  存储架构师 , X公司
保持一定的集群规模有助于提升性能和稳定性,以及故障隔离显示全部

保持一定的集群规模有助于提升性能和稳定性,以及故障隔离

收起
互联网服务 · 2019-04-25
浏览4217
吕作令吕作令  其它 , A
分布式存储采用sclae-out架构提供了非常出色扩展能力,支持PB EB级别数据存储,在实际生产环境中推荐按需,按照数据结构类型进行分池分集群管理,降低运维复杂度。显示全部

分布式存储采用sclae-out架构提供了非常出色扩展能力,支持PB EB级别数据存储,在实际生产环境中推荐按需,按照数据结构类型进行分池分集群管理,降低运维复杂度。

收起
软件开发 · 2019-09-11
浏览3782
Senko leeSenko lee  系统架构师 , 江西裕民银行
理论上可以无限扩展,但是实践中,肯定会有最佳实践,大部分分布式存储集群建议一个集群32或64节点显示全部

理论上可以无限扩展,但是实践中,肯定会有最佳实践,大部分分布式存储集群建议一个集群32或64节点

收起
银行 · 2019-04-26
浏览4116
GaryyGaryy  系统工程师 , 某保险
对于ceph从理论上来讲,可以进行无限制的扩容。但是,从实际使用的场景来看,必须要进行集群规模的限制,以应对一些问题。1)对于不同的使用场景,块/对象/文件,不同的存储类型,建议进行物理上的隔离,不建议混用底层的存储2)建立故障域,隔离风险,降低系统不可用的风险。3)如果可能的话,可以...显示全部

对于ceph从理论上来讲,可以进行无限制的扩容。但是,从实际使用的场景来看,必须要进行集群规模的限制,以应对一些问题。
1)对于不同的使用场景,块/对象/文件,不同的存储类型,建议进行物理上的隔离,不建议混用底层的存储
2)建立故障域,隔离风险,降低系统不可用的风险。
3)如果可能的话,可以考虑在硬件层面,融合不同的vendor,例如服务器/交换机可以选择不同品牌,来保证集群不被某一品牌绑架。

收起
保险 · 2019-04-26
浏览4205
elvis_wangelvis_wang  系统工程师 , ADV
商业产品 Cisco HyperFlex 建议每集群64节点.如果节点多时还建议切分逻辑可用组(LAZ).其它产品暂不了解.显示全部

商业产品 Cisco HyperFlex 建议每集群64节点.如果节点多时还建议切分逻辑可用组(LAZ).其它产品暂不了解.

收起
硬件生产 · 2019-04-24
浏览4206

问题来自

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2019-04-23
  • 关注会员:10 人
  • 问题浏览:7811
  • 最近回答:2019-09-11
  • X社区推广