分布式存储,在无限横向扩容时 必然遇到元数据存储集中存储的瓶颈 如何解决?

分布式存储,在无限横向扩容时 必然遇到元数据存储集中存储的瓶颈 如何解决?显示全部

分布式存储,在无限横向扩容时 必然遇到元数据存储集中存储的瓶颈 如何解决?

收起
参与42

查看其它 4 个回答baimmi的回答

baimmibaimmi系统架构师中国银联股份有限公司

理想的分布式集群是横向线性扩展,性能没有上限的,然而,在实际的应用过程中缺水存在元数据服务器的瓶颈。
以Ceph为例,根据Sage的论文,CRUSH算法具有相当好的可扩展性,在数千OSD的情况下仍然能保证良好的负载平衡。但这更多是理论层面的,目前还没有人给出在数PB规模的生产环境中的测试结果。

而华为公司的FusionStorage则采用另外一种思路——将元数据分散于集群中的各个服务器之上,每个服务器上部署一个VBS进程,负责卷元数据的管理。这样就避免了局部热点的出现。

银行 · 2017-11-20
浏览3215

回答者

baimmi
系统架构师中国银联股份有限公司
擅长领域: 存储灾备分布式架构

baimmi 最近回答过的问题

回答状态

  • 发布时间:2017-11-20
  • 关注会员:6 人
  • 回答浏览:3215
  • X社区推广