分布式存储的稳定性、可靠性如何评估?

分布式存储相对于传统的集中存储,有其体系架构带来的特点,在部分业务场景下具有集中存储无法比拟的优势。有以下问题请老师答疑解惑:

不少分布式存储的体系架构中有集中控制节点,由于X86服务器的架构复杂度远超过集中存储的控制器,所以故障率必然会超过集中存储控制器。请问这种情况下,分布式存储的稳定性和可靠性如何评估?

参与9

2同行回答

edwardwuedwardwu  产品经理 , SmartX超融合
在分布式存储系统中,所谓控制节点一般是指元数据管理节点,而并非对应集中存储中的控制器。分布式存储的存储控制器会部署在集群中的所有节点上,有着传统存储完全无法比拟的线性扩展性和性能。此外,分布式存储的控制器由软件而非实现,在升级、更新和问题修复方面也具有更高的灵...显示全部

在分布式存储系统中,所谓控制节点一般是指元数据管理节点,而并非对应集中存储中的控制器。分布式存储的存储控制器会部署在集群中的所有节点上,有着传统存储完全无法比拟的线性扩展性和性能。此外,分布式存储的控制器由软件而非实现,在升级、更新和问题修复方面也具有更高的灵活性。

分布式存储会将软硬件故障按照常态来对待(也就是说,默认硬件或软件一定会出故障),所以其架构和实现都会充分考虑各种异常情况下的应对措施,一般来说会采取如下几种策略:

  1. 数据块 checksum:每次读取数据时候检查单个数据块是否由于静默损坏而造成数据不一致,如果发生,则通过副本数据进行修复。
  2. 多副本:同一份数据会保存多份(通常设置为 2 副本或 3 副本),即使副本所在的节点宕机也不会造成数据丢失。
  3. HA(高可用,需配合虚拟化平台):节点宕机时,该节点上的虚拟机自动迁移至集群内其它节点,降低业务中断时间。
  4. 快照(需配合虚拟化平台):为虚拟机打快照,在其发生故障时将数据恢复至快照状态。
  5. 机架感知:根据机房物理拓扑结构,将副本分配在不同的机架、机箱、主机上,有效减少甚至避免物理硬件(电源、交换机等)故障导致的数据丢失。理论上,3 副本结合机架感知配置,系统可最多容忍 2 个机架上的主机全部失效。(仅一线厂商有)
  6. 双活:同城双数据中心,灾难时无损快速恢复业务(RPO=0)。(仅一线厂商有)
  7. 异地容灾:异地主备数据中心,灾难时尽可能挽回数据损失。(仅一线厂商有)
  8. 和第三方备份容灾厂商形成的联合解决方案。(仅一线厂商有)

如果确实有条件评估的话,可以做相关POC,重点围绕异常测试,和大压力的持久性测试,例如:

  1. 模拟主要部件异常,拔网线,拔磁盘,拔节点电源,以及是否恢复;
  2. 模拟长时间使用的边界情况,容量使用超过90%下的性能和稳定性;
  3. 模拟大的业务负载,长时间持续运行。
收起
软件开发 · 2019-07-24
浏览2956
土豆变薯条土豆变薯条  技术总监 , XSKY
分布式存储架构就是为了解决集中式存储双控架构开来的控制器故障风险,分布式的架构每个X86服务器都可以当成一个控制器,从控制器的数量来看安全性都远远高于双控架构的集中式存储,而且分布式架构易于扩展,直接添加X86服务器就能够让空间和性能得到线性的增长,底层更有副本和EC...显示全部

分布式存储架构就是为了解决集中式存储双控架构开来的控制器故障风险,分布式的架构每个X86服务器都可以当成一个控制器,从控制器的数量来看安全性都远远高于双控架构的集中式存储,而且分布式架构易于扩展,直接添加X86服务器就能够让空间和性能得到线性的增长,底层更有副本和EC来做数据保护,扩展性和安全性也比传统的raid要高很多,重构的速度也远远的大于raid
软件故障无论是集中存储还是分布式存储都存在,就看哪家的软件研发的更加稳定,可以让市场来说话,做存储肯定是需要对客户的数据负责的
分布式存储的容灾和集中存储一样都会有多种手段,包括分布式块存储,文件存储,对象存储的双活,异步复制,多站点等

收起
软件开发 · 2019-04-26
浏览2478

提问者

huijx
系统运维工程师某银行
擅长领域: 存储灾备备份

问题来自

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2019-04-26
  • 关注会员:3 人
  • 问题浏览:4169
  • 最近回答:2019-07-24
  • X社区推广