分布式存储已依靠软件保证数据冗余,是否还需要其他手段保证?

分布式存储已依靠软件保证数据冗余,是否还需要其他手段保证。例如hdfs已经是三副本存储,是否还需要对磁盘做raid保证可靠性。

参与6

2同行回答

zhongshizhongshi产品总监XSKY
已经三副本的情况下,如果底层再做raid,感觉对空间的损耗就太大了,没有必要;不如增加一些CRC校验手段去避免磁盘逻辑损坏和磁盘扫描技术去预判磁盘物理损坏;另外现在EC纠删码技术很成熟,性能也很接近副本,可以通过加大纠删码的校验值的方式提高容错能力...显示全部

已经三副本的情况下,如果底层再做raid,感觉对空间的损耗就太大了,没有必要;不如增加一些CRC校验手段去避免磁盘逻辑损坏和磁盘扫描技术去预判磁盘物理损坏;另外现在EC纠删码技术很成熟,性能也很接近副本,可以通过加大纠删码的校验值的方式提高容错能力

收起
软件开发 · 2021-11-08
浏览1175
JavonJavon项目经理极道科技(北京)有限公司
分布式存储的数据保护模式通常有副本,纠删码和冗余编码。通产采用软件来实现。商业化的分布式存储的数据保护模式已经相对成熟,无需再通过额外手段进行过度保护。显示全部

分布式存储的数据保护模式通常有副本,纠删码和冗余编码。通产采用软件来实现。商业化的分布式存储的数据保护模式已经相对成熟,无需再通过额外手段进行过度保护。

收起
软件开发 · 2021-11-11
浏览903

提问者

menglunyang
系统工程师中国银行
擅长领域: 云计算容器容器云

问题来自

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2021-11-08
  • 关注会员:3 人
  • 问题浏览:2698
  • 最近回答:2021-11-11
  • X社区推广