互联网服务分布式存储

分布式存储相对应集中式存储,有哪些数据数据保护机制?

分布式存储相对应集中式存储,有哪些数据数据保护机制,除了多分布和纠删码,另外还有哪些智能技术?

参与19

4同行回答

zhongshizhongshi产品总监XSKY
分布式存储的数据保护机制还是很全面的,可以分几个维度来看:基础数据保护:数据多副本和EC纠删码技术,EC纠删码还有特殊的支持缩列等方案;基于基础的数据保护,引入故障域的概念,可以从硬盘到节点到机柜到数据中心设定故障域,域间数据相互没有影响;被动数据保护:主要是指周期性的物理...显示全部

分布式存储的数据保护机制还是很全面的,可以分几个维度来看:

基础数据保护:数据多副本和EC纠删码技术,EC纠删码还有特殊的支持缩列等方案;基于基础的数据保护,引入故障域的概念,可以从硬盘到节点到机柜到数据中心设定故障域,域间数据相互没有影响;

被动数据保护:主要是指周期性的物理磁盘和逻辑块单位的扫描,及时发现坏块或坏单位,进行自动修复,避免静默错误导致数据丢失;比较好的做法是在写入和存放时都加入校验技术,保障应用、缓存和落盘数据一致;

主动数据保护:基于块和文件的快照,基于对象的快照和多版本,这里ROW快照和压缩去重技术已经广泛应用,与传统存储无二;各种异步复制技术,不管是针对块、文件还是对象,异步复制技术也已经非常成熟;分布式存储的数据分层技术相比传统存储起步更早,可以根据数据生命周期在各层级存储之间自动流动,事实上也可作为一种多副本的数据保护方式;还有基于快照的克隆,多卷统一快照,归档等等,保证数据一致性的同时搞定本地和异地备份;

高级数据保护:分布式存储同样可以做到数据双活,一搬块和文件存储是在池级别实现,通过延展集群的方式进行同城部署;对象存储可以配置多站点模式,直接实现元数据多活,如果配合底层的延展集群,可以做到RPO和RTO均等于0;

收起
软件开发 · 2022-08-17
浏览1207
wukewuke售前技术支持SmartX超融合
存储数据保护机制主要有以下几种:1、数据校验:硬盘级别,原理是每一段数据设置一个checksum校验位,每次读写做校验,防止数据发生静默损坏,集中式和分布式存储都有应用;2、多副本、RAID / EC: 节点级别,绝大多数分布式存储使用多副本技术,几乎所有集中式存储使用RAID / EC 技术,两种技...显示全部

存储数据保护机制主要有以下几种:

1、数据校验:硬盘级别,原理是每一段数据设置一个checksum校验位,每次读写做校验,防止数据发生静默损坏,集中式和分布式存储都有应用;

2、多副本、RAID / EC: 节点级别,绝大多数分布式存储使用多副本技术,几乎所有集中式存储使用RAID / EC 技术,两种技术各有千秋;

3、机架感知:机架级别,分布式存储应用较多,数据副本可按机架分布,冗余机架整体故障;

4、双活:数据中心级别,RPO=0,集中式存储使用同步复制技术,分布式存储使用拉伸集群,叫法不一,但原理类似;

5、异步复制:数据中心级别,RPO通常是秒级或分钟级;

收起
软件开发 · 2022-08-10
浏览3636

提问者

sxtycxx
解决方案经理人工智能(计算机视觉)
擅长领域: 存储灾备服务器

问题来自

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2022-07-31
  • 关注会员:5 人
  • 问题浏览:5118
  • 最近回答:2022-08-17
  • X社区推广