面对海量的非结构化数据,在由文件存储向对象存储迁移过程中,如何保障数据的一致性?

面对海量的非结构化数据,在由文件存储向对象存储迁移过程中,如何保障数据的一致性?显示全部

面对海量的非结构化数据,在由文件存储向对象存储迁移过程中,如何保障数据的一致性?

收起
参与4

返回zhangjunxi570的回答

zhangjunxi570zhangjunxi570系统架构师某城商银行

这个问题比较关键。
传统的文件系统存放数据“看到见摸得着”,可以随时查询检验文件可用与否。对象存储底层使用副本或者就删码的方案存储数据存储数据。副本的方式很好理解,牺牲了空间f但每份数据都还是完整的。就删码相对复杂,数据会被切片然后和校验的数据加工后一起存到存储节点里,用户不能直接访问到对象存储。确保前一后数据一致性的关键是迁移的过程中进行数据校验,检验成功确保迁移后的数据后的数据完全可用再删除原数据。

银行 · 2020-12-10
浏览1000

回答者

zhangjunxi570
系统架构师某城商银行
擅长领域: 存储灾备分布式系统

zhangjunxi570 最近回答过的问题

回答状态

  • 发布时间:2020-12-10
  • 关注会员:2 人
  • 回答浏览:1000
  • X社区推广