面对海量的非结构化数据,在由文件存储向对象存储迁移过程中,如何保障数据的一致性?

面对海量的非结构化数据,在由文件存储向对象存储迁移过程中,如何保障数据的一致性?

参与4

1同行回答

zhangjunxi570zhangjunxi570系统架构师某城商银行
这个问题比较关键。传统的文件系统存放数据“看到见摸得着”,可以随时查询检验文件可用与否。对象存储底层使用副本或者就删码的方案存储数据存储数据。副本的方式很好理解,牺牲了空间f但每份数据都还是完整的。就删码相对复杂,数据会被切片然后和校验的数据加工后一起存到...显示全部

这个问题比较关键。
传统的文件系统存放数据“看到见摸得着”,可以随时查询检验文件可用与否。对象存储底层使用副本或者就删码的方案存储数据存储数据。副本的方式很好理解,牺牲了空间f但每份数据都还是完整的。就删码相对复杂,数据会被切片然后和校验的数据加工后一起存到存储节点里,用户不能直接访问到对象存储。确保前一后数据一致性的关键是迁移的过程中进行数据校验,检验成功确保迁移后的数据后的数据完全可用再删除原数据。

收起
银行 · 2020-12-10
浏览1005

提问者

kh17121823
系统工程师某城商银行
擅长领域: 存储灾备软件定义存储

问题来自

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2020-12-04
  • 关注会员:2 人
  • 问题浏览:1593
  • 最近回答:2020-12-10
  • X社区推广