面对海量的非结构化数据,在由文件存储向对象存储迁移过程中,如何保障数据的一致性?

面对海量的非结构化数据,在由文件存储向对象存储迁移过程中,如何保障数据的一致性?

1回答

zhangjunxi570zhangjunxi570  系统分析师 , xjtu
zhuhaiqiang赞同了此回答
这个问题比较关键。传统的文件系统存放数据“看到见摸得着”,可以随时查询检验文件可用与否。对象存储底层使用副本或者就删码的方案存储数据存储数据。副本的方式很好理解,牺牲了空间f但每份数据都还是完整的。就删码相对复杂,数据会被切片然后和校验的数据加工后一起存到...显示全部

这个问题比较关键。
传统的文件系统存放数据“看到见摸得着”,可以随时查询检验文件可用与否。对象存储底层使用副本或者就删码的方案存储数据存储数据。副本的方式很好理解,牺牲了空间f但每份数据都还是完整的。就删码相对复杂,数据会被切片然后和校验的数据加工后一起存到存储节点里,用户不能直接访问到对象存储。确保前一后数据一致性的关键是迁移的过程中进行数据校验,检验成功确保迁移后的数据后的数据完全可用再删除原数据。

收起
 2020-12-10
浏览350

提问者

kh17121823系统工程师, 某城商银行

对象存储选型优先顺序调查

发表您的选型观点,参与即得50金币。

问题状态

  • 发布时间:2020-12-04
  • 关注会员:2 人
  • 问题浏览:932
  • 最近回答:2020-12-10