对于非机构化数据,如何能有效并安全的从文件存储迁移至对象存储以及迁移至对象存储后如何做目录分级?

目前已大量的非结构化数据存放与nas存储,想迁移至对象,如何能安全迁移至对象存储,以及如何去验证这个迁移的数据是否准确以及完整,以及如何在对象里面做目录分级。

参与10

4同行回答

SandStone杉岩数据SandStone杉岩数据中国对象存储市场领导厂商深圳市杉岩数据技术有限公司
面对NAS和第三方 对象存储 升级至杉岩MOS海量对象存储的场景,杉岩MOS可以做到免迁移纳管,充分利旧、平滑迁移。除此之外,为解决海量数据接入难及数据孤岛问题, 杉岩数据最新推出数据汇聚管理系统DataIngestor,支持将本地文件 全量和持续增量上传至对象存储的桶中,并且支持根据...显示全部

面对NAS和第三方 对象存储 升级至杉岩MOS海量对象存储的场景,杉岩MOS可以做到免迁移纳管,充分利旧、平滑迁移。
除此之外,为解决海量数据接入难及数据孤岛问题, 杉岩数据最新推出数据汇聚管理系统DataIngestor,支持将本地文件 全量和持续增量上传至对象存储的桶中,并且支持根据自定义规则 自动在汇聚时为数据打上多种标签,以便业务检索管理。全过程省去了企业业务软件改造或开发数据管理工具成本,降低数据入湖门槛,提升业务故障处理效率,大幅降低运维工作量;也实现了更高效、安全、完整地完成存储架构升级、替换、迁移的目标。

收起
软件开发 · 2022-10-21
浏览677
MarkzhMarkzh技术支持xsky
我曾负责过某证券客户3亿文件从NAS迁移至对象和某消费金融客户50亿+FastDFS迁移至对象平台(平均文件200K左右),可采用第三方迁移工具或者对象存储厂商自带数据流动方案,避免对业务影响,可以设置迁移速度;校验方式采用MD5, 需要关注点:1:list耗时会比较长(如果两套存储均是同厂商会...显示全部

我曾负责过某证券客户3亿文件从NAS迁移至对象和某消费金融客户50亿+FastDFS迁移至对象平台(平均文件200K左右),可采用第三方迁移工具或者对象存储厂商自带数据流动方案,避免对业务影响,可以设置迁移速度;校验方式采用MD5,
需要关注点:1:list耗时会比较长(如果两套存储均是同厂商会有内部api提高list效率);2:只能迁移数据,因为NAS和对象权限机制不通,迁移后 数据权限归属存储桶owner;3:对象没有NAS那种目录层级,都是扁平化层级;

收起
互联网服务 · 2022-09-07
浏览774
可以通过专业的服务实现NAS到对象存储的迁移。显示全部

可以通过专业的服务实现NAS到对象存储的迁移。

收起
IT咨询服务 · 2022-02-25
浏览987
asuroasuro系统架构师太平洋保险
这个问题取决于以下两点:1、从文件存储迁移至NAS存储,通常依赖于对象存储厂商提供的解决方案实现。2、对于迁移至对象存储后做目录分级管理,更多的依赖于应用的实现和数据消费方式。...显示全部

这个问题取决于以下两点:
1、从文件存储迁移至NAS存储,通常依赖于对象存储厂商提供的解决方案实现。
2、对于迁移至对象存储后做目录分级管理,更多的依赖于应用的实现和数据消费方式。

收起
保险 · 2022-02-22
浏览966

提问者

vae_ruan
存储工程师保险
擅长领域: 服务器灾备存储

问题来自

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2022-02-17
  • 关注会员:6 人
  • 问题浏览:1851
  • 最近回答:2022-10-21
  • X社区推广