关于非结构话数据 存量数据如何从传统存储迁移都非结构化存储的过程,希望能否有经验可分享下?

目前传统存储上存放海量影像数据,如果在规定变更时间内将存量数据从传统存储迁移至非结构化存储,希望能否有经验可分享下显示全部

目前传统存储上存放海量影像数据,如果在规定变更时间内将存量数据从传统存储迁移至非结构化存储,希望能否有经验可分享下

收起
参与6

查看其它 1 个回答白光茁的回答

这个主要还是要看源端存储和目标端存储采用的具体技术来进行选择。如果采用最通用的方案,一般有两种,第一种就是直接通过应用进行数据迁移,第二种就是通过外部的数据迁移工具来进行迁移。一般情况下,在文件数量巨大的情况下,在规定的变更窗口内是很难完成的,因为很多情况下,源存储或者说源系统没办法支撑大量数据的同时读取。所以思路会转变成,如何在不影响生产的情况下进行数据迁移,在这种思路下,一般情况是在迁移的过程中,应用会同时接入源端存储和目标端存储,同时将所有新增数据写入到目标端存储,这样源端存储不会有任何新增数据。接下来有两种处理方式,一种就是通过数据备份或者存储拷贝将数据在其他系统上拉起,作为迁移的源端,来尽快进行数据迁移,这样不会对现有系统造成影响,但是这样也有劣势,就是成本比较高。还有一种常见的做法就是在把现有系统作为源端,通过迁移工具进行迁移。总体而言由于应用在整个迁移过程中能够正常访问所有数据,所以迁移时间的长短,对业务是没有影响的,只是在迁移完成后,进行割接的时候申请变更窗口就可以了。
还有一种解决办法就是,在存储和应用之间引入一个数据抽象层,这个抽象层会对外提供一个统一的数据访问接口,来屏蔽底层存储技术。同时这个抽象层还可以进行数据迁移,这样保证不管底层存储技术如何变化,对外的服务是统一的。当然这个方法更多的是从应用架构上去进行处理,牵扯到的部门会非常多。

硬件生产 · 2020-07-17
浏览1379

回答者

白光茁 最近回答过的问题

回答状态

  • 发布时间:2020-07-17
  • 关注会员:3 人
  • 回答浏览:1379
  • X社区推广