向分布式存储迁移的过程,一般有哪些手段用来进行平滑迁移,不影响正常业务?

传统架构很多都是基于san架构的传统存储,在分布式存储规划实施后,会涉及到一个比较大的数量级的数据迁移,一般情况会有哪些手段来确保整个迁移过程的安全可控,谢谢

参与5

2同行回答

whistwuwhistwu  资深解决方案经理 , SmartX超融合
从SAN存储迁移到分布式存储,有别于文件迁移方式,其中最重要的是考虑数据一致性,而数据一致性的认定标准是在应用测;最基本的方式是备份恢复的方法,对SAN存储上的数据备份,恢复到对应分布式存储的主机上,要考虑备份效率和恢复效率,还要考虑数据增长情况。另外一种方法是把分布式存...显示全部

从SAN存储迁移到分布式存储,有别于文件迁移方式,其中最重要的是考虑数据一致性,而数据一致性的认定标准是在应用测;
最基本的方式是备份恢复的方法,对SAN存储上的数据备份,恢复到对应分布式存储的主机上,要考虑备份效率和恢复效率,还要考虑数据增长情况。
另外一种方法是把分布式存储挂到需要迁移的主机下,在主机层面上做逻辑卷到逻辑卷的copy,并在迁移后检查数据的一致性,对业务会有一些影响,需要在空闲的时候做。
其次,SAN存储用在数据库上比较多,建议采用数据库的迁移方式,比如Oracle的OGG和DG,数据库能实施复制,最后将SAN存储切换下线即可。
最后,还可以采用专业的迁移工具,比如使用代理的CDP方式,记录卷级别的IO操作,并在分布式存储上恢复卷的数据。
后两种方式一般用在SAN存储的迁移上,比较安全可控,当然选择哪种迁移方式需要根据自身系统的特点来选择。

收起
IT咨询服务 · 2021-11-11
浏览1424
SandStone杉岩数据SandStone杉岩数据  中国对象存储市场领导厂商 , 深圳市杉岩数据技术有限公司
一般来说,从文件迁移到对象,涉及到访问数据的协议和方式转换,客户对应用没有办法做到无感知,同城需要配置定时任务,在业务不忙时发起迁移,第二天监控迁移到监控迁移到效果。在大型数据中心里面,这种情况尤其突出。在交付某券商客户对象存储项目时,客户原有NAS存储了近6000万文件,...显示全部

一般来说,从文件迁移到对象,涉及到访问数据的协议和方式转换,客户对应用没有办法做到无感知,同城需要配置定时任务,在业务不忙时发起迁移,第二天监控迁移到监控迁移到效果。在大型数据中心里面,这种情况尤其突出。在交付某券商客户对象存储项目时,客户原有NAS存储了近6000万文件,客户利用业务空窗期通过传统方式进行历史数据搬迁,耗时长达2个月,运维工作也需要持续的人力投入。

所以从应用的角度来考虑整个迁移的影响是非常重要的,为了实现无感知迁徙,可以先纳管文件存储中的数据,即将NAS中文件的存储路径关联到对象存储中,纳管完成之后,前端业务可通过S3接口直接访问NAS中的历史数据,后续新写入的数据则直接存入对象存储中。免去了数据迁移与校验的繁琐过程,业务上线的时间大大缩短。

杉岩数据在实际测试中,3个节点的对象存储集群,对1000万个文件进行纳管只需要90分钟,并且无需考虑文件大小。相比之下,使用传统方式迁移需要12个小时左右的时间。如果客户想要淘汰NAS存储,也可通过配置生命周期管理策略,系统自动将NAS中的历史数据逐步迁移到对象存储中,无需人为干预,满足数据平滑迁移需求,整个过程完全透明,用户无感知。

收起
软件开发 · 2021-11-08
浏览1391

提问者

wangql
wangql41446
系统工程师NULL
擅长领域: 存储备份软件定义存储

问题来自

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2021-11-05
  • 关注会员:3 人
  • 问题浏览:2633
  • 最近回答:2021-11-11
  • X社区推广