李毕生
作者李毕生·2024-03-08 10:20
金融解决方案架构师·华为技术有限公司

海量小文件NAS如何快速高效的迁移?

字数 477阅读 643评论 0赞 2

近日,与一金融机构交流,客户反馈迁移老的NAS存储非常慢,时间很长,几千万个小文件,要实现新老设备替换很费劲。之前的方案是见下图,原NAS共享文件挂载给一台服务器,目标存储文件也挂载给这台服务器,然后采用迁移工具通过这台中转服务器不断迁移数据,先全量,再追增量,直到增量数据比较少的时候,业务断掉,把数据追平,业务挂载到新存储。通过这种服务器中转迁移方案,速度慢最多800MB/s,中断的时间也不太可控,迁移时间也比较长,的确很费劲。

基于此海量小文件数据迁移困难需求,公司研发了一套新的免服务器迁移方案,见下图。将老的存储文件系统挂载到新存储,异构纳管,新存储也划分了对应的文件存储目录,二者建立迁移关系,将新存储的文件系统挂载给业务系统,原存储业务停掉,转到新的存储挂载目录,业务重新拉起来,后台通过工具进行数据迁移。如果数据还没有迁移,IO通过新存储转发给老存储。采用此方案,直接纳管迁移,1,业务中断时间很短,只需要配置挂载,2,不用服务器中转迁移,存储系统之间直连迁移速度快,高达6GB/s,多任务并行,而且后台迁移,不需要等迁移完成再启动业务。


如果觉得我的文章对您有用,请点赞。您的支持将鼓励我继续创作!

2

添加新评论0 条评论

Ctrl+Enter 发表

作者其他文章

相关文章

相关问题

相关资料

X社区推广