请教Windows下NTFS海量小文件迁移用什么办法最好?

超过几十个TB的海量小文件需要迁移,目前使用的windows自带的robocopy,也使用过BE方式备份,速度都不是很理想,而且BE备份恢复很慢,各位前辈有什么好的方法吗。还请各位指教一二。感谢。

参与9

1同行回答

Jerry MikuJerry Miku其它The Global 500
海量小文件的问题,现在一直没有根本性解决,能够完美解决海量文件备份效率的方案,成本都不低,入不敷出……Windows下的那就更麻烦了,Windows下有两类问题是最头痛的,一个是海量文件问题,另一个就是巨型MSSQL的问题,经历了很多项目都没有找到很彻底的解决方案,只能逐步去优化,改善备...显示全部

海量小文件的问题,现在一直没有根本性解决,能够完美解决海量文件备份效率的方案,成本都不低,入不敷出……Windows下的那就更麻烦了,Windows下有两类问题是最头痛的,一个是海量文件问题,另一个就是巨型MSSQL的问题,经历了很多项目都没有找到很彻底的解决方案,只能逐步去优化,改善备份的效率……

海量小文件的问题,可以从两个方面入手,第一个是优化海量小文件的文件结构,想办法把小文件聚合成大文件,提高备份恢复效率,减少文件扫描的时间成本,常见的做法就是进行打包压缩。第二个就是改变海量小文件的存储方式,海量小文件备份恢复慢,绝大部分是对文件的扫描、备份时因为数量庞大导致open files、close files的次数特别多,如果不是以小文件方式直接备份恢复文件、直接从系统底层直接抽取数据进行备份恢复……在这点上不少企业使用了对象存储,需要注意的是对象存储的备份接口引擎,可能需要定制化。

收起
IT其它 · 2019-07-18
浏览2483

问题来自

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2019-07-13
  • 关注会员:2 人
  • 问题浏览:3424
  • 最近回答:2019-07-18
  • X社区推广