海量小文件的备份难题?

对于海量的小文件场景,如何提升备份效率?显示全部

对于海量的小文件场景,如何提升备份效率?

收起
参与11

查看其它 3 个回答haizdl的回答

haizdlhaizdl技术经理大连

海量小文件的备份之所以成为难题就是普通的复制方式的备份,在备份之前需要扫描所有的文件头信息,一旦这个量达到一定级别,这个扫描就花费了很多很多的开销,导致备份无法进行。

通常解决方法:
基于NDMP技术的备份工具。
其原理就是靠着镜像、快照的方式在较短时间内备份大量文件。为目标文件系统创建一个固定的快照。在备份期间就直接备份这个快照。

当然我们还可以从业务层对这些海量的小文件的分类和归属进行良好的规划,比如按照日期、应用分类、地域属性等等,这样就把这些海量的小文件切分成若干部分,分而治之。

银行 · 2021-12-31
浏览1041

回答者

haizdl
haizdl101634
技术经理大连
擅长领域: 灾备存储服务器

haizdl 最近回答过的问题

回答状态

  • 发布时间:2021-12-31
  • 关注会员:5 人
  • 回答浏览:1041
  • X社区推广