一个目录下面数百万海量小文件如何快速备份和恢复?

一个目录下面数百万海量小文件如何快速备份和恢复?当一个目录下有数百万小文件做备份时,备份之前备份软件的扫描和技术就要花去大量时间,恢复的时间也要花费比普通备份多的多的时间。我知道的一种解决方案是采用image全盘备份和恢复方式可以大大加快备份和恢复过程.是否还有...显示全部

一个目录下面数百万海量小文件如何快速备份和恢复?
当一个目录下有数百万小文件做备份时,备份之前备份软件的扫描和技术就要花去大量时间,恢复的时间也要花费比普通备份多的多的时间。我知道的一种解决方案是采用image全盘备份和恢复方式可以大大加快备份和恢复过程.是否还有别的更好的方法进行效率备份和恢复呢?

收起
参与57

查看其它 11 个回答updater_aix的回答

updater_aixupdater_aix存储工程师CGN

以下所说的备份软件是指NBU(NetBackup),其他的软件大同小异,我们讨论的是解决方法。

一,备份数据。
1.使用LanFree当时进行备份测试,看看效果如何。
2.使用虚拟机整机备份。
以前使用物理机,一台主机小文件有20万左右,不算太多,备份的时候效率非常低,只有5MB/s,甚至更低。
后来上了虚拟化之后,使用虚拟机整机备份。慢则20MB/s,快则超过30MB/s。
3.因为虚拟化环境备份的时候是根据数据块来做备份的,所以对于备份小文件来说,效率会比较高。

二,恢复数据。
1.如果恢复数据的时候是全部恢复,那么可以采用虚拟机整机恢复的方式。由于是采用数据块来恢复,所以效率还比较高。恢复的过程中,记得对于即将恢复出来的虚拟机,命一个新的主机名。然后把网卡去掉,避免ip冲突。
2.如果需要进行细粒度、单文件恢复,那么当初创建备份策略的时候一定要勾选"Enable file recovery from VM backup"。

7.jpg

7.jpg

能源采矿 · 2017-06-29
浏览13078

回答者

updater_aix
存储工程师CGN
擅长领域: 存储备份软件定义存储

updater_aix 最近回答过的问题

回答状态

  • 发布时间:2017-06-29
  • 关注会员:15 人
  • 回答浏览:13078
  • X社区推广