你的备份掉链子过吗？都遇到过哪些数据备份在关键时刻无法恢复的情况呢？

此前在运营商闯荡的时候，遇到过一起很典型的掉链子例子：
运营商的好多客户数据都是需要长期保存的，而且不能丢，遇到重大刑侦案件的时候往往要调取这些数据协助调查，如果提供不出来，会对公司当年的考核影响很大。有一次呢，遇到了一个大案，上头发文让协助调查，需要恢复指定的通话记录和部分内容，在系统里很快就查到当年数据的所在业务系统，定位到了数据所在的服务器，随后确定了数据的时间，接着就让备份管理员开始着手恢复数据，检查恢复环境，检查数据备份状态，确认数据时间版本，一切OK，开始恢复，恢复完了都傻眼了……恢复了一堆数据，里面压根没有需要的数据。
后来查证，原来因为系统的某个需求变更，一部分业务数据被独立出来，存取路径变更了，变更也没告知备份管理员，同时这部分业务数据体量又很小，整个系统数据备份的体量远大于这部分数据，备份软件的监控上备份任务详情里无论从备份数据量、备份时间都在正常范围内。更不幸的是，这个系统从来都没被抽到进行数据恢复演练……因此独立出来的数据，这几年都没备份……