面对海量数据的时候,个人认为首先是要识别数据的备份价值。海量数据当中并不是所有的数据都有备份的价值。企业应该明确哪些数据需要备份,哪些数据可以不备份。其次,需要识别备份数据的活动特性、备份策略、重要性等特点。一旦系统发生问题,有些数据需要及时恢复,有些数据可以...
非结构数据的爆发式增长是各行各业都面临的挑战。由于金融业的特殊性,会对数据的存储、安全以及管理提出更严苛的要求。选择稳定可靠、成熟、易管理、广泛使用的产品是重要需要考虑的。 某种意义上,选择走正确的路比努力走路更重要。 数据湖可以实现数据与存储解耦,存储与...
这个主要还是要看源端存储和目标端存储采用的具体技术来进行选择。如果采用最通用的方案,一般有两种,第一种就是直接通过应用进行数据迁移,第二种就是通过外部的数据迁移工具来进行迁移。一般情况下,在文件数量巨大的情况下,在规定的变更窗口内是很难完成的,因为很多情况下,源存...
针对海量数据平台的备份设计,需要先做业务分析。可以先按业务系统划分,然后对各个业务系统进行调研,进行需求收集和汇总。根据收集到的需求,制定综合的备份需求表。需要包含各业务系统的组成、数据量、备份的RTO/RPO等因素。根据各业务系统的备份需求表,得到大致的备份存储空...
目前我们面临这样的问题。海量的细小文件。备份起来效率低下。速度非常慢。似乎现在一个比较有效的方式是对整体磁盘进行镜像备份来提高备份速度,但存在的问题就是无法对文件进行颗粒度的恢复,一旦某个文件出现问题。可能恢复起来就很麻烦。大家还有没有了解的更好的对海量...
随着企业用户数据量的不断增长,如何快速而有效的对数据进行备份和恢复,就成为数据库日常维护的重要议题。本文的重点旨在讲解说明在大数据量情况下如何优化 DB2 备份与恢复的性能,缩短备份和恢复的时间窗口。DB2 的备份和恢复命令能够提供不同粒度和不同级别的备份和恢...
(more)