1、你有没有专门的历史数据归档系统?有的话,复用这个归档系统。好处是有接口,有规范,可以按归档系统的设计存放,取用方便。一般来说都是磁盘介质,底层可能是对象存储或者hadoop。管理维护由归档系统统一完成。
2、有没有集中备份系统?备份系统的几种介质都可以,比如磁带,磁盘,PBB专用备份设备。从前到后成本和可靠性依次增加,管理难度和数据迁移难度依次降低。
3、如果以上两种都没有,可以用对象存储,自己设计一下如何保存。
都是有学习成本的,要根据你的具体情况分析。技术的价值不是直接出一个通用的方案,而是针对不同的场景和需求,设计对应的最佳方案。
保留2PB录音录像数据长达20年的方案,需要考虑以下2个因素:
首先从存储介质的选型角度来看,磁带技术最为成熟稳定,有着良好的技术发展路线,在温湿度适宜的情况下,其保存时间可达30年以上。
从整体方案来看,建议采用昆腾公司的ActiveScale Cold Storage方案,其目的是帮助客户在本地
打造一个类AWS S3 Glacier存储,充分利用S3,磁盘和磁带特性,加上特有的2维纠删技术,使得数据持久性最高可达19个9,该方案比纯磁盘方案节省超过70%的TCO。
其本身是一套对象存储,前端提供S3接口,存储介质是由磁盘和磁带组成,具备2个storage-classes,分别是standard和glacier;standard=磁盘层,glacier=磁带层,这样通过标准的S3API即可完成数据层的转换。
收起考虑20年和数据量的要求,除了管理软件(归档软件或是备份软件)重点需要考虑保持的介质
理想情况下保存时间长且经济的重点考虑磁盘和光盘
从磁带机的发展情况看,磁带会面临每隔3代需要升级的情况(新的磁带机一般向下兼容2代的磁带格式),20年的时间太长了,不知能否找到能读当初备份数据的磁带(类似于现在还有3.5寸的软盘,但是软驱已经基本看不到了)
综合考虑 光盘应该比磁带和磁盘靠谱
方案1无需业务改造可直接采用传统NAS接口落地但数据调用查询效率较慢,方案2和3要求业务必须支持S3接口才能落地但数据调用查询效率较快,方案3可应对监管规范的长期数据保存介质要求;
方案一:都是历史数据,无热温数据调用的情况下,处于兼容角度考虑,建议全部采用分布式NAS存储+磁盘介质方式, 少量SSD+HDD的高密4U设备作为存储节点,NAS存储配置EC纠删码取得高得盘率来持久化数据,应对录音录像提供标准NFS、CIFS、FTP协议接口;
方案二:都是历史冷数据,无热温数据调用的情况下,处于维护便捷角度考虑,建议全部采用对象存储+磁盘介质方式,少量SSD+HDD的高密4U设备作为存储节点,对象存储配置EC纠删码取得高得盘率来持久化数据, 应对录音录像提供标准S3协议接口;
方案三:有热温数据的临时调用,建议采用对象存储+蓝光光盘库/磁带库的方式,热温数据通过对象存储本地多副本策略的SSD+HDD进行持久化,提升热温数据访问效率,另外将历史冷数据通过对象存储流动引擎策略在线转存至次级存储(蓝光或磁带) , 应对录音录像提供标准S3协议接口;
对于金融行业需要长期保留大量录音录像数据的情况,以下是一些业界常用的备份和存储方案,旨在提供经济适用性和后期管理维护的优势:
需要注意的是,具体的备份和存储方案应根据您的具体需求和预算来确定。您可能需要与存储供应商或专业的IT咨询公司合作,根据您的存储容量、性能要求、数据安全性和成本预算等因素,进行定制化的方案设计和实施。
收起针对金融行业长期保留录音录像数据的需求,建议采用以下备份及存储方案:
综上所述,以上备份及存储方案可以提高数据的可靠性和安全性,同时降低备份成本和存储成本,是金融行业长期保留录音录像数据的一种经济适用、后期管理维护少的备份及存储方案。