为了更好的做好容灾保障,使业务能够应对机房级别的故障,滴滴的存储服务都在多机房进行部署。本文简要分析了Redis实现异地多活的几种思路,以及滴滴Redis异地多活架构演进过程中遇到的主要问题和解决方法,抛砖引玉,给小伙伴们一些参考。Redis异地多活的主要思路业界实现Redis异...
(more)非结构化数据,如影像和超声数据,因其特性复杂且形式多样,给数据的管理和存储带来挑战。为此,首先需要对非结构化数据进行分类和分层管理,比如可以根据数据的类型、大小、重要性等因素,将数据分为高、中、低三个层次。然后根据不同层次的数据重要性和使用频率分别采用不同的存储...
最近遇到一个很少见的需求,是关于应用测试方面的。具体来说,这个应用的测试需求要基于一个固定的时间点数据,而且只能测试一轮,再测试就需要还原到测试前状态。因为我们使用的存储是分层的(热数据在Flash上,冷数据在传统机械盘),但因为每次测试都需要将数据库闪回还原到固定时间...
(more)某个周末的晚上突然收到一波耗时上升报警,仔细一看报警消息,原来是出现了慢查请求导致集群耗时大幅上升,此时业务同学也收到上游服务受影响报警。在处理问题过程中,运维同学发现Redis集群中只有部分实例出现cpu利用率上升,慢查日志也集中在这几个实例,而上游业务此时没有上线或...
(more)用带库吧,备份软件啥都行,比如TSM、NBU10小时备份15T,算下来450M/S左右。目前LTO7开压缩理论值750M/s,不开300M/s,备份的时候多来几个驱动器开多通道并行,咋也够了。LTO7大概16年发布的吧,磁带容量6T,开压缩15T,一次备份的数据量,大概一盘磁带吧。。。...
目前所有国产数据库厂商都在蓬勃发展,今日新成立的《金融多主数据库应用推进工作组 》、以及各家推出的兼容Oracle、MySQL的各类存储引擎、数据库模式,从数据库字典、操作方式、以及应用接口(JDBC、ODBC),各方面综合来看,国产数据库都在向着中国这个最大的数据库市场进发,并且向...
课题背景:目前市场上国产数据库数量达到280种以上,如何从如此繁多的数据库中选择最适合自己企业当前背景的一款数据库显得有些困难。以什么标准去选?以什么维度去衡量?以什么方式去标定?特别金融行业的业务高可用及连续性要求高,还需要兼顾数据安全,这对国产数据库的性能、稳定...
(more)不建议自己直接使用开源版本的Postgresql在生产上直接使用,因为需要造很多轮子。国产数据库这块,数据库管理平台、审核工具、高可用架构都是做了很多优化的。