为了更好的做好容灾保障,使业务能够应对机房级别的故障,滴滴的存储服务都在多机房进行部署。本文简要分析了Redis实现异地多活的几种思路,以及滴滴Redis异地多活架构演进过程中遇到的主要问题和解决方法,抛砖引玉,给小伙伴们一些参考。Redis异地多活的主要思路业界实现Redis异...
(more)某个周末的晚上突然收到一波耗时上升报警,仔细一看报警消息,原来是出现了慢查请求导致集群耗时大幅上升,此时业务同学也收到上游服务受影响报警。在处理问题过程中,运维同学发现Redis集群中只有部分实例出现cpu利用率上升,慢查日志也集中在这几个实例,而上游业务此时没有上线或...
(more)结合我们行的情况,要想对数据进行分类分级,先要进行数据资产的梳理,一般厂商数据分类分级平台都有一个简单的资产梳理功能,是基于数据库层面而非业务层面的资产梳理。根据资产梳理的情况,根据 中国人民银行发布《金融数据安全 数据安全分级 指南 》(JR/T 0197—2020) 进行数据...
在数据存储选型中,国产CPU的选择对于整体系统性能和兼容性是非常重要的因素之一。CPU作为数据存储设备的计算和控制核心,它的性能和特性将直接影响到数据存储系统的处理能力、响应时间和可靠性。以下是在数据存储设备选型时需要考虑的一些关键点:1、评估数据存储的性能需求,...
必须华为啊,华为存储成立之初,到现在已经有10年之久了,从客户的反馈及故障率来说,都算不错,相信华为,不会让你失望
一、架构和应用并重,不可偏废谈到数据业务,过去肯定首先想到数据应用,不管是BI还是联机交易,亦或是大数据维度的应用,都是在考虑在应用层面实现数据的利用。但是,在当今这样一个趋势和大背景下,我们肯定要同时考虑数据业务的架构,中台架构无疑是非常重要的考虑。当然中台只是一个...
(more)针对不同国产数据库数据存储介质选型,需要综合考虑多个方面的因素,包括业务需求、数据量、性能要求、可靠性、成本等因素。在这些因素中,存储介质的选型直接影响数据库的性能和可靠性,因此,选型时需要谨慎考虑。在一般情况下,本地盘、SAN存储和NAS存储都可以作为数据库的存储介...
科研大数据需要的硬件需要结合建设内容。如果是传统的客养大数据平台,主要的工作数数据采集处理存储机上NLP,普通的集群和存储也可以满足,但是内存需要的资源会多一些,存储资源要大,毕竟基于数据的处理,可以考虑SSD。如果是多模态的科研平台,包括需要在这个科研平台上嫁接大模型...
最近手上堆积了不少跟数据相关的需求,在跟客户和同事交流的过程中,发现一个问题,那就是大家对数据的底层处理逻辑好像没有一个统一的认知。仔细思考一番,觉得还是有必要梳理一下。其实从去年开始,在数据领域有一个新概念悄悄兴起,开始在实际项目和产品中落地,各方势力也纷纷响应...
(more)大语言模型和RPA是两种不同的人工智能技术,分别用于不同的应用场景。大语言模型主要用于自然语言处理和对话式交互,而RPA主要用于自动化流程和数据处理。然而,大语言模型和RPA的结合可以充分发挥各自的优势,提高数字化转型的效率和质量。例如,在客服领域中,可以使用大语言模型...