数据库,简单来说是本身可视为电子化的文件柜——存储电子文件的处所,用户可以对文件中的数据进行新增、截取、更新、删除等操作。指的是以一定方式储存在一起、能为多个用户共享、具有尽可能小的冗余度的特点、是与应用程序彼此独立的数据集合。...(more)
来自主题:数据库整合 · 7小时前
整合过程中集中度的提高,如何进行有效的系统间资源使用隔离以及故障隔离,做到某一系统的故障失控不影响整体平台的运行。另外整合迁移中如何规避平台不同带来的对应用的影响,如基于linux one等专有平台,是否能做到完全对应用透明。...(more)
浏览371
回答1
来自主题:分布式数据库 · 1天前
顾黄亮苏宁消费金融有限公司 擅长领域:Redis, 分布式数据库, 数据一致性
28 会员关注
Mongo3.0自身是不提供事务处理的。如果要实现事务操作,必须自己写实现代码。在为你的项目选定数据库的时候,要根据你的项目来量身选择。如果需要强事务操作的和数据一致性很高的地方,最好选择健壮的关系行数据库。如果对事务处理要求不高,而对数据存取要求很高的,则选择非关系...(more)
浏览840
回答1
来自主题:分布式数据库 · 1天前
顾黄亮苏宁消费金融有限公司 擅长领域:Redis, 分布式数据库, 数据一致性
28 会员关注
es优点:将你的文档分割到不同容器或者分片中,可以存在单个节点或多个节点复制每个分片提供数据备份,防止硬件问题导致数据丢失。对集群中任意节点的相互请求进行路由,保证获取的数据是你需要的,集群增加或者重新分配分片时,不停机让新节点恢复丢失的节点分片数据redis优点:1速度...(more)
浏览882
回答1
来自主题:大数据 · 1天前
数据库、存储、操作系统、硬件、大数据自主可控产品都有哪些?他们分别有什么优缺点?
浏览308
来自主题:分布式数据库 · 1天前
顾黄亮苏宁消费金融有限公司 擅长领域:Redis, 分布式数据库, 数据一致性
28 会员关注
命题中两个需求,1:海量数据;2:时效性如果是单纯考虑1,基本上绝大部分的分布式数据库都适合,无非考虑到海量到什么程度,但是每个分布式数据库的优点不一样,比如说redis的场景是缓存和订阅,es的场景更多的是搜索数据分析。如你所说,redis和es都有缺点,redis是单线程的,一个查询慢了会导...(more)
浏览896
回答2
来自主题:分布式数据库 · 1天前
顾黄亮苏宁消费金融有限公司 擅长领域:Redis, 分布式数据库, 数据一致性
28 会员关注
脏读的情况很常见,一般是在并发事务的时候出现,类似的还有幻读和不可重复读。这种场景在金融中非常常见,比如还款和取款。解释下脏读,一个事务读取另一个事务的数据,另一个事务的数据存在更改没有提交,如果出现被读取事务出现回滚,那这个被读取的数据是不合法的,这就是脏读。基于...(more)
浏览378
回答1
来自主题:分布式数据库 · 1天前
顾黄亮苏宁消费金融有限公司 擅长领域:Redis, 分布式数据库, 数据一致性
28 会员关注
这个问题很广泛,一般来说,对于银行来说,选择分布式数据库的原则是场景和稳定,根据场景选择数据库的类型,是要支持持久化的,提供高并发和海量存储的,还是要支持频繁读写的,还是以要冗余的多节点并行的,还是需要兼容以前数据库的。对于稳定来说,还是商业的优先吧,毕竟持牌金融机构对业...(more)
浏览371
回答1
来自主题:分布式数据库 · 1天前
顾黄亮苏宁消费金融有限公司 擅长领域:Redis, 分布式数据库, 数据一致性
28 会员关注
ES场景分布式的搜索引擎和数据分析引擎,全文检索,结构化检索,数据分析对海量数据进行近实时的处理,站内搜索(电商,招聘,门户,等等), IT 系统搜索( OA , CRM , ERP ,等等),数据分析redis场景常规计数:粉丝数,微博数;用户信息变更;缓存处理,作为 mysql 的缓存;队列系统,建有优先级的队列系统,日志收...(more)
浏览728
回答1
来自主题:分布式数据库 · 1天前
顾黄亮苏宁消费金融有限公司 擅长领域:Redis, 分布式数据库, 数据一致性
28 会员关注
1:充分的测试,评估时间,总结经验,提升性能在生产中进行数据的大批量迁移时,充分的测试时必须的。一方面可以根据这些测试积累一些必要的数据作为生产中使用参考,另外一方面可以基于之前的测试,总结经验,总结不足之处,加入改进,在生产中每一分钟的改进都是很重要的。这部分包括你说...(more)
浏览441
回答1
来自主题:MongoDB · 1天前
顾黄亮苏宁消费金融有限公司 擅长领域:Redis, 分布式数据库, 数据一致性
28 会员关注
准确来说,二者都是nosql,但都不是严格意义上的kv数据库MongoDB最大的特点是表结构灵活可变,字段类型可以随时修改 。MongoDB不需要定义表结构这个特点给表结构的修改带来了极大的方便,但是也给多表查询、复杂事务等高级操作带来了阻碍。 因此,如果你的数据的逻辑结构非常复杂,...(more)
浏览427
回答1
来自主题:elasticsearch · 1天前
顾黄亮苏宁消费金融有限公司 擅长领域:Redis, 分布式数据库, 数据一致性
28 会员关注
严格的说,ES不是一个数据库,而是一个搜索引擎,ES的方方面面也都是围绕搜索设计的。ES支持全文搜索,这里简单解释下什么是全文搜索:对于“我在北京的一家互联网公司工作”这样的数据,如果你搜索“北京”、“互联网”、“工作”这些关键词都能命中这条数据的话,这就是全文搜索,你每...(more)
浏览441
回答1
来自主题:分布式数据库 · 1天前
顾黄亮苏宁消费金融有限公司 擅长领域:Redis, 分布式数据库, 数据一致性
28 会员关注
分布式数据库运维中,整体来说有几个地方的挑战:1. 是运维的复杂度会提升不少。譬如:异常故障的处理等。 2.备份和恢复会复杂一些。这些的恢复是指产生逻辑错误导致的问题恢复。稳定都是基于保证基础设施的架构合理性;保证数据库集群自身的健壮性;保证应用层架构的合理性...(more)
浏览462
回答1
来自主题:分布式数据库 · 5天前
顾黄亮苏宁消费金融有限公司 擅长领域:Redis, 分布式数据库, 数据一致性
28 会员关注
对你的问题做个延伸,无论写还是读,都是涉及IO,所以解决负载,就是解决IO问题mysql大致有几种集群方式,1主从,只是备份的作用;2多主互备,还是解决了备份问题,另增强了高可用;3多主互备,多主下面分别挂从;解决你的问题的是4AB主主互备,把从库挂到B下,真正解决降低IO。多主的架构,又能解决写...(more)
浏览1636
回答1
来自主题:Informix · 5天前
zymh_zy国内某公司 擅长领域:WAS, 自动化运维, esb
275 会员关注
按我已前配置实施Informix hdr的经验与记忆。是可以互相切换的。
浏览1805
回答4
来自主题:分布式数据库 · 5天前
顾黄亮苏宁消费金融有限公司 擅长领域:Redis, 分布式数据库, 数据一致性
28 会员关注
第一:考虑数据同步的场景;第二:你分布式数据库的类型;第三:你的业务架构;第四:也是最重要的,对数据一致性的容忍性。跨机房的数据复制方式一般是专线网络 + DB复制 来保障,终端服务实现跨机房的话 就需要系统相关的所有组件都支持跨机房高可用,并且需要实现自动化切换。补充一点, 跨...(more)
浏览1407
回答2
来自主题:Redis · 5天前
顾黄亮苏宁消费金融有限公司 擅长领域:Redis, 分布式数据库, 数据一致性
28 会员关注
这个问题思考了很久,对于ES或redis来说,针对数据中台不应该说选型,应该是数据集成的选择。暂时不说选型,先说说数据集成的准备工作,在数据集成开发之前,应该准备数据源的分类、环境的梳理、数据内容、数据质量、数据的范围。然后进行数据集成的业务架构涉及,再进行数据集成、数...(more)
浏览747
回答1
来自主题:分布式数据库 · 5天前
顾黄亮苏宁消费金融有限公司 擅长领域:Redis, 分布式数据库, 数据一致性
28 会员关注
针对第一个问题,银行的科技工程师短时间确实对一些组件不是太熟悉,但是项目又一定要用到。那怎么办,以我为例,我遇到过这样的情况,项目临时使用某个nosql数据库,且没有选型的空间,从测试到生产只有一个月时间,一周独自安装,学习基本知识,了解集群方式,第二周完全了解所有的配置参数...(more)
浏览531
回答1
来自主题:分布式数据库 · 5天前
顾黄亮苏宁消费金融有限公司 擅长领域:Redis, 分布式数据库, 数据一致性
28 会员关注
OceanBase 数据库系统经过蚂蚁金服内部大量互联网金融场景验证,给了我们尝试使用的信心。实践证明,南京银行选择 OceanBase 数据库,给“鑫云+”互金平台提供了更加坚实的保证。 ——李勇(南京银行信息技术部副总经理)...(more)
浏览577
回答1
来自主题:机器学习 · 5天前
刘康日志易 擅长领域:银行日志分析系统, Zabbix
3 会员关注
看公司实力吧,如果只是想省事可以购买一套(比如我司的)。如果想针对自己公司的特定的环境的话很可能就得自己开发了。 但是我建议只是研究算法部分就好了,至于数据采集之类的前期工作网上找找开源的就行了。 ...(more)
浏览967
回答1