mongod分布式数据库Redis

分布式数据库(elasticsearch、redis、mysql分布式集群、mongodb等)场景选型在线探讨

分布式数据库(elasticsearch、redis、mysql分布式集群、mongodb等)场景选型在线探讨

活动简介

近年来,随着国际信息安全形式的日益严峻,国家信息安全策略逐步深入。因此,一行两会连续针对金融业数据库技术受制于人的严峻形势出台了相关政策,以满足构建安全可靠可控的信息技术体系的要求。

纵观近年来普惠金融的发展,多用户、低额的客单价带来的主要挑战是数据量、交易额的大幅提高,并伴随着数十倍的交易高峰压力以及交易复杂度的增加。而传统数据库在处理此类应用场景的时,在扩展性、性能、吞吐量和可靠性等方面遇到了明显的瓶颈,只能通过业务拆分、升级硬件的方式来提升性能,造成设备投入和人员成本的不断攀升。面对着互联网金融业态不断的发展,数据的交互和存储也呈现指数级增长,这样的方式也无法保证业务连续性。在此形式下,在分布式数据库的选型上,根据不同的业务场景和关键系统中选择不同的开源产品,通过对开源数据库的深入研究和应用,满足了企业业务场景的事务处理和数据处理的要求。

如何进行分布式数据库技术路线的选择?分布式一般分为三条技术路线:分布式访问客户端、分布式中间件模式、分布式数据库模式。其中分布式访问客户端对应用侵入性大,改造难度很高;分布式中间件则类似mycat等产品,在数据库和应用间架一层proxy,这种方案无法支持分布式事务、也无法支持跨库关联,分布式数据库方案则将分库分表等中间件实现的功能下推到数据库层面来做,对应用透明,应用就像使用单机数据库来使用分布式数据库,同时天然地支持分布式事务。

那么选型分布式数据库有哪些难点呢?

1、分布式数据库的选型涉及了多个职能组织,如架构、开发、运维。

2、架构层面要考虑安全可控、多活容灾、业务承载能力、高可用以及架构转型;

3、对开发的挑战主要涉及以下,库表结构的设计、开发思路的转变、开发规范的适配、学习成本的增加;

4、对运维的挑战更加明显,那就新技术的技术掌控、监控的落地、自动化的挑战等等带来一系列的运维成本的提升。

twt社区邀请了互联网金融的专家:顾黄亮 分享分布式数据库的场景选型进行解读,希望通过这次答疑交流能给大家在分布式数据库的选型上提供帮助,解决大家在分布式数据库及场景选型上的难点。

本期答疑嘉宾:

顾黄亮,十年研发运维经验,涵盖基础架构、数据库、中间件,DEVOPS。四年的运维管理经验,有互联网,电商,金融从业经历。参加多个行业、国家标准的编写,《开源许可证使用指南(2018)》作者之一,国标《研发运营一体化(DEVOPS)能力成熟度模型》作者之一。GOPS全球运维大会演讲嘉宾。 

活动资料

分布式数据库的场景选型和趋势分析解读

#顾黄亮技术总监, 畅销书作者
随着互联网金融场景的不断拓展,海量的数据访问和处理造成传统的集中式数据库开始表现出性能瓶颈,分布式数据库的研究和场景使用应运而生,而数据的安全和合规也随着企业对数据使用的要求越来越高更加重视。因此在这种场景下,分布式数据库应具备高性能、可扩展、高可用和高容错等特性,而传统的集中式数据库难以同时满足。本文重点对分布式数据的特性及种类,并根据相应的业务场景对分布式数据库选型进行介绍分析,并对分布式数据库的细分领域的发展进行探讨。

分享嘉宾

顾黄亮
顾黄亮131836
技术总监畅销书作者
擅长领域: 云计算数据库系统运维
发布383
回答330

活跃参与会员

  • weejii
  • mephisto
  • cs_zhuhui
  • sunny4710
  • wuyandekuse
  • lxpeng163
  • tonygray
  • 尘世随缘
  • 谭宁
  • jwhdhr
  • yuanhigher
  • openabc
  • huaweitac
  • Jerry.Duna
  • gongpu
  • phoenixlzy
  • lwy170209
  • 508mars
  • greendy
  • feder
  • pinyhuang
  • 郭维
  • haikuo81
  • 顾黄亮
  • vivisquirrel
  • xushuhao11
  • Amygo
  • tianhui
  • 秋名山车神
  • GoldenDB
  • aixchina
  • whiterain
  • 晓黎
  • WUJJ0828
  • gz_kevin
  • jackyduys
  • dfx2004
  • shuhan5679
  • lyq6666
  • baochengchen
  • scarecrow
  • study123
  • netsafe
  • 少东家
  • koolkite
  • daoguo525
  • michael1983
  • zllhc
  • 停不下来
  • lvback
  • 苏十一
  • caofei
  • zhangjunpo
  • TXSRXY
  • faye
  • YZFXT
  • hn_unix
  • aigoppb
  • stevelinchao
  • irobot_w
  • kongdp
  • xym74
  • twt运营
  • 独立夜
  • chenlii
  • priest
  • bankhp
  • else_xie
  • tang237294066
  • atpeace331
  • zhenda
  • 彬彬
  • xijiehaiqing
  • postfix
  • zss0109211
  • zhangjunxi570
  • yinxin
  • 798683133yj
  • wanggeng
  • zhubaofeng1987
  • huangxudong
  • mornsky
  • haizdl
  • ugo911
  • liyongnmg
  • iamsureicandoi
  • zhangjian1119
  • nanjing_2013
  • wanglf
  • Laozhao
  • yuoucheng
  • wxx_126
  • chenmingfu
  • vmware2010
  • sxitsxit
  • czjing
  • thomas_lhb
  • happy14be
  • yaoyaozdl
  • tiehx
  • lhs0981101410
  • glenzjl
  • roundtrip
  • xiaopeng_521a
  • 潘建星
  • yu15321729208
  • yjl198838
  • maxzhu5250703
  • telnet4730
  • Gavin404
  • ns9118
  • 李晟
  • redmuc
  • like052
  • y18511664518
  • micbarme
  • zhaihaiyang511
  • 张全
  • liujinlong
  • Lancer
  • 杨文云
  • hackergodness
  • liuzhongzhou
  • wangdd
  • 日志易
  • jchenibm
  • 郑金辉
  • bjzhangsq
  • Nokilled
  • libai21
  • luxh08
  • xqdxqd
  • cf_chenfeng2000
  • Danniel_gong
  • wangweiwzc
  • 宋代超人
  • EsTTaNk
  • saltyp
  • cqhunter
  • 03500408@163.co
  • cpc1989
  • guoxilin
  • lisongqing
  • lihuizhi
  • hjcent
  • xuzc
  • tongshuai
  • lql2000
  • p14159
  • yuansuiyun
  • daiweis
  • Mr_zhangCY
  • wangshuai_go
  • yinzhijie
  • topzgm
  • 长诗佐酒
  • Judy朱
  • zhuhaiqiang
  • 老赵
  • 乃伊组特
  • zhmwang
  • dbaupper
  • yg_xp
  • seaman_bin
  • wanguod
  • 跃马江湖
  • hzhzju
  • keep9821
  • 我是大猫熊
  • 徐生韦
  • zhg1988
  • 逐浪淘沙
  • alphaaries
  • z778899
  • light_hu86
  • 刘宇英
  • diliangyu520
  • zhaomin
  • 追风筝的人o
  • mhmhmh
  • Jack7009
  • 0xffffff
  • pp890609
  • Oone
  • fanyqing
  • xzongming
  • xuhuibin
  • johncyj
  • jwlvinner
  • 李德禄
  • TTTT1111
  • yuanshenyi
  • liuyusheng
  • Tanxun
  • cllin_kiki
  • zhouchao
  • Dongxin
  • vpsuperman
  • chenjianliang
  • w990901456
  • 昊辰
  • yhzq76
  • 小民工
  • swq
  • lp1511
  • kungking
  • 小朱快跑123
  • 俞好龙
  • redhat
  • tianqi
  • zyral
  • 钱曙光
  • Luolired
  • yangshuyin
  • Tyrone
  • qsg0720
  • Lucky000
  • zihan524524
  • BLACKFLAG
  • DolphinDB
  • Switcher
  • eaglewei
  • Shajiexiang
  • Zhjian25
  • liukang
  • hjcsdc
  • 郑远金
  • 陈灿东
  • EliZhang
  • Ardusty
  • jwgooo
  • dsfsdcsd3ee3
  • a6582660
  • Lostcountry
  • kh17121823
  • 秋日私语
  • eric_sxb
  • doomsday82
  • lonelyblue
  • aesthetiker
  • ruhebuweizhang
  • skysong9999
  • diyun
  • gaoninggn
  • 超越
  • yanyunqq
  • ericwang_vm
  • Creolol
  • wdy610
  • 大成
  • daikeli
  • Linux1977
  • ericale
  • heyma
  • sunways
  • 顾衍文
  • Ken_joe
  • jordanli
  • sy1992
  • wanzi1996
  • yukikiki
  • ZG
  • ld1818
  • jialiangzhi
  • kappyy
  • 东风微鸣
  • 西北望射天狼
  • robustmaple
  • msc19890805
  • martinz7282
  • oltpone
  • wgl
  • woling77
  • Howardliu
  • MikeLee
  • 容器云大赛
  • 还是小强
  • enuo888
  • rechen2020
  • 强哥之神
  • jerry8
  • 铂金
  • May33
  • zzy3620
  • zwg215
  • Saxon_hzj
  • Jamalhan
  • aha
  • guwenkuan
  • 大榴莲
  • hrblong
  • 一力搜索
  • diablocd
  • leiliangxiu
  • 蓝色勿忘我
  • IT老兵
  • guohong
  • tdfans
  • xindo99
  • Joyyh
  • pisming
  • penghuasheng
  • jumpp
  • fanmen
  • tyhtian
  • 刘阿宝
  • 木木0313
  • foxkingwuyuan
  • wxz75
  • nkj2021
  • 陈恒龙
  • haocoder
  • cook9862
  • Jim666
  • fagor
  • someharder
  • luanxs
  • yting
  • blarbla
  • Charisse
  • dragon1220
  • ing李婷哦
  • raymondchen
  • kubinee
  • 专职dba
  • jessre
  • austindatabase
  • X社区推广