银行分布式存储存储运维存储架构设计

银行业分布式存储架构设计与实施运维难点在线交流

银行业分布式存储架构设计与实施运维难点在线交流

活动简介

随着互联网数据规模越来越大,并发请求越来越高,传统的关系数据库系统在性能、价格、可扩展性方面已经不能很好地满足需求。谷歌、亚马逊等互联网公司率先在后台基础设施中引入超大规模分布式存储系统,用来解决海量数据的存储问题。与传统的集中式存储技术不同,分布式存储没有将数据存储在某个或特定节点上,而是通过网络将各个节点分散的存储资源汇聚成一个虚拟的存储设备,将数据分散在各处。相较于集中存储,分布式存储成本地,扩展性好,弱化了关系型数据模型,可以得到高并发和高性能。

金融业务与服务,利用信息化技术持续改进与发展,已有近30年的历程,这一发展过程的各个阶段,既有改善了金融服务,促进实体经济发展的收益性结果,也有因各类未知问题造成的事件与影响等经验教训,因此,金融业务发展与信息技术的改进优化,是一个互相促进、迭代发展的过程。随着银行业务数据字化水平的提高,配套技术的基础建设和实际运维过程也提上了日程。如何发挥分布式存储优点,实现线上化的数字资产交易与服务业务,都是许多银行企业在技术发展重定位中思考的问题之一。

由于业务场景需要不同,很多银行业务需要以HDFS、TFS和Lustre为代表的分布式文件系统,部分业务会运用到以Dynamo为代表的分布式键值系统和以Bigtable为代表的分布式表格系统,最后是以MongoDB为代表的分布式数据库。如何为不同业务需求和使用场景恰如其分的规划与选型?在面对国产化安全可靠性前提的前提下,如何保障分布式存储的稳定运行和快速高效的运维管理?分布式存储系统如何利用自身特性实现建容灾环境搭建与业务的快速切换?数据安全与备份管理是否可以即敏捷又安全的进行规范部署?这些都是银行也必须要面对的实际问题

在这次交流中,我们将会对银行业诸如此类的常见问题,进行专家问诊与交流讨论:

(1)金融行业如何针对结构化与非结构化数据,进行分布式存储的选型?尤其像客服中心语音数据与信贷类交易系统的影像文件等非结构化数据,如何既经济又安全地选择市场上高口碑和好评的分布式存储进行对接?

(2)集中式存储向分布式存储的转型,有哪些技术难点和运维管理困难?转型前期、中期和后期都有哪些注意的要点,对于渠道类、账务类和数据报送类业务,如何合理、分批次进行转型?

(3)从运维的角度看,分布式存储设计时要考虑哪些方面?运维管理中的监控告警、备份恢复与异地容灾等应该如何规划?

本次线上同行交流,欢迎大家提出目前遇到的各种关于分布式存储设计和实施运维的难题,与专家及同行进行线上的探讨!

活动资料

嘉宾

宁泽阳
系统工程师某科技公司
擅长领域: 存储服务器分布式系统
发布85
回答78

活跃参与会员

  • aigle
  • gz_kevin
  • yangyjian
  • lyq6666
  • pysx0503
  • study123
  • desert_xu
  • zhangpeng4007
  • xnycool
  • fengsh
  • ljjsjtu
  • sps113
  • cnpmc
  • tjz1981
  • geqiting
  • chenjunhong
  • 小贝
  • wuwenpin
  • caocanxxp
  • priest
  • mytxy
  • dragoncxb
  • lscomeon
  • micalafei
  • hufeng719
  • seagl
  • tonygray
  • stringchao
  • Doctor
  • qiuhaoshu
  • xuchangjing
  • zhangyahui
  • loverandom
  • thomas_lhb
  • youki2008
  • tiehx
  • lhs0981101410
  • 雪山飞狐ZZB
  • 迷鸟归林218
  • wangxuefeng266
  • five
  • glacier226
  • liujiacai
  • dahuai
  • bankinfo
  • 雪落无痕
  • boy_hxm
  • 我是一只鱼
  • Hsukk
  • cf_chenfeng2000
  • haozhangsir
  • hetian127
  • wjlh
  • lihuizhi
  • Hejf
  • Love_南橘
  • baimmi
  • 智诩
  • 老赵
  • foxbluesky
  • mileskuo
  • 田大少
  • JohnBush
  • wncczhs
  • 米汤泡干饭
  • apo11o
  • fanyqing
  • xuhuibin
  • zhuqibs
  • woshishui072612
  • 蜡笔小秦
  • spirit012
  • lindh2010
  • 牛大大
  • 宁泽阳
  • 赵琳
  • hm631379593
  • fightingL
  • guoyajing
  • xuyuting
  • Alehandro
  • xushuhao11
  • qsg0720
  • verkey
  • Switcher
  • smit
  • zhongshi
  • adamshao
  • anthonyhenry
  • ledkiroro
  • istayfoolish
  • ld1818
  • taokun
  • laziocht
  • lry
  • 杰少
  • niupengju
  • Net_Zh
  • xabre
  • racedog
  • aixchina
  • tmlmz
  • 晓黎
  • yang3518
  • cargoo
  • WUJJ0828
  • xayjgs
  • zwz99999
  • hanql
  • cloudy
  • quietywind
  • jackyduys
  • hunshiwangren
  • tangfanfan
  • wxy24bean
  • apsbb
  • cxhcjq
  • evan8527
  • 科莱恩特
  • smileslee
  • LINE2008
  • hornyzhang
  • 爱如潮水
  • tt_45
  • aix5l
  • campspirit
  • nitkey
  • fight58588
  • babydlj
  • dreamsky
  • abit2007
  • windevil
  • zrosiness
  • xuyan2754
  • songdeyong
  • baizhaoxian
  • qingyun1208
  • cq_98
  • lovezcy
  • ztianjianz
  • michael1983
  • zllhc
  • weiruan85
  • strock
  • lvback
  • gzhsjz
  • xusu
  • 苏十一
  • 北京老鹰
  • 淡然的紫色
  • ccbblues
  • feidang
  • forever1xx1
  • junge
  • andy090909
  • huangrq_cn
  • lvaix
  • hudingi256
  • xiaomaisui
  • hoge
  • guliang123
  • peilaiguang
  • zhanghuiyun0978
  • zhangfeng_03
  • faye
  • eversmily
  • 午夜幽魂
  • YZFXT
  • 梦and天空
  • xiao8577034
  • flm20080704
  • rose_slim
  • yufenzi
  • amerson
  • mzjmzjmzj333
  • hongyehongye
  • sharkbing
  • hulu_168
  • mycortex
  • kissfire
  • ds8K
  • 丁辉辉
  • bjb
  • uc804
  • jesson
  • kingdonwang
  • jackycao
  • gjj402
  • kongdp
  • miss521
  • Rakas
  • 忘了
  • smtpclient
  • tianshiyumao
  • ny_zhhf
  • Samponiar
  • austinxp
  • kiuy0526
  • shAIXer
  • flywiththewind
  • fangrongzhan
  • chenpei0708
  • buxl2012
  • 怅忆昔锋
  • ss33205687
  • wjs_luna
  • jinlan21
  • netb2c
  • crystalwmagic
  • pinganben
  • powertiandi
  • 彬彬
  • xuan_99
  • xijiehaiqing
  • iuff
  • O是球迷
  • zibing6688
  • jxnxsdengyu
  • yxdongzhiwen
  • postfix
  • 414356153
  • disorder2013
  • xiaokfy
  • czw19900415
  • liukai19880908
  • HYBT
  • wanghaofei
  • 大大觉迷
  • yongquan913
  • pebble0820
  • cnboom
  • 798683133yj
  • 六翼天使
  • lizza_2008
  • sjsy57
  • alexluo98
  • wanggeng
  • huangxudong
  • shuhan
  • gaozj_2012
  • djw8844
  • bingwangzi2500
  • chengzuqiao
  • luochao1985
  • gdjoyful
  • Lear
  • lijianh9634
  • admking
  • zjqac
  • fpeleo
  • 罗凌彬
  • wykkx
  • wzpystcdc
  • xindao
  • wwzwh9521
  • littlebirdsxty
  • Laozhao
  • lcc
  • allon_312
  • yuoucheng
  • pyz19881026
  • zgagxf
  • balefire
  • birdnet
  • jobandme
  • dawey
  • lzg21st
  • weiweikobe
  • ynkmtang
  • wonderfulhong
  • Gavin_wang
  • fengdejintou
  • why901
  • xiao4th
  • czjing
  • urlgaojian
  • 平凡人生
  • hatech
  • wsbj123
  • luokedong_1986
  • yaoyaozdl
  • mjk
  • wangzijie
  • Solace
  • zt852
  • yangna101
  • yjckxrzs_wl
  • shomer23
  • ttc2253
  • ttkanni
  • 大力水手
  • poper
  • caizq1010
  • xing854800529
  • lsh0329
  • mayplay
  • bandrari
  • rock_liu
  • zx2100933
  • 爱生活爱花生
  • 669171162ml
  • 潘建星
  • wuxianyu
  • huangshuai
  • 知识贩子
  • lewoli
  • tomdk
  • h1q2w
  • 坚硬的稀粥
  • yirenzui8
  • 博浩玄空
  • zly1290
  • fbw5zd21
  • hn_linux
  • foryoung
  • heartfar
  • crazywhq
  • xcyupeng
  • gzl
  • coolloti
  • maxzhu5250703
  • jy123111
  • 空空行囊
  • yitbin
  • 李晟
  • redmuc
  • nirvana707
  • lifans
  • wang0230
  • 陈轶
  • doc
  • aaa387120
  • hl249992809
  • lxldoudou
  • xinzai
  • ACDante
  • mtanlee
  • Supermanmrl
  • yuanmin
  • 798小百
  • 徐彬
  • ais
  • 潇洒D鱼
  • liujinlong
  • kaqiluo
  • shmilyxys
  • caoxiancc
  • LinuxONE
  • sunnyleew
  • wangj0923
  • thisqin
  • lktianxia
  • raopinglin
  • Adams赵
  • wsyytc
  • liuq
  • zuoshouaixchina
  • 京客隆
  • haijiang
  • wincoin
  • lichuang36
  • 解志
  • port9013
  • jension
  • 冰糖金桔
  • bbaimm88
  • liuzhongzhou
  • huaweitac
  • uriyliu
  • zeroquell
  • cswuping
  • lolololo
  • 陈翔1006
  • ntzs
  • jy5208812
  • shenjie001
  • zhangyidong
  • 灰灰
  • wuzhuang0001
  • iam6046
  • qingxing0312
  • seposal
  • hwe li
  • EricChan
  • yhrain
  • cchuang
  • libai21
  • guoxiaoyu
  • 李永剑
  • lhl1212
  • Danniel_gong
  • gongpu
  • run4life
  • 晓月
  • zhutu
  • shangqingbo
  • 忘了变
  • 遗忘的小丑
  • cft18
  • binjoey
  • qwerse
  • zyyll87
  • bcc18823605807
  • 宋代超人
  • lemonpiggy
  • Amol1984
  • zjw2016
  • 御麟千古
  • bb652826616
  • jjchen05
  • hongbing_yip
  • ustcgf
  • sousi
  • cpc1989
  • hswgr
  • WHM001
  • everboy99
  • lostbacker
  • elan
  • Alex_Gao
  • juneyang
  • 不见天高
  • jerrysh
  • dylloveyou
  • shendaoshu
  • jiay
  • 陈炼
  • fengyun1
  • 去世的闲人
  • sunyifeng
  • TIMLIU
  • xjxhzdh
  • issac_ding
  • dfbb250100
  • 东峡奇幻
  • yangzhihuai
  • andrewdi
  • pysx05031
  • myunix
  • wangshuai_go
  • topzgm
  • 姜沫
  • zhuhaiqiang
  • 夜雪窗寒
  • 乃伊组特
  • smithy_830
  • xujing111
  • 墨小冰
  • link74
  • nbdragon
  • dbcn
  • woshihfgg
  • youyoulixiao
  • renxiangwei
  • 许岗椿itl
  • hanzo
  • rxwang117
  • seaman_bin
  • actor168
  • lonelylht
  • chad空心
  • 且行且思
  • hust208
  • huangrq
  • andyliu1132
  • 我是大猫熊
  • ICBCMA
  • jock312
  • 徐生韦
  • zhg1988
  • 韩琪冲
  • 王希瑞
  • 逐浪淘沙
  • 八达山人
  • linjh
  • zjh999
  • Vicente
  • menglunyang
  • dzb_01
  • fishzefeng
  • qiu100547
  • mysqh6
  • YichenAH
  • fuwangrong
  • enjoyinter2014
  • zhaomin
  • golden_golden
  • durant_zhao
  • kuyinan
  • 杨勇3007
  • henrrychen125
  • 是ht
  • ashun80
  • 雷霆风暴
  • yjcx640
  • liveliuchao
  • luoxing
  • zfchengwu
  • 小人书黑
  • rechen
  • junma
  • tennis
  • iamanran
  • oxhero
  • chenandy7
  • jeko
  • hzl1984
  • 刘悦炀
  • 邢万里
  • lixiang11
  • hftdg
  • lzeve
  • zhanxuechao
  • qingjingmilk
  • 木小虫
  • benjiamin
  • dbskyword
  • Baota1234
  • njbaige
  • 苍蝇酒瓶
  • jasonvon
  • hnnx123456789
  • hs1199
  • Sepao
  • Linked
  • jianglj
  • macxos
  • flowery
  • yuyeyo
  • jackyzt98
  • zk764
  • Zhouyubi
  • dragonsun2018
  • tankkillers
  • cougars
  • akiispsy
  • Martinyang
  • erictwt1130
  • sky89
  • hardtome
  • fhqhappy
  • tuomi2013
  • solomon_sun
  • Demon_Huang
  • Yanziq
  • 所罗门塔
  • shangfukai
  • levi_z
  • ye_1990
  • liuyusheng
  • qwe123rty
  • 鲁花花生油
  • hwrr
  • rosha
  • 疯狂的兔宝
  • zhouzulin
  • kevinchn
  • LambLeader
  • ahitwen
  • Dongxin
  • 繁华世间一扁舟
  • Jelta
  • JackZou
  • sdx2018
  • zxin
  • 宋小
  • LUPING
  • twtwx
  • z11513
  • shenjc
  • wayne7356
  • wuzy7366
  • zjl2018
  • 顾黄亮
  • Chengdada0109
  • AmosLiu
  • 花花世界
  • qq1147937
  • shirley刘
  • xiejun999
  • cenwucai697
  • 蓝调江南
  • openacl
  • lujianno11
  • johnlay
  • mnzhmike
  • t18970066973
  • Seaskyblue
  • alongT
  • dongzi
  • daliang1215
  • Qiangz
  • hornling
  • liujun1015
  • cc123321
  • scott0000
  • lkl2019
  • xuyuyu
  • qianghuixia
  • SmartX
  • Martin1989
  • 俞好龙
  • redhat
  • Damien
  • edwardwu
  • tianqi
  • elvis_wang
  • jiangliangliang
  • hellotwt
  • li201
  • Amygo
  • bluebee
  • 胡大头hly
  • 阮文博
  • JackHe
  • zrj7211
  • folore
  • csj11341
  • zhanghaichang
  • iiiiisalmon
  • 李娇华
  • zihan524524
  • caiping
  • DolphinDB
  • jt_zzh
  • secondiinone
  • fanwen
  • 王柯淇
  • 西瓜味的夏天
  • scnko
  • double1986
  • 史大大
  • XSKY星辰天合
  • 郑远金
  • huigeislight
  • Julius
  • hooyeah
  • 吕作令
  • youyoubird
  • HengHsu
  • 俺的twt
  • Lostcountry
  • akanan
  • cephtest
  • lonelyblue
  • nsalison
  • mllteal
  • lihuipaddle
  • 阿德
  • edyugi
  • yunbo
  • 元核云
  • ericwang_vm
  • mumu0029
  • 旗正飘飘
  • Jefferson129
  • chengsam
  • klihua
  • sunice
  • jackyhuan
  • wmchoa
  • ning87
  • wanzi1996
  • cxwshawn
  • sandstone
  • 会见
  • ZG
  • AhaoAxin
  • leejt2003
  • 铭鹿
  • 壞小孩
  • ginawang
  • Hsia
  • 听风声
  • XLKoRn
  • Julien
  • 钟开森ing
  • yiyiyouwo
  • hnzz_xf
  • cloudqq
  • scsit
  • elcondoyy
  • pany1708
  • djl2020
  • 大秦访客
  • Alicehu
  • roundcuby
  • 山鸡
  • swt
  • yang90520
  • yanghaovip
  • guomin
  • cynthiaOY
  • holaworld
  • liu6490
  • han468009219
  • 知知的twt
  • HW阿呆
  • szcgj
  • Merry1223
  • 落花有意流水
  • 樹想
  • twtjianbin123
  • frecol
  • XN0517
  • Alvin20
  • wh滨
  • 张程z
  • 飞飞飞飞
  • zzg22936
  • yamap
  • 小徐
  • 网上邻居
  • Chet_Liu
  • liujian0122
  • zhangshunyuan
  • syrup001
  • thwhhelen
  • Mani
  • lemotto
  • 顾里
  • Ledison
  • xuker
  • Daniel1111
  • wangxq
  • zhwj
  • zhaohaibo
  • 紫峰
  • hongdi
  • zhangpin
  • wfang_2020
  • yangfantwt
  • shaos3
  • zhanghaiyan
  • 凡舒
  • Eleven11馨
  • TWTNEWBIE
  • twisxf
  • Zhou_zero
  • rioyu
  • jiaoyutwt
  • fydedd
  • william5918
  • 悠扬
  • MikeLee
  • dzw1230
  • joe_smile_1971
  • xianghui_li
  • wbhost
  • rengran2005
  • Redhat_z
  • qzlsk
  • xiaoxingge
  • 老孙
  • jerry8
  • kuddytwt
  • hi_stone
  • KenLIU
  • alexanderyu55
  • feiyun20
  • 陈东旭
  • oracleloyal
  • tomsencui
  • ShadowJava
  • 阿杰
  • sandtimes
  • sdwsdw8
  • dahuojian
  • bevisbin
  • fanxh
  • 大榴莲
  • 陶大先生
  • wanghui3w
  • winniewang
  • xiaosong
  • Philo
  • cheneyyu
  • kylin_li
  • jasonjsh
  • ElenaQu
  • amany
  • hwq1314
  • Mung
  • fufengyao
  • slny
  • tt371526
  • zqlzhang511
  • 啊斌543
  • JaneShi
  • yulsf
  • 眼底星空
  • nicolg
  • thomaswade2021
  • polarbear0220
  • pan0711
  • ltsj202
  • yingxing007
  • JasonPan028
  • Zhangweis218
  • czhe
  • chubowen
  • closer
  • shingkong
  • kevxia
  • brianlee
  • jadezhang
  • HasYui
  • 阿瓦达索命
  • lxh816
  • 阿毛
  • 张天兴
  • siyu2025
  • zzzzzzzzzyw
  • 我的乖乖
  • Caesar999
  • halidav
  • 吴知
  • jameshsc
  • marktown28
  • 分蛋糕日日日
  • shinhj
  • sdfsdfsdf4535
  • 扫地僧头发多
  • serveru
  • rocky_33
  • jessre
  • Tiger_Wong
  • vampirecarter
  • maktub
  • mclaren
  • helenjiang
  • jimnie
  • alex_chen_nj
  • c331527583
  • attackonmiaow
  • seanzzzzzzz
  • asddsf
  • yourbest123
  • X社区推广