如何应对外围系统到核心系统取数的问题?

核心系统不是独立的系统,会与外围系统进行大量的数据交互,例如数仓卸数和实时数仓,如何给这些系统供数,如何既能保证数据实效性又能对不影响核心系统正常运行。

参与17

4同行回答

lulihuan1987lulihuan1987课题专家组数据库管理员张家港行
核心系统与外围系统进行数据交互,根据场景,可以通过如下方案解决:1)T+1应用:卸数,通常需要取多个表的全量数据,取数量大,时间长,建议通过只读账户直接从备库取数。2)实时应用:例如实时数仓,需要实时取数,可以通过数据准实时同步到消息队列(例如kafka)方式与大数据实时计算平台对接,同时...显示全部

核心系统与外围系统进行数据交互,根据场景,可以通过如下方案解决:

1)T+1应用:卸数,通常需要取多个表的全量数据,取数量大,时间长,建议通过只读账户直接从备库取数。

2)实时应用:例如实时数仓,需要实时取数,可以通过数据准实时同步到消息队列(例如kafka)方式与大数据实时计算平台对接,同时不影响生产,建议从备机同步。

收起
银行 · 2021-06-24
浏览1434
一力搜索一力搜索数据库架构师股份制银行
这些场景完全可以读写分离。备库做就行,脚本自动寻找备库显示全部

这些场景完全可以读写分离。备库做就行,脚本自动寻找备库

收起
银行 · 2021-06-23
浏览1337

提问者

wanggeng
系统运维工程师某银行
擅长领域: 服务器存储数据库

问题来自

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2021-06-18
  • 关注会员:5 人
  • 问题浏览:2494
  • 最近回答:2023-06-02
  • X社区推广