如何降低源系统的接入门槛?

目前比较多的是源系统将数据主动写入KAFKA。是否有更好的解决方案,降低对源系统的改造需求?显示全部

目前比较多的是源系统将数据主动写入KAFKA。是否有更好的解决方案,降低对源系统的改造需求?

收起
参与3

返回jamiee的回答

jamieejamiee  数据库架构师 , 某股份制银行

系统接入确实是一个比价棘手的问题,特别是一些业务系统开发人员对于大数据的大数据的组件使用熟悉的情况,数据接入尤为痛苦。我觉得可以从两个方面降低门槛。
1.工具层面的问题。需要构建统一的消息中心,用于存放各个数据采集的实时数据;同时需要开发一个规范统一的数据采集的JDK,各个业务系统按照JDK上封装的接口与消息中心交互,减少开发人员与消息中心交互效率;能对接入消息中心的数据和使用方进行管理,形成实时数据采集、消费的血缘管理能力,提高故障、变更等管理。
2.规范层面的问题。有数据采集的技术架构,就要明确需要制定实时数据采集的规范,并能将规范与工具进行结合,确保数据采集可控。

银行 · 2019-08-31
浏览1094

回答者

jamiee
数据库架构师某股份制银行
擅长领域: 大数据实时数仓数据库

jamiee 最近回答过的问题

回答状态

  • 发布时间:2019-08-31
  • 关注会员:2 人
  • 回答浏览:1094
  • X社区推广