如何降低源系统的接入门槛?

目前比较多的是源系统将数据主动写入KAFKA。是否有更好的解决方案,降低对源系统的改造需求?

参与3

1同行回答

jamieejamiee数据库架构师某股份制银行
系统接入确实是一个比价棘手的问题,特别是一些业务系统开发人员对于大数据的大数据的组件使用熟悉的情况,数据接入尤为痛苦。我觉得可以从两个方面降低门槛。1.工具层面的问题。需要构建统一的消息中心,用于存放各个数据采集的实时数据;同时需要开发一个规范统一的数据采集的...显示全部

系统接入确实是一个比价棘手的问题,特别是一些业务系统开发人员对于大数据的大数据的组件使用熟悉的情况,数据接入尤为痛苦。我觉得可以从两个方面降低门槛。
1.工具层面的问题。需要构建统一的消息中心,用于存放各个数据采集的实时数据;同时需要开发一个规范统一的数据采集的JDK,各个业务系统按照JDK上封装的接口与消息中心交互,减少开发人员与消息中心交互效率;能对接入消息中心的数据和使用方进行管理,形成实时数据采集、消费的血缘管理能力,提高故障、变更等管理。
2.规范层面的问题。有数据采集的技术架构,就要明确需要制定实时数据采集的规范,并能将规范与工具进行结合,确保数据采集可控。

收起
银行 · 2019-08-31
浏览1113

提问者

ziky
其它某大型券商
擅长领域: 云计算中台数据中台

问题来自

问题状态

  • 发布时间:2019-08-29
  • 关注会员:2 人
  • 问题浏览:1580
  • 最近回答:2019-08-31
  • X社区推广