如何将不同业务系统数据深层次融合

企业现状:数据存在于多个业务系统数据库中,无法实现同时展示不同业务系统中的全部数据,且这些系统都是不同数据库产品,数据环境复杂,数据流通和共享的效果较差。而使用传统的ETL工具对数据抽取转换的效率又比较低,希望大家分享下成熟的解决方案。

参与9

4同行回答

美国队长美国队长研发工程师Alibaba
可以考虑用一下阿里开源的datax数据同步框架,支持异构数据库之间的数据同步显示全部

可以考虑用一下阿里开源的datax数据同步框架,支持异构数据库之间的数据同步

收起
互联网服务 · 2017-07-07
浏览2412
haichuan0227haichuan0227项目经理新浪云计算
对于这种复杂环境,没什么好办法,ETL是必须的一环。之后可以考虑规范化各业务线数据平台设计,尽量同源。减少不必要的麻烦。显示全部

对于这种复杂环境,没什么好办法,ETL是必须的一环。
之后可以考虑规范化各业务线数据平台设计,尽量同源。减少不必要的麻烦。

收起
互联网服务 · 2017-07-07
浏览2458
冯帅冯帅数据库管理员贝壳金服
这个问题有三个方向,一是 建立统一的数据平台,做数据的加工整合方便以后展示二是 业务系统的整合三是 如果方便的话,尽量统一使用相同的数据库显示全部

这个问题有三个方向,
一是 建立统一的数据平台,做数据的加工整合方便以后展示
二是 业务系统的整合
三是 如果方便的话,尽量统一使用相同的数据库

收起
融资租赁 · 2017-07-07
浏览2448
heraleignheraleign网站架构师iwhalecloud
其实大多数通信厂商都会面临相同的数据环境,我们目前采用的是建立ODS数据仓库,然后制定规范,各业务系统的数据汇聚后,进行数据规范转换,对于传统数据库,采用CDC同步,进系统后按规范进行清洗转换,对于数据文件,采用Kafka进行清洗,目前来看,效果不错,希望有帮助。...显示全部

其实大多数通信厂商都会面临相同的数据环境,我们目前采用的是建立ODS数据仓库,然后制定规范,各业务系统的数据汇聚后,进行数据规范转换,对于传统数据库,采用CDC同步,进系统后按规范进行清洗转换,对于数据文件,采用Kafka进行清洗,目前来看,效果不错,希望有帮助。

收起
系统集成 · 2017-07-07
浏览2524

提问者

qq373793057
系统工程师某银行
擅长领域: 存储灾备分布式系统

问题来自

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2017-07-07
  • 关注会员:5 人
  • 问题浏览:6145
  • 最近回答:2017-07-07
  • X社区推广