实时数仓的主流技术架构及组件选型?

实时数仓的主流技术架构有哪些,分别适应哪些典型场景,各组件的选择考虑哪些因素?实时数仓如何与批量数据整合提供数据服务?显示全部

实时数仓的主流技术架构有哪些,分别适应哪些典型场景,各组件的选择考虑哪些因素?实时数仓如何与批量数据整合提供数据服务?

收起
参与9

查看其它 1 个回答王奇的回答

王奇王奇  项目经理 , 阜新银行

OGG :抽取和解析日志。做为数据的源头
数据的传输:FLUME ,LOGSTASH  个人理解:FLUME更注重数据的归集和分发。LOGSTASH 更多的是数据的过滤。
KAFKA:消息的订阅和发布。
时时计算:SPARK-STREAMING.
存储:REDIS

银行 · 2019-08-30
浏览3386

回答者

王奇
项目经理阜新银行
擅长领域: 大数据数据库商业智能

王奇 最近回答过的问题

回答状态

  • 发布时间:2019-08-30
  • 关注会员:3 人
  • 回答浏览:3386
  • X社区推广