实时数仓的主流技术架构有哪些,分别适应哪些典型场景,各组件的选择考虑哪些因素?实时数仓如何与批量数据整合提供数据服务?
OGG :抽取和解析日志。做为数据的源头数据的传输:FLUME ,LOGSTASH 个人理解:FLUME更注重数据的归集和分发。LOGSTASH 更多的是数据的过滤。KAFKA:消息的订阅和发布。时时计算:SPARK-STREAMING.存储:REDIS
关于TWT使用指南社区专家合作厂商入驻社区企业招聘投诉建议版权与免责声明联系我们 © 2024talkwithtrend — talk with trend,talk with technologist京ICP备09031017号-30