对于事实数据分析,我们通常会采用流处理技术,对于流处理技术,实时采集方面(如实时生成的日志)我们可以用Flume,对于RDBMS我们可以使用ogg和数据库的触发器以及增量更新,采集玩的数据可以进入kafka的消息队列,来进行消息的分发,分发的数据可以进入Storm进行流式处理,也可以进入HDFS,通过Spark Streaming的方式进行处理。
关于TWT使用指南社区专家合作厂商入驻社区企业招聘投诉建议版权与免责声明联系我们 © 2024talkwithtrend — talk with trend,talk with technologist京ICP备09031017号-30