大数据平台能否取代传统的数仓报表平台?

大数据平台能否取代传统的数仓报表平台,当然问这个问题是因为对大数据平台没那么熟悉,所以会有疑问,是否能取代,能否涵盖?大数据平台能否包含数据量大,非结构化数据处理,实时数据流,日志监控以及传统报表。
如果不能,两者如何共存?

参与20

2同行回答

pysx0503pysx0503系统工程师第十区。散人
我理解的大数据平台和数仓报表平台应该并不是一个升级替代的关系。大数据平台是一个综合的系统。而数仓只是大数据中的一部分基础。如果吧大数据比喻成一辆车。那数仓应该算是车的发动机。提供大数据中所有需要的各种动力。正常的架构应该是所有的子系统数据通过ETL汇总...显示全部

我理解的大数据平台和数仓报表平台应该并不是一个升级替代的关系。大数据平台是一个综合的系统。而数仓只是大数据中的一部分基础。如果吧大数据比喻成一辆车。那数仓应该算是车的发动机。提供大数据中所有需要的各种动力。
正常的架构应该是所有的子系统数据通过ETL汇总到数仓中。请过清洗的数据在数仓中在进行分类整理,输出成为针对各个业务需要的数据集市,大数据平台应该是更宏观的展示数仓中产生分析出的各种数据。并根据这些现有的数据形成有针对性和预测性的数据报表。所以我觉得。并不会存在大数据平台取代数仓报表。

收起
系统集成 · 2020-04-01
浏览1914
zhuqibszhuqibs软件开发工程师Adidas
我的理解是两者的结合,非结构化数据建立的是以hive为基础的数仓,结构化数据建立的是以oracle为基础的数仓,然后数据分析平台从两个数仓分别etl取数据进行分析,然后出报表。当然数据源还有很多,可以从外面数据公司买数据的数据源,可以从spark或storm来的实时数据源,可以从elk提取...显示全部

我的理解是两者的结合,非结构化数据建立的是以hive为基础的数仓,结构化数据建立的是以oracle为基础的数仓,然后数据分析平台从两个数仓分别etl取数据进行分析,然后出报表。

当然数据源还有很多,可以从外面数据公司买数据的数据源,可以从spark或storm来的实时数据源,可以从elk提取过来应用或系统的日志数据源,等等。 这就要求你们公司有个强大的数据资产团队,能提取并整合所有的数据源,然后汇聚成自己的数据放置在hdfs上,供数据分析使用。

收起
互联网服务 · 2020-04-02
浏览1851

提问者

amu0722
CEO打毛党
擅长领域: 大数据商业智能数据库

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2020-03-25
  • 关注会员:3 人
  • 问题浏览:3241
  • 最近回答:2020-04-02
  • X社区推广