IT咨询服务大数据平台

大数据平台可以按照什么方式分类?

大数据平台可以按照什么方式分类?

参与5

1同行回答

xuyyxuyy联盟成员数据架构师秦皇岛银行
1) 从大数据处理的过程来划分:包括数据存储、数据挖掘分析、以及为完成高效分析挖掘而设计的计算平台,它们完成数据采集、ETL、存储、结构化处理、挖掘、 分析、预测、应用等功能。 2) 从大数据处理的数据类型来划分:可以分为针对关系型数据、非关系型数据(图数据、文本数据...显示全部

1) 从大数据处理的过程来划分:包括数据存储、数据挖掘分析、以及为完成高效分析挖掘而设计的计算平台,它们完成数据采集、ETL、存储、结构化处理、挖掘、 分析、预测、应用等功能。
2) 从大数据处理的数据类型来划分:可以分为针对关系型数据、非关系型数据(图数据、文本数据、网络型数据等)、半结构化数据、混合类型数据处理的技术平台。
3) 从大数据处理的方式来划分:可以分为批量处理、实时处理、综合处理。其中批量数据是对成批数据进行一次性处理,而实时处理(流处理)对处理的延时有严格的要求,综合处理是指同时具备批量处理和实时处理两种方式。
4) 从平台对数据的部署方式看,可以分为基于内存的、基于磁盘的。前者在分布式系统内部的数据交换是在内存中进行,后者则是通过磁盘文件的方式。
此外,技术平台还有分布式、集中式之分,云环境和非云环境之分等。

收起
银行 · 2023-01-16
浏览381

ChatGPT 回答

大数据平台可以按照以下方式进行分类:

  1. 基础设施型大数据平台:这种平台主要提供大数据存储和处理的基础设施,包括分布式文件系统、分布式计算框架、数据仓库等。例如,Hadoop、Spark、Hive等。
  2. 应用型大数据平台:这种平台主要针对特定的应用场景,提供相应的数据处理和分析功能,例如,金融风控、电商推荐、医疗健康等。例如,Flink、Kafka、Elasticsearch等。
  3. 云服务型大数据平台:这种平台是基于云计算技术构建的,提供大数据存储、计算、分析等一系列服务,用户可以根据自身需求弹性地调整资源。例如,阿里云大数据平台、腾讯云大数据平台等。
  4. 数据治理型大数据平台:这种平台主要用于数据管理和治理,包括数据质量管理、数据安全管理、数据流程管理等。例如,Informatica、Talend等。
  5. 数据可视化型大数据平台:这种平台主要用于数据可视化和探索,提供直观的数据展示和分析功能,例如,Tableau、QlikView等。

以上是大数据平台的几种分类方式,不同的分类方式可以根据不同的需求和场景进行选择。

提问者

wangzimingsq88
软件开发工程师本钢矿业公司
擅长领域: 服务器数据库云计算

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2023-01-16
  • 关注会员:2 人
  • 问题浏览:946
  • 最近回答:2023-01-16
  • X社区推广