数据湖与大数据平台的区别?

目前使用较多的是基于hadoop的大数据平台。主流lamdba,kappa架构与数据湖相比在需求、技术、业务领域有什么区别?什么情况下需要将大数据平台改造为数据湖

参与3

1同行回答

xclu_csdcxclu_csdc软件开发工程师csdc
个人认为数据湖和大数据平台并没有本质的区别,仅是概念上的不同,都是为解决企业面临的海量结构化和非结构化数据存储、治理和使用等问题,所使用的技术栈也基本类似。上述提到的lamdba和kappa架构是具体的一种实时数据处理技术,范围更小,是数据湖中的一个子集。个人认为不需要...显示全部

个人认为数据湖和大数据平台并没有本质的区别,仅是概念上的不同,都是为解决企业面临的海量结构化和非结构化数据存储、治理和使用等问题,所使用的技术栈也基本类似。上述提到的lamdba和kappa架构是具体的一种实时数据处理技术,范围更小,是数据湖中的一个子集。个人认为不需要关注过于关注概念,更应该关注企业的业务场景,使用大数据平台或数据湖等等概念均可以,只要解决了业务问题即可。

收起
软件开发 · 2020-05-19
浏览3204

提问者

冰玉
数据库开发工程师上海海典

问题来自

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2020-05-13
  • 关注会员:2 人
  • 问题浏览:3796
  • 最近回答:2020-05-19
  • X社区推广