传统ETL ,Mapreduce,Hive,Spark等处理数据文件的应用场景都有哪些?

传统ETL ,Mapreduce,Hive,Spark等处理数据文件的应用场景都有哪些?显示全部

传统ETL ,Mapreduce,Hive,Spark等处理数据文件的应用场景都有哪些?

收起
参与12

查看其它 1 个回答rainforc的回答

rainforcrainforc研发工程师欢聚时代 alibaba

楼上说的比较清楚了,我再补充一些,hive其底层也是转化为mapreduce运行,对于使用者而言用sql代替写mapreduce,方便很多,但是同时也会失去一些灵活性,而spark主要基于内存运算,如果机器内存足够,使用spark能够更加快捷,应用场景比如比如实时推荐、聚类分析等等。

互联网服务 · 2017-07-07
浏览3684

回答者

rainforc
研发工程师欢聚时代 alibaba

rainforc 最近回答过的问题

回答状态

  • 发布时间:2017-07-07
  • 关注会员:5 人
  • 回答浏览:3684
  • X社区推广