请问一下,在内存计算的使用上,大家都采用什么模式呢?

1、、在内存计算这方面,请问一下大家使用Spark Standalone模式,还是On Yarn模式呢?或者使用其他什么模式?2、使用Hive on Spark 较多呢?还是直接使用Spark SQL直接处理问题呢?显示全部

1、、在内存计算这方面,请问一下大家使用Spark Standalone模式,还是On Yarn模式呢?或者使用其他什么模式?
2、使用Hive on Spark 较多呢?还是直接使用Spark SQL直接处理问题呢?

收起
参与14

查看其它 1 个回答美国队长的回答

美国队长美国队长研发工程师Alibaba

spark on yarn 因为目前而言yarn在资源管理方面还是能够接受的,虽然也或多或少有些问题

hive on spark 跟spark sql,都是基于spark引擎来做数据计算的,hive on spark多了一层hive解析,而spark sql直接利用spark框架进行分析计算

互联网服务 · 2017-07-04
浏览2440

回答者

美国队长
研发工程师Alibaba
擅长领域: 大数据大数据平台数据库

美国队长 最近回答过的问题

回答状态

  • 发布时间:2017-07-04
  • 关注会员:4 人
  • 回答浏览:2440
  • X社区推广