spark on yarn的集群架构如何利用好内存和SSD

在spark on yarn的集群架构中,主要任务有:批量数据处理、交互式查询、流式计算和基于nosql的实时查询。然而spark对内存要求较高,nosql数据库同样对内存需求较大。
在这样的架构中内存如何分配、如何利用好SSD充分发挥集群的性能是我们最关心的问题,还请大家提出宝贵建议。
参与8

提问者

徐攀登
项目经理中国电信江西公司

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2015-06-04
  • 关注会员:1 人
  • 问题浏览:6097
  • 最近回答:2015-06-15
  • X社区推广