互联网服务数据库

hadoop资源分布问题

Hadoop是如何保证集群中的各个主机上的资源使用的均衡的显示全部

Hadoop是如何保证集群中的各个主机上的资源使用的均衡的

收起
参与12

查看其它 2 个回答humidy的回答

humidyhumidy信息分析/架构师某公司

如果是1.0的版本,数据分配不均,每天可以手动通过数据平衡命令来实现数据平衡,资源,因为1.0主要是分配map和reduce的槽位slot,所以根据硬件不一样,更改slot数目可以缓解不平衡的影响。如果是在2.0在yarn中,我们可以更改配置文件中设置不同配置的容器container总数目来缓解这种不平衡。

电信运营商 · 2016-04-18
浏览1360

回答者

humidy
信息分析/架构师某公司
擅长领域: 大数据商业智能数据库

humidy 最近回答过的问题

回答状态

  • 发布时间:2016-04-18
  • 关注会员:3 人
  • 回答浏览:1360
  • X社区推广