您好!我想请问一下cdh下的优化

您好!我们的集群是cdh管理的!请问hive,hdfs,yarn的优化一般从那些参数调整?如何调?麻烦给我们一个建议!谢谢!我们集群规模为40台2路6核,96内存,30t硬盘,rhel6.4 显示全部

您好!我们的集群是cdh管理的!请问hive,hdfs,yarn的优化一般从那些参数调整?如何调?麻烦给我们一个建议!谢谢!我们集群规模为40台2路6核,96内存,30t硬盘,rhel6.4

 
收起
参与8

查看其它 2 个回答尘世随缘的回答

尘世随缘尘世随缘技术总监上海某互联网金融公司
所有的优化总的大纲无非就是增加集群可用资源数量、增加Task的内存大小、增加RPC handler的数量,这只是大的方面,具体如何优化你看根据你的业务情况来优化。比如,只是MR计算或者HIVE计算,那么优化的重点是考核如何增加集群可用资源数。如果是为了查询,就是需要增加HBase的regionServer数量。
互联网服务 · 2015-08-21
浏览1417

回答者

尘世随缘
技术总监上海某互联网金融公司
擅长领域: 云计算云原生微服务

尘世随缘 最近回答过的问题

回答状态

  • 发布时间:2015-08-21
  • 关注会员:2 人
  • 回答浏览:1417
  • X社区推广