传文件到hdfs上效率为何很慢?

在eclipse上安装hadoop插件,直接上传文件到hdfs上 效率这么很慢,怎么高速上传,求指教显示全部
在eclipse上安装hadoop插件,直接上传文件到hdfs上 效率这么很慢,怎么高速上传,求指教收起
参与6

查看其它 2 个回答尘世随缘的回答

尘世随缘尘世随缘技术总监上海某互联网金融公司
eclipse上的hadoop插件的用途是用来做开发和调试使用,如果在eclipse上去调优上传的速度这个没有任何实际意义。
现实生产环境中,如果希望调优上传的速度,可以从以下几个方面考虑问题:
1、网络:交换机调整为万兆交换机
2、网络:各服务器尽可能保证在同一个网段
3、硬件:服务器的硬盘跟换为转速更快的硬盘
互联网服务 · 2015-05-15
浏览981

回答者

尘世随缘
技术总监上海某互联网金融公司
擅长领域: 云计算云原生微服务

尘世随缘 最近回答过的问题

回答状态

  • 发布时间:2015-05-15
  • 关注会员:1 人
  • 回答浏览:981
  • X社区推广