保险mapreduce

如何写Mapreduce程序?有哪些注意事项?

如何写Mapreduce程序?有哪些注意事项?显示全部

如何写Mapreduce程序?有哪些注意事项?

收起
参与4

返回美国队长的回答

美国队长美国队长研发工程师Alibaba

继承Mapper跟Reducer,可以用java python等语言去实现,编写的时候主要是要结合业务场景去分析,比如你要用mapreduce去实现两个文件的关联,你得考虑关联是否出现倾斜情况,程序中数据来源该怎么区分,为了防止出现jvm的OOM,实例化的对象如果不需要进行手动释放比如List类型加个=null 等,

互联网服务 · 2017-07-25
浏览1121

回答者

美国队长
研发工程师Alibaba
擅长领域: 大数据大数据平台数据库

美国队长 最近回答过的问题

回答状态

  • 发布时间:2017-07-25
  • 关注会员:2 人
  • 回答浏览:1121
  • X社区推广