注册登录
提 问
English中文版
IT其它存储hdfs分布式存储mapreduce

分布式存储HDFS上Mapreduce的问题？

早些年的时候，了解到HDFS的Mapreduce会消耗太多资源且效率不高，后来接触到MapR专门研发了一套软件去解决这类调度问题……
现阶段的HDFS的Mapreduce还存在这种问题吗？有没有这块做的比较核实的解决方案？

关注2
评论
参与4

1同行回答
|
按赞同排序
按时间排序

zftangzftang其它小白一枚
HDFS的Mapreduce确实会消耗太多资源显示全部

HDFS的Mapreduce确实会消耗太多资源

收起
互联网服务 · 2023-03-02
浏览378
查看赞同的人
评论

问题来自

  • 活动 - 存储系统性能分析与优化难点问题在线探讨

    • 相关问题

  • 大数据平台容器化混合部署，扩容弹性较云化+分布式存储相比的优势和提升在什么地方 ?
  • 分布式对象存储需要做raid吗？
  • 金融行业里，采用PG或其他信创数据库替换Oracle时存储、备份有什么注意事项?大家都选择了哪些厂商？
  • 三甲医院PACS影像存储如何分层选型？
  • 存储能安装杀毒软件吗？

    • 相关资料

  • 成就存储专家之路：存储从入门到精通
  • 网络、网络安全、服务器和存储系统集成【系统集成方案】
  • 存储基础知识
  • 存储系统基础知识介绍
  • 《迈向YB数据时代》2022冬季刊之——【趋势动态】议题2：下一个十年，存储在信创方面的发展将何去何从？

    • 相关文章

  • 年出院人次10万+三甲医院基于分布式存储建设病案无纸化系统实践分享
  • 城商行10亿级以上影像数据平台基于分布式对象存储方案架构设计及实践
  • 某银行年增100TB影像数据平台基于分布式存储实现数据长期保存实践
  • 主流分布式存储技术对比分析
  • 金融机构数字化转型背景下，集中式与分布式存储选型之辨和未来之路

    • 问题状态

  • 发布时间：2021-08-25
  • 关注会员：2 人
  • 问题浏览：1112
  • 最近回答：2023-03-02

    • 关于TWT使用指南社区专家合作厂商入驻社区企业招聘投诉建议版权与免责声明联系我们
    © 2024talkwithtrend — talk with trend,talk with technologist京ICP备09031017号-30

    X社区推广