Hadoop入门及常见应用问题探讨 - twt企业IT交流平台 - talkwithtrend，企业IT技术社区，帮助您融入同行！

Hadoop入门及常见应用问题探讨

: 美国队长研发工程师Alibaba
关注511
个人主页
Ta的精彩回答
Mapreduce跟手动编写多进程的并发处理文件程序的区别有哪些？
Mapreduce底层帮我们已经封装了多并发访问资源造成比如死锁，数据的不一致，资源的利用等...0赞同
常用Mapreduce进行数据处理的场景包括哪些？
1.文件统计行数2.抽取文件中每行特定的字符3.对结构化文件的特定字段进行排序4.文件之...0赞同
如何写Mapreduce程序？有哪些注意事项？
继承Mapper跟Reducer，可以用java python等语言去实现，编写的时候主要是要结合业务场景去...1赞同
Hdfs的常用命令集有哪些？
分为对hdfs上文件的操作命令，比如创建文件-mkdir ,删除文件 -rmr 给文件赋予权限 -chm...1赞同
应该如何学习Hadoop？学习路径应该如何规划？
先学习java，再学习linux相关命令，接着尝试搭建hadoop环境，利用java写Mapreduce，接着去阅读...2赞同
在学习Hadoop的过程中，有哪些可利用的资源？
培训机构的一些视频，还有一些hadoop相关的书籍，当然最重要的还是自己动手去写！...2赞同
在Hadoop使用中，应该如何诊断和分析故障？
对于新手而言，可以从hadoop区分为hdfs mapreduce两块去对异常进行分类，然后可以百度看一...1赞同
政务云大数据平台需要具备什么能力？
政务云上无论是从数据量跟数据安全方面都是其他行业无法比拟的，作为一个集中的数据平台...1赞同
现在是一枚dba，请问如何学hadoop等大数据产品？
之前学的数据库相关的知识在大数据中也是有用的，因为hadoop等大数据产品也有一些设计思...1赞同
如果是零it基础，请问如何学习hadoop等大数据技术、产品？
建议你先学习一下编程语言先入计算机行业的门，然后再去学习大数据相关的处理框架...1赞同
大家有没有spark好用的性能分析工具推荐？
我一般用spark如果出现性能上的问题，会先从硬件资源包括cpu ，内存，进程数，driver大小等，然...0赞同
sqoop能导入hbase64格式数据吗？
这个涉及sqoop具体怎么使用，网上很多，但是我建议你可以下载一个工具叫datax的，你网上搜一...2赞同
hbase在做count时，一个hadoop的datanode节点出现网卡假死
你这个问题造成的原因很多，我觉得最大的可能是节点之间网络连接超时，但是用hbase进行数...0赞同
Hbase数据库中rowkey有可能引起热点问题，大家怎么解决的？
引起热点的原因是你的时间可能按照比如2017xxx开头的，那只能按照顺序存储了，你可以将时...0赞同
想访问hbase,是不是集群里面所有节点都要安装zk？
hbase自己就有zk，但是大多数人还是另外安装了zk，zk的目的是监控节点心跳以及对于hbase而...0赞同
出现partition revoke是什么原因造成的？
请问你代码具体做了什么操作，另外partition你用了指定了几个...0赞同
大家都是在什么机缘巧合下接触的hadoop等大数据产品？
我第一次写Mapreduce也就是接触大数据的时候，是在华为给xx移动公司统计一下用户的消费...0赞同
大家都是在什么业务场景下使用的hadoop等大数据产品？
数据量比较大，对数据处理的时效性有要求0赞同
如何学习hadoop？
市面上再好的教材也没有自己动手去写，我建议你看学习视频，然后找例子去模仿，然后去了解例...0赞同

在本场活动提问

活动明星榜

研发工程师Alibaba

本场活动获赞 12

系统工程师第十区。散人

本场活动获赞 11

星星峡的风017

技术支持工程师福建新大陆软件有限公司

本场活动获赞 8

其它undefined

本场活动获赞 4

系统架构师某证券

本场活动获赞 3

系统工程师信息产业

本场活动获赞 3

项目经理新浪云计算

本场活动获赞 1

其它菠萝

本场活动获赞 1

y18511664518028

技术总监长城超云

本场活动获赞 1

关于TWT 使用指南社区专家合作厂商入驻社区企业招聘投诉建议版权与免责声明联系我们
© 2024talkwithtrend — talk with trend,talk with technologist 京ICP备09031017号-30

X社区推广