通信、电商行业的大数据浪潮中Hadoop扮演的角色 - twt企业IT交流平台 - talkwithtrend，企业IT技术社区，帮助您融入同行！

通信、电商行业的大数据浪潮中Hadoop扮演的角色

: 美国队长研发工程师Alibaba
关注512
个人主页
Ta的精彩回答
SQL on Hadoop在不同场景下的应用？
1。Hive，hbase2.离线数据的处理，hbase中存储keyvalue的形式如根据时间查询交易记录以及...1赞同
选择Hadoop作为大数据解决方案时的考虑有哪些？
选择hadoop作为大数据解决方案的时候主要要考虑你的业务场景是离线还是实时，是打算写MR...5赞同
对SQL-For-Hadoop有什么样的期待？
期待当然是花最少的成本解决最大的问题，哈哈，现在hive使用的还是比较成熟的，有条件的公司...0赞同
在实施Hadoop项目的时候，最大的担心和顾虑是什么？
做过实施的人都知道，最担心的是项目在现有的环境运行的很好一旦到了一个新的集群就表现...1赞同
对于监控告警等平台，使用原生Hadoop的公司如何解决？
可以通过对hadoop内部原理的理解，对部分方法执行的参数进行获取保存到内存中或者进行持...0赞同
实施Hadoop的项目后续升级上一般是如何处理的？
谈到升级比如要先备份之前的东东hadoop中升级1.先备份集群节点namenode中fsimage跟edi...6赞同
实时数据处理一般的架构形式，传统运营商的处理方式与电商行业有何区别？
运营商，Kafaka+redis(memcache)+storm(spark) 电商，Kafaka+redis+storm+Hba...5赞同
数据引擎分析，hadoop和spark 如何选择？
理论上是数据量大，spark并不是很合适，另外你讲的20TB的数据MR处理shuffle是个硬伤，这个可...1赞同
mapreduce适用于数据量比较大这个跟其底层的实现有关因为他并不是完全依赖于内存，而spa...7赞同
离线数据处理中，hadoop相比传统的数据库有哪些优势？
大数据的处理一般设计单表某些字段的处理，或者多表的操作，在纯粹的单表而言，如果数据量是...6赞同
不同的应用场景如何选用不同的hadoop的生态圈成员？
这个问题貌似跟您这个问题http://www.db2china.net/Question/66827有重复的地方...0赞同
hadoop在实际应用最常见的问题有哪些？
1.注意事项从安装开始考虑你的集群分布，需要处理的数据量，去决定你安装hadoop的时候配置...1赞同
hadoop在电信行业中，如何隔离用户，保证一个用户只能自己权限范围内的文件
这个问题是不区分电信还是互联网行业的，首先要在你的hadoop配置文件中配置了hdfs权限，如...5赞同
为什么说hadoop在电信行业中占据了非常高的地位
谁都想花最少的钱干最nb的事情，哈哈1赞同
微博数据分析数据存储方案选择
考虑数据分析存储=分析+存储，存储的高效必然会给后面的分析带来便利，还得先分析你一下你...0赞同
如果大数据可以完美处理所有应用场景，是不是可以用大数据造就真正的思维机器人
复仇者联盟2：奥创看过吗？2赞同

: 尘世随缘技术总监上海某互联网金融公司
关注86
个人主页
Ta的精彩回答
在Hadoop的版本选择上有什么考量？
各有千秋，如果预算充足，可以购买商业版本，毕竟他提供了更方便的部署、维护。如果预算有限...2赞同
离线数据处理中，hadoop相比传统的数据库有哪些优势？
hadoop和传统的数据库没什么直接的联系，hadoop用来分布式存储，并提供分布式计算的框架。...0赞同
不同的应用场景如何选用不同的hadoop的生态圈成员？
这个得看你具体的业务了，总之hadoop是必须选择的，其次是如果是要实时查询就要用HBase了...0赞同
微博数据分析数据存储方案选择
微博的话，最佳解决方案就是HBase+Redis来结合。HBase存放微博的中的互动数据，比如留言，图...0赞同
大量小文件存储，如何选择存储方案？Hbase，Mongodb，阵列那个合适？
第一：你所谓的小文件是指多大的文件呢？一个10M，5M还是？多少？如果是类似百度文库一样的文件，...1赞同

: humidy信息分析/架构师某公司
Do It ，Do Best！
关注113
个人主页
Ta的精彩回答
在实施Hadoop项目的时候，最大的担心和顾虑是什么？
我觉得首先是架构方面，你引入开源大数据技术的动力需要明确，这建立在你对现有的IT系统的...1赞同
对于监控告警等平台，使用原生Hadoop的公司如何解决？
我觉得几个层面，主机和资源层面，我们可以利用成熟的集群监控软件，如ganglia、对Hadoop的...1赞同

在本场活动提问

活动明星榜

研发工程师Alibaba

本场活动获赞 44

系统架构师芒果TV

本场活动获赞 13

软件架构设计师cm

本场活动获赞 5

尘世随缘0210

技术总监上海某互联网金融公司

本场活动获赞 4

软件开发工程师东方国信

本场活动获赞 3

项目经理某金融机构

本场活动获赞 2

信息分析/架构师某公司

本场活动获赞 2

关于TWT 使用指南社区专家合作厂商入驻社区企业招聘投诉建议版权与免责声明联系我们
© 2024talkwithtrend — talk with trend,talk with technologist 京ICP备09031017号-30

X社区推广