OFweek物联网讯：云计算(cloud computing)，由位于网络上的一组服务器把其计算、存储、数据等资源以服务的形式提供给请求者以完成信息处理任务的方法和过程。在此过程中被服务者只是提供需求并获取服务结果，对于需求被服务的过程并不知情。同时服务者以最优利用的方式动态地...(more)

云端的大数据就像科幻小说里对未来的描绘一样：它在这，只是不是很均匀地分布罢了。    高调的厂商，比如AWS、谷歌、微软、IBM和Rackspace等，都提供云基础的Hadoop和NoSQL数据库平台来支持大数据应用程序。很多初创公司都引入了云平台上的管理服务，按需部署自己...(more)

如今Apache Hadoop已成为大数据行业发展背后的驱动力。Hive和Pig等技术也经常被提到，但是他们都有什么功能，为什么会需要奇怪的名字（如Oozie，ZooKeeper、Flume）。Hadoop带来了廉价的处理大数据（大数据的数据容量通常是10-100GB或更多，同时数据种类多种多样，包括结构化、非结构化...(more)

摘要：Hadoop让大数据分析走向了大众化，然而它的部署仍需耗费大量的人力和物力。在直奔Hadoop之前，是否已经将现有技术推向极限？这里总结了对Hadoop投资前可以尝试的10个替代方案，省时、省钱、省力，何乐而不为？让业务搭乘大数据技术确实是件非常有吸引力的事情，而Apache Hadoop让...(more)

Hadoop不再仅仅是一个时髦词，它已成为业务需求。数据总是大量涌入，但是在最近，我们可能已经在解锁这种指数级增长的数据。大数据分析中的现代技术提供了新的方法来识别和纠正故障、帮助数据挖掘、提供优化反馈，这些方法是无穷无尽的。现代的Hadoop生态系统不仅提供了可靠的分...(more)

时代在变迁，市场在变化，周边的软硬件环境也突飞猛进般的发展，同时企业的业务需求也不断升级，从规模到成本都有较高的要求，这刺激Hadoop生态圈的变革。据AMR研究显示，到2020年Hadoop将拥有502亿美元市场。如此多金诱惑下，各大解决方案提供商对Hadoop生态圈的发力可谓是越来越快，顺...(more)

美国大数据公司 Hortonworks 周一在官方网站宣布已收购SequenceIQ ，并称，此次收购增强了在公有云和私有云上自动化部署企业Hadoop的能力。此次交易预计在今年第二个季度结束，收购具体金额并未透露。Hortonworks表示，计划把SequenceIQ整合至Hortonworks Data Platform，最终的技...(more)

Apache Hadoop 简介Apache Hadoop 是一个开源软件框架，可安装在一个商用机器集群中，使机器可彼此通信并协同工作，以高度分布式的方式共同存储和处理大量数据。最初，Hadoop 包含以下两个主要组件：Hadoop Distributed File System (HDFS) 和一个分布式计算引擎，该引擎支持以 MapR...(more)

对于Hadoop集群我们会出现将数据节点移出做别的使用的操作。这个时候需要对磁盘中的数据做些删除，为了保证数据的安全，我们采用的策略如下。 第一步：先将相关Hadoop服务终止和下线数据节点，具体步骤可以参见《大数据解除节点步骤_20150408》 第二步：将数据清除，可以...(more)

了解云部署的范围Hadoop 系统是一个用起来颇有挑战性的环境，但由于云环境所具有的限制（与自由），云部署会引入额外的复杂性。例如，借助云中的 Hadoop，如何处理可变的集群规模与信息的有效分布？如何有效地扩大和收缩云环境，以便应付您期望处理的 Hadoop 负载？如何计划和控制任务与处...(more)