SAP近期发布的SAP HANA Service Pack 10（SPS10）对物联网进行了更好地集成，其中包括对Hadoop的增强支持。据介绍，针对SAP HANA平台的SPS10所提供的新功能可以帮助企业接入物联网，更有效的管理大数据，并能跨企业扩展数据可用性。Marie Goodell是SAP营销平台的负责人，她说此发布版...(more)

Hadoop是什么？为何它如此重要？Hadoop提供了一个用于存储大规模数据的开源平台。Hadoop是一个开放工具集，支持可变连接类型和数据结构。它开放给云环境中位于多个主机的分布式数据平台。简单地说，它是一种数据存储方式，支持使用多个平台和多个操作系统的多个计算机。它是一个Ap...(more)

编写者胡旻     版权所有 转载请注明 对于写过WordCount的MapReduce程序的同学来说。会感受到这是Hadoop中数据处理的低层次实现，实际上直接编写MapReduce程序只是Hadoop中数据处理的一种方式，而且其实用性比较有限。 Hive就是设计出来简化H...(more)

胡旻整理        转载请注明Hadoop生态系统系统组件在当前的Hadoop生态系统中： HDFS是主要的存储，在此之上，我们可以使用Snappy、RCFile、Parquet和ORCFile来优化存储。   Hadoop的MapReduce发布了2.0版本，在YARN上运行。有更好的...(more)

6月15日，IBM 宣布计划大规模投资 Spark 相关技术，此项声明会促使越来越多的工程师学习 Spark 技术，并且大量的企业也会采用 Spark 技术。Spark 投资的良性循环会使 Spark 技术发展更加成熟，并且可以从整个大数据环境中获益。然而，Spark 的快速增长给人们一个奇怪且固执的误解：S...(more)

编写：胡旻    版权所有 Hadoop是一个免费开源的分布式存储和计算平台。它被用来实现在商用硬件上以集群模式存储和计算海量数据。在过去的几年中，Hadoop成为了大数据项目的实时标准。接下来我们要讨论几个主题1.选择和规划Hadoop集群的硬件2.Hadoop版...(more)

本文综合了Hortonworks、Cloudera、MapR三家主要的Hadoop发行版供应商的Hadoop应用案例，真是各有神通，不服来辩。Cloudera：加速数据分析Edo Interactive是一家美国市场营销公司，帮助广告主连接线上广告和线下数据，提供数据驱动的个性化推荐服务。不过几年前，Edo遇到了这样的问...(more)

本文综合了Hortonworks、Cloudera、MapR三家主要的Hadoop发行版供应商的Hadoop应用案例，真是各有神通，不服来辩。Cloudera：加速数据分析Edo Interactive是一家美国市场营销公司，帮助广告主连接线上广告和线下数据，提供数据驱动的个性化推荐服务。不过几年前，Edo遇到了这样的问...(more)

Hadoop集群中有三种作业调度算法，分别为FIFO，公平调度算法和计算能力调度算法先来先服务（FIFO）Hadoop中默认的调度器FIFO，它先按照作业的优先级高低，再按照到达时间的先后选择被执行的作业。FIFO 比较简单，hadoop中只有一个作业队列，被提交的作业按照先后顺序在作业队列中排队，新...(more)

大数据的概念炒了好多年了，很显然这项技术经受住了时间的考验，不是有些人想的那样华而不实，多年来总是伴随着Hadoop的身影越发壮大。 这些年来数据的增长量真是发生了天翻地覆的变化，原来大家过年的时候都会很认真的拍一张全家福，恨不得把胶卷能够正反两用，多存点照片，现在好了，...(more)