1.什么是Hbase？HBase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，目标是存储并处理大型的数据。HBase是GoogleBigtable的开源实现，不同之处在于：GoogleBigtable使用GFS作为其文件存储系统，HBase利用HadoopHDFS作为其文件存储系统；GoogleBigtable利用Chubby作为协...(more)

1、背景银行业是一个数据密集型行业，也是一个数据驱动的行业，数据一直是银行信息化发展的主题词。而今，在互联网金融时代，伴随着商业银行经营转型的持续深入，各家银行对大数据应用的需求日益多元化，迫切希望借助大数据应用，践行以金融科技赋能业务创新及服务体验升级。建设银行...(more)

一、项目建设背景随着大数据、云计算、移动互联迅速发展，快速交付与灵活扩展的强烈需求增长，传统竖井式的IT基础架构设施面临着新的挑战。一方面快速增长的互联网业务需要灵活的、可自由伸缩、不限于规格容量的存储的IT软硬件资源提供坚实基础保障，另一方面高效的业务响应同...(more)

HBase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，适用于结构化的存储，底层依赖于Hadoop的HDFS，利用HBase技术可在廉价PCServer上搭建起大规模结构化存储集群。因此HBase被广泛使用在大数据存储的解决方案中。为何使用HBaseHBase的优点：列可以动态增加，并且列为...(more)

一、hadoop生态图：二、hadoop家族子项目：三、hadoop框架：1、Namenode： 1）HDFS的守护程序 2） 纪录文件是如何分割成数据块的，以及这些数据块被存储到哪些节点上 3）对内存和I/O进行集中管理 4）namenode 是个单点，发生故障将使集群崩溃2、Secondary Namenode: 1）监控HDFS状态...(more)

今日，谷歌宣布与App Scale合作，开放App Engine应用程序，将允许App Engine上的应用程序不经修改即可在其他云服务器或公司的数据中心和服务器上运行。据科技博客TechCrunch报道，周二谷歌推出了新款高性能NoSQL数据库Cloud Bigtable。　　Cloud Bigtable是基于谷歌Bigtable数据...(more)

本文要给大家分享的是我们如何去构建一个日志系统、用到了那些技术、为什么用这些技术，同时会讲述这个过程中遇到的问题及优化方法，希望能给你在实践中能够提供一些参考。前言最近在维护一个有关于日志的项目，这个项目是负责收集、处理、存储、查询京东卖家相关操作的日志，我...(more)

时代在变迁，市场在变化，周边的软硬件环境也突飞猛进般的发展，同时企业的业务需求也不断升级，从规模到成本都有较高的要求，这刺激Hadoop生态圈的变革。据AMR研究显示，到2020年Hadoop将拥有502亿美元市场。如此多金诱惑下，各大解决方案提供商对Hadoop生态圈的发力可谓是越来越快，顺...(more)

前篇：Hbase技术细节笔记（上）四、RegionServer的故障恢复我们知道，RegionServer的相关信息保存在ZK中，在RegionServer启动的时候，会在Zookeeper中创建对应的临时节点。RegionServer通过Socket和Zookeeper建立session会话，RegionServer会周期性地向Zookeeper发送ping消息包，以此说...(more)

活动简介 随着DT时代的到来，传统企业、互联网公司产生的数据量越来越大，每天会产生上百G数据量。企业也开始使用hadoop来处理和存储如此庞大的数据。然而搭建集群很简单，但是如何让“大象”能快速的跑起来，...(more)