hbase
hbase
Hbase是分布式、面向列的开源数据库(其实准确的说是面向列族)。HDFS为Hbase提供可靠的底层数据存储服务,MapReduce为Hbase提供高性能的计算能力,Zookeeper为Hbase提供稳定服务和Failover机制,因此我们说Hbase是一个通过大量廉价的机器解决海量数据的高速存储和读取的分布式数据库解决方案。...(more)
Hbase是分布式、面向列的开源数据库(其实准确的说是面向列族)。HDFS为Hbase提供可靠的底层数据存储服务,MapReduce为Hbase提供高性能的计算能力,Zookeeper为Hbase提供稳定服务和Failover机制,因此我们说Hbase是一个通过大量廉价的机器解决海量数据的高速存储和读取的分布式数据库解决方案。

问题

证券hbase·2018-10-18
sxtycxx · 人工智能(计算机视觉) 擅长领域:存储, 灾备, 服务器
519 会员关注
HBase适合与数据量非常大,容量达到TB级,数据达到亿量级的应用场景,才能发挥HBase的优势
保险数据库·2018-09-29
yinxin · 某金融机构 擅长领域:数据库, 服务器, 云计算
976 会员关注
Hbase的优缺点1 列的可以动态增加,并且列为空就不存储数据,节省存储空间.2 Hbase自动切分数据,使得数据存储自动具有水平scalability.3 Hbase可以提供高并发读写操作的支持Hbase的缺点:1 不能支持条件查询,只支持按照Row key来查询.2 暂时不能支持Master server的故障切换,当...
IT咨询服务安全·2018-01-15
cft18 · 中国电信集团系统集成有限责任公司 擅长领域:云计算, 存储, 容器
33 会员关注
你所要的信息属于大数据平台的运维管理。不只是关系到数据、算法、接口,还有人员的管理。
互联网服务大数据·2017-09-15
美国队长 · Alibaba 擅长领域:大数据, 大数据平台, 数据库
511 会员关注
hbase应该是被你用来做信息存储,基于hbase特性跟电力业务,你可以这样思考:你的采集信息是否可以从时间>地域>小区>个人等范围逐渐缩小的方式进行排列,主要了考虑hbase的region个数确认这样可以避免某个regionserver成为热点带来性能障碍,等你确认了维度范围之后,可以...
电信运营商集群·2017-07-26
wuwenpin · 南京 擅长领域:服务器, 存储, 云计算
256 会员关注
不需要所有节点都要安装ZK
银行hbase·2017-07-25
美国队长 · Alibaba 擅长领域:大数据, 大数据平台, 数据库
511 会员关注
引起热点的原因是你的时间可能按照比如2017xxx开头的,那只能按照顺序存储了,你可以将时间顺序倒过来试试
银行hbase·2017-07-25
美国队长 · Alibaba 擅长领域:大数据, 大数据平台, 数据库
511 会员关注
你这个问题造成的原因很多,我觉得最大的可能是节点之间网络连接超时,但是用hbase进行数据统计,你可以采用hbase的协处理器,每次做个累积,这样速度会快一些,
银行sqoop·2017-07-25
美国队长 · Alibaba 擅长领域:大数据, 大数据平台, 数据库
511 会员关注
这个涉及sqoop具体怎么使用,网上很多,但是我建议你可以下载一个工具叫datax的,你网上搜一下,是用来做异构数据库直接的同步的,速度很快,配置方面比sqoop方便很多
互联网服务大数据·2017-07-05
美国队长 · Alibaba 擅长领域:大数据, 大数据平台, 数据库
511 会员关注
可以从你的底层存储方式着手,比如你的30亿数据是否可以划分成3层,内存区,热存储区,冷数据区,新的数据过来,先放内存,然后后台进程自动对内存中的数据跟热区数据进行比对是否存在,设置数据降级机制,哪些数据可能用的比较少可以先从内存中降级到热存储区如果你想用hbase的话,建议你根...
银行nosql数据库·2017-06-29
美国队长 · Alibaba 擅长领域:大数据, 大数据平台, 数据库
511 会员关注
对应Redis而言,可以主从读写分开调整缓存大小访问并发大小Hbase这个就比较多了,从预先分配好region,到rowkey的设置,在到底层配置参数的调整等

描述

Hbase是分布式、面向列的开源数据库(其实准确的说是面向列族)。HDFS为Hbase提供可靠的底层数据存储服务,MapReduce为Hbase提供高性能的计算能力,Zookeeper为Hbase提供稳定服务和Failover机制,因此我们说Hbase是一个通过大量廉价的机器解决海量数据的高速存储和读取的分布式数据库解决方案。...(more)
Hbase是分布式、面向列的开源数据库(其实准确的说是面向列族)。HDFS为Hbase提供可靠的底层数据存储服务,MapReduce为Hbase提供高性能的计算能力,Zookeeper为Hbase提供稳定服务和Failover机制,因此我们说Hbase是一个通过大量廉价的机器解决海量数据的高速存储和读取的分布式数据库解决方案。
X社区推广
  • 提问题