大数据(Big Data),是一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合。具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。...(more)
来自主题:Hadoop · 2019-12-30
浏览859
回答1
来自主题:大数据 · 2019-12-30
浏览901
回答1
来自主题:大数据 · 2019-12-30
浏览975
回答1
来自主题:hbase · 2019-12-25
priestNone 擅长领域:Redis, MySQL, 区块链
12 会员关注
若小文件的话(一般建议不超过10MB),是可以的,可以借助MOB特性实现反之,就算了
浏览2284
回答1
来自主题:hbase · 2019-12-25
priestNone 擅长领域:Redis, MySQL, 区块链
12 会员关注
首先,HBase是一个分布式数据库,而HDFS是一个分布式文件系统 其次,HBase中存储的海量数据记录比较小,一般在几百Bytes到KB级别,若将这些数据直接存储于文件系统,会产生大量的碎小文件,每个文件都会产生元信息,当小文件多了之后元信息也就多了,对namenode会造成压力,使得性能下降...(more)
浏览2054
回答1
来自主题:hbase · 2019-12-25
priestNone 擅长领域:Redis, MySQL, 区块链
12 会员关注
通常用得较多的场景:1、对象存储2、时空数据3、Feeds流4、 推荐画像、、、 一般来说:面向列的,容量大的数据都可以采用hbase存储
浏览1603
回答2
来自主题:hbase · 2019-12-25
空kong某单位 擅长领域:hbase
1 会员关注
相同点 1 、 HBase 和 Hive 都是架构在 Hadoop 之上,用 HDFS 做底层的数据存储,用 MapReduce 做数据计算 不同点 1 、 Hive 是建立在 Hadoop 之上为了降低 MapReduce 编程复杂度的 ETL 工具。 2 、 Hive 表是纯逻辑表,因为 Hive 的本身并不能做数据存储和计算,而是完全依赖 H...(more)
浏览1184
回答1
来自主题:hbase · 2019-12-24
空kong某单位 擅长领域:hbase
1 会员关注
HBase(Hadoop Database) ,一个高可靠性、高性能、面向列、可伸缩、 实时读写的分布式数据库。 ① 高并发,可扩展,解决海量数据集的随机实时增删改查② HBase 本质依然是 Key-Value 数据库,查询数据功能很简单,不支持 join 等复杂操作 ( 可通过 Hive 支持来实现多表 join 等...(more)
浏览568
回答1
来自主题:Redis · 2019-12-23
lxue某互联网公司 擅长领域:数据库, Redis, MongoDB
35 会员关注
String—— 字符串 String 数据结构是简单的 key-value 类型, value 不仅可以是 String ,也可以是数字(当数字类型用 Long 可以表示的时候 encoding 就是整型,其他都存储在 sdshdr 当做字符串)。使用 Strings 类型,可以完全实现目前 Memcached 的功能,并且效率更高。还可以享受...(more)
浏览1595
回答1
来自主题:Redis · 2019-12-23
priestNone 擅长领域:Redis, MySQL, 区块链
12 会员关注
分场景了:1、普通环境:最黄最暴力用keys命令2、线上环境: 猥琐点用scan命令
浏览909
回答2
来自主题:Redis · 2019-12-23
陈灿东日志易
1 会员关注
Redis内存回收机制主要体现在以下两个方面: 删除到达时间的键对象。 内存使用达到maxmemory上限时触发内存溢出控制策略。 1.删除过期键对象 Redis所有的键都可以设置过期属性,内部保存在过期字典中。由于进程内保存了大量的键,维护每个键精准的过期删除机制会导致消耗大...(more)
浏览886
回答1
来自主题:Redis · 2019-12-23
陈灿东日志易
1 会员关注
两种:AOF和RDBredis这个东西把全部数据都保存在内存中,因此一旦down机内存中的数据都会丢失,因此需要定时将内存中的数据进行保存,这个就是持久化,持久化的方式有两种,一种是直接将内存中的数据直接dump到本地RDB,另外一种 AOF是把redis执行过的命令进行备份,同样可以对数据进行...(more)
浏览910
回答1
来自主题:Redis · 2019-12-23
priestNone 擅长领域:Redis, MySQL, 区块链
12 会员关注
通常情况下,主要使用在以下场景中:1、缓存 - 应该是用得最多的2、分布式锁 - 高并发业务场景下3、社交网络 -  点赞、踩、关注、被关注及共同好友等,基于其哈希、集合等数据结构4、计数器、分布式会话 也会涉猎。。。...(more)
浏览922
回答1
来自主题:Redis · 2019-12-20
priestNone 擅长领域:Redis, MySQL, 区块链
12 会员关注
最重要的无非2点:1、 Redis既可以运行在内存中同时可以持久化到磁盘中2、 基于内存中的操作,Redis可以做很多内部复杂性很强的事情
浏览1431
回答2
来自主题:虚拟化 · 2019-12-18
liuyangccu平安银行
1 会员关注
这个看公司选择,一般情况都是部署在独立物理机,节点越多,算力越强。部署在虚拟机群一般两种情况,一种是试验用,类似做个poc测试用,另一种有超大规模虚拟机群,像阿里,人家的机群性能比物理机性能强太多了。个人经验,普通hadoop机群从十几台到几百台这个规模的,没听说哪家用虚拟机集...(more)
浏览1413
回答1
来自主题:微服务 · 2019-11-21
尘世随缘上海某互联网金融公司 擅长领域:微服务, 微服务拆分, 熔断
83 会员关注
如果希望前端无感知的分页,那就做预加载机制了,比如滑动到频幕 2/3的时候预先加载下页内容。
浏览1413
回答1