大数据存储
大数据存储
“大数据” 通常指的是那些数量巨大、难于收集、处理、分析的数据集,亦指那些在传统基础设施中长期保存的数据。大数据存储是指大数据的存储问题。
“大数据” 通常指的是那些数量巨大、难于收集、处理、分析的数据集,亦指那些在传统基础设施中长期保存的数据。大数据存储是指大数据的存储问题。

热点

分布式存储·2020-05-06
zhuqibs · Adidas 擅长领域:云计算, 服务器, 存储
58 会员关注
一、集中存储结构说到分布式存储,我们先来看一下传统的存储是怎么个样子。传统的存储也称为集中式存储,从概念上可以看出来是具有集中性的,也就是整个存储是集中在一个系统中的,但集中式存储并不是一个单独的设备,是集中在一套系统当中的多个设备,比如下图中的EMC存储就需要几...(more)
浏览6767
评论5
分布式存储·2020-03-03
eric · 某金融单位 擅长领域:云计算, 服务器, 私有云
1048 会员关注
收藏17
评价7
金币10
保险分布式存储·2019-04-25
Steven课题专家组 · steven 擅长领域:云计算, 容器, 容器云
76 会员关注
日志文件随着时间会是个很大的量,所以建议考虑统一的日志中心存储处理,可以用es等,备份到hdfs。配置文件在量上通常不是个问题,可以考虑配置中心统一管理,无需额外存储非结构化数据通常是大量的文件,可以采用传统nas或分布式对象存储,当然资金充裕可以采购好的存储,存储性能很重...
银行hbase·2019-12-25
Luga Lee · None 擅长领域:云计算, 容器, 容器云
44 会员关注
通常用得较多的场景:1、对象存储2、时空数据3、Feeds流4、 推荐画像、、、一般来说:面向列的,容量大的数据都可以采用hbase存储
银行银行文件存储·2019-04-25
byethen · CMBC 擅长领域:存储, 灾备, 服务器
585 会员关注
昨日夜里无事,又针对这一问题思考了下,个人愚见,欢迎各位拍砖!票据影像是交易中的重要凭证,针对票据影像的业务特点,对大规模的票据影像数据存储系统,我总结了下,总共大致是有这么四个需求:1、既要保证海量小文件的高速录入、查询,又可以提供大文件的性能保证;2、票据影像的数据量未...
软件开发数据库选型·2019-06-13
shangguanhaiyi · ustc 擅长领域:数据库, 数据库系统改造, 关系型数据库
9 会员关注
做地市级大数据项目,有能力的是不是上大数据平台,Hadoop平台上面 hbase ,hive 都会用到,结构化数据库推荐用mysql系数据库,成本最小。考虑后期mysql可能闭源,还有MariaDB.oracle,mysql 是结构化数据库mongodb,hbase 是key-value 数据库,非机构化数据库。...
分布式存储·2019-06-03
fanyqing课题专家组 · 厦门银行 擅长领域:分布式系统, 服务器, 数据库
41 会员关注
摘要:随着数字化转型的深入,海量数据对存储提出了新的要求。传统存储虽然有技术成熟、性能良好、可用性高等优点,但面对海量数据,其缺点也越来越明显:如扩展性差、成本高等。为了克服上述缺点,满足海量数据的存储需求,市场上出现了分布式存储技术。分布式存储系统,通常包括主控服...(more)
浏览14155
评论2
银行分布式存储·2019-04-19
wanggeng · 某银行 擅长领域:服务器, 存储, 数据库
314 会员关注
Hadoop HDFS(大数据分布式文件系统)Hadoop分布式文件系统(HDFS)是一个分布式文件系统,适用于商用硬件上高数据吞吐量对大数据集的访问的需求。该系统仿效了谷歌文件系统(GFS),数据在相同节点上以复制的方式进行存储以实现将数据合并计算的目的。该系统的主要设计目标包括:容...
分布式存储·2019-04-29
Garyy · 某保险 擅长领域:云计算, 存储, 容器
511 会员关注
前言:物联网(IoT)的蓬勃发展推动了结构化/非结构化数据的空前增长,不仅给企业带来了发掘新客户、创造新收入来源的巨大机会。也给企业传统存储架构带来了很大的挑战,具体表现:1)弹性扩展能力差,扩容成本高2)运维管理复杂,对运维人员技术能力要求高3)多种异构存储之间易形成资源孤...(more)
专栏: 活动总结
浏览8171
银行数据安全·2019-04-26
sdtimothy8 · 浪潮商用机器有限公司 擅长领域:存储, 灾备, 分布式系统
1 会员关注
答:1)银行影像存储属于海量小文件存储的应用场景,对象存储再合适不过。与传统的NAS存储相比,分布式对象存储具备更好的弹性扩展能力,用户可以根据业务增长弹性扩容,同时性能可以随容量线性增长;此外,对象存储采用去中心化架构,无元数据瓶颈,扁平命名空间,无“目录树”瓶颈,可有效提升...

描述

“大数据” 通常指的是那些数量巨大、难于收集、处理、分析的数据集,亦指那些在传统基础设施中长期保存的数据。大数据存储是指大数据的存储问题。
“大数据” 通常指的是那些数量巨大、难于收集、处理、分析的数据集,亦指那些在传统基础设施中长期保存的数据。大数据存储是指大数据的存储问题。
X社区推广
  • 提问题