海量数据存储
海量数据存储
海量数据指的是数据量特别大的数据,TB级甚至PB级。海量数据存储指的是海量数据的存储技术。
海量数据指的是数据量特别大的数据,TB级甚至PB级。海量数据存储指的是海量数据的存储技术。

问题

保险海量数据存储·2023-02-28
twt大禹 · 大禹 擅长领域:数据库, 国产数据库, 数据库选型
1 会员关注
最基础的两道威胁是磁盘静默错误 和CPU静默错误,从这两项出发,传统数据库已经无法解决,无论是Mysql 、postgreSQL的魔改,还是某RocksDB、clickHouse集成的原生分布式都是解决不了。 前沿数控 这家企业的数据在国内某云厂商上全部丢失,就是最好的例证;能防御的貌似只有OB吧,...
保险存储·2023-02-03
Jerry Miku · The Global 500 擅长领域:存储, 备份, 灾备
169 会员关注
如果双录是新建,可以优先采用对象存储作为主存储,设置二级存储来归档冷数据。如果双录采用原传统架构的NAS或者块存储之类,需要二次优化,推荐参考本期海量数据优化章节的文章。
系统集成海量数据存储·2022-04-06
pysx0503 · 第十区。散人 擅长领域:存储, 备份, 服务器
743 会员关注
对蓝光光盘库的了解也不是很多。磁带在目前来看还是性价比和稳定性比较高的一种海量备份产品。确实比较适合归档使用。针对现在的信息化数据多样性,复杂性的备份容灾需求。建议通过一体机进行近线数据的备份,通过D2D2T来把进线的数据归档到磁带机或者光盘库中,来保证长久保...
保险Hadoop·2020-03-05
尘世随缘 · 上海某互联网金融公司 擅长领域:云计算, 云原生, 微服务
86 会员关注
hadoop的hdfs能做到了海量存储,但是实时检索是需要多久实时呢?如果是KV型的实时检索,那么可选择HBASE如果是ad-hoc需求,那么impala,prestore、driud都可以如果是应用服务的实时,那么ES可以考虑下。...
基金数据备份·2019-07-25
sxtycxx · 人工智能(计算机视觉) 擅长领域:存储, 灾备, 服务器
519 会员关注
数据量越来越大,如果是大数据项目,数据量越大,发挥的价值才会越大,此时就不能采用传统的备份技术来保障数据和业务的可靠性了,大数据架构底层均采用分布式架构1、前端业务,采用多台服务器并行计算(MR 、Spark、Storm等计算框架)2、底层数据采用多副本机制,副本之间实现自动的复制...
银行非结构化数据存储·2018-12-03
孟威 · IT 擅长领域:存储, 备份, 软件定义存储
45 会员关注
相对于传统存储,对象存储的海量非结构化数据的读取(索引)效率更高。对象存储的读取方式,首先每个对象在完全平展的一个平面上,不存在文件级、目录树的概念,所有多项都在一个层级,其次对象存储的访问是通过唯一的Object ID来完成访问的,而这个ID是一个由系统定义,可设置位数的,字母...
系统集成双活·2017-12-10
ZhuJun2014 · IBM 擅长领域:存储, 灾备, 双活
457 会员关注
双活通常跨两个站点,要求一个第3站点做仲裁角色。大于3个站点,也是基于2+1的部署原则进行拓扑规划。大数据量,又要考虑成本,那么还是要综合考虑站点间要传输的数据量,是基于存储层传输省钱,还是基于应用层传输省钱,需要结合实际情况进行细致的分析。并没有一个量化的数据可供参...
IT其它云存储·2017-11-28
ibmfuqiang · IBM 擅长领域:存储, 灾备, 分布式架构
125 会员关注
请参考IBM对象存储是是如何工作和加密的。Jietu20171129-150251.jpgJietu20171129-152847.jpg
银行区块链·2017-11-28
leizh1984 · IBM 擅长领域:服务器, 分布式系统, 区块链
406 会员关注
账本隔离的问题在下面连接中有部分回答。http://www.talkwithtrend.com/Question/407389海量数据的问题仍然是区块链落地大家最关注的课题之一。超级账本会在postv1版本中发布prune功能,并加入checkpoint机制用于缩小和控制账本大小。请参考下面链接中第四节http://hyperl...
银行NAS(网络附属存储)·2017-09-14
qq373793057课题专家组 · 某银行 擅长领域:存储, 灾备, 分布式系统
288 会员关注
个人认为,如何评价数据量级及选择存储类型的时候,建议考虑以下几个方面进行评估:1、从存储规模角度,评估数据的量级,即是否会达到PB或TB级,根据数据规模初步确定存储类型。2、从数据结构特征角度,要考量对象存储是否能够对具体应用系统的非结构化数据起到性能上的优化。3、从存...

描述

海量数据指的是数据量特别大的数据,TB级甚至PB级。海量数据存储指的是海量数据的存储技术。
海量数据指的是数据量特别大的数据,TB级甚至PB级。海量数据存储指的是海量数据的存储技术。
X社区推广
  • 提问题