现有小文件,数量几亿甚至上百亿,目录深度较深,数据量大概是100TB,采用哪种存储架构存储比较合适?

现有小文件,数量几亿甚至上百亿,目录深度较深,数据量大概是100TB。
不知道采用哪种存储架构存储比较合适,还得要考虑备份。

参与58

17同行回答

chengg1112chengg1112  系统架构师 , 联泰信息
对象存储,华为 oceanstor 9000 你可以关注看看看,不是打广告啊显示全部

对象存储,华为 oceanstor 9000 你可以关注看看看,不是打广告啊

收起
系统集成 · 2022-10-09
浏览1033
梦奇梦奇  研究学者 , 某银行
s3  对象存储显示全部

s3  对象存储

收起
文化教育其它 · 2022-09-19
浏览1101
瑞少爷瑞少爷  销售管理 , Synology 群晖
要不然考虑一下便宜的解决方案,用群晖NAS试试,10万元就可以买2套了!显示全部

要不然考虑一下便宜的解决方案,用群晖NAS试试,10万元就可以买2套了!

收起
IT分销/经销 · 2021-06-18
浏览2908
wzpystcdcwzpystcdc  研发工程师 , 某公司
可以用分布式对象存储,开源的ceph就可以实现这些要求。显示全部

可以用分布式对象存储,开源的ceph就可以实现这些要求。

收起
硬件生产 · 2021-02-20
浏览3557
tang237294066tang237294066  存储架构师 , 某保险公司
对象存储,好用,还不用考虑备份的问题。显示全部

对象存储,好用,还不用考虑备份的问题。

收起
保险 · 2019-08-07
浏览4081
匿名用户匿名用户
这样的规模和数据,肯定需要分布式存储结构。目前太深会导致查找的性能不好,是不建议的,建议在三级以内。在存储介质方面,100T空间容易存储,使用磁盘就可以了,如果对性能有要求就可以通过cache机制,基于SSD或内存来提高性能。备份方面,使用同样的存储架构,根据容灾要求,存储两个和三...显示全部

这样的规模和数据,肯定需要分布式存储结构。

目前太深会导致查找的性能不好,是不建议的,建议在三级以内。

在存储介质方面,100T空间容易存储,使用磁盘就可以了,如果对性能有要求就可以通过cache机制,基于SSD或内存来提高性能。

备份方面,使用同样的存储架构,根据容灾要求,存储两个和三个副本,同时考虑异地的情况。

收起
互联网服务 · 2019-07-12
浏览3466
Senko leeSenko lee  系统架构师 , 江西裕民银行
对象存储无疑了,大家都在用开源的ceph还是用商业的对象存储解决方案?可以推荐几个做对象存储性价比高的厂商吗?显示全部

对象存储无疑了,大家都在用开源的ceph还是用商业的对象存储解决方案?可以推荐几个做对象存储性价比高的厂商吗?

收起
银行 · 2019-07-11
浏览3324

提问者

colins
colins0411
系统工程师金融行业
擅长领域: 服务器存储灾备

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2019-07-10
  • 关注会员:19 人
  • 问题浏览:19014
  • 最近回答:2022-12-09
  • X社区推广