现有小文件,数量几亿甚至上百亿,目录深度较深,数据量大概是100TB。不知道采用哪种存储架构存储比较合适,还得要考虑备份。
对象存储,华为 oceanstor 9000 你可以关注看看看,不是打广告啊
s3 对象存储
要不然考虑一下便宜的解决方案,用群晖NAS试试,10万元就可以买2套了!
可以用分布式对象存储,开源的ceph就可以实现这些要求。
对象存储,好用,还不用考虑备份的问题。
这样的规模和数据,肯定需要分布式存储结构。
目前太深会导致查找的性能不好,是不建议的,建议在三级以内。
在存储介质方面,100T空间容易存储,使用磁盘就可以了,如果对性能有要求就可以通过cache机制,基于SSD或内存来提高性能。
备份方面,使用同样的存储架构,根据容灾要求,存储两个和三个副本,同时考虑异地的情况。
对象存储无疑了,大家都在用开源的ceph还是用商业的对象存储解决方案?可以推荐几个做对象存储性价比高的厂商吗?
关于TWT使用指南社区专家合作厂商入驻社区企业招聘投诉建议版权与免责声明联系我们 © 2024talkwithtrend — talk with trend,talk with technologist京ICP备09031017号-30