对于海量小文件存储,有什么推荐的分布式存储系统?

对于海量小文件存储,有什么推荐的分布式存储系统?请分别针对读写均衡,读多写少,付少写多三种场景

参与8

2同行回答

wangshuai_gowangshuai_go存储工程师证券
推荐采用分布式对象存储俩存储海量小文件。对象存储的出现就是为了解决海量文件的存储问题,其存储结构key-value 方式的扁平价格,metadata 可以做的非常大,存储海量小文件比NAS存储更合适。...显示全部

推荐采用分布式对象存储俩存储海量小文件。对象存储的出现就是为了解决海量文件的存储问题,其存储结构key-value 方式的扁平价格,metadata 可以做的非常大,存储海量小文件比NAS存储更合适。

收起
证券 · 2018-02-08
浏览3767
david0405david0405架构师东方证券
海量小文件的主要问题是文件目录索引问题。不管你读写比多少,一亿个文件的元数据处理就能干趴下所有存储。分布式存储天然地解决了这个索引问题,但是其本身的读写能力并不突出。不同配置架构下,性能大相迥异。读多场景就配大缓存和SSD,写多场景就上Nvme闪存卡和后端infiband...显示全部

海量小文件的主要问题是文件目录索引问题。不管你读写比多少,一亿个文件的元数据处理就能干趴下所有存储。分布式存储天然地解决了这个索引问题,但是其本身的读写能力并不突出。不同配置架构下,性能大相迥异。读多场景就配大缓存和SSD,写多场景就上Nvme闪存卡和后端infiband网络。

收起
证券 · 2018-02-09
浏览3768

提问者

wykkx
wykkx0412
系统架构师某基金公司
擅长领域: 云计算容器系统运维

问题来自

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2018-02-08
  • 关注会员:3 人
  • 问题浏览:6455
  • 最近回答:2018-02-09
  • X社区推广