海量小文件的主要问题是文件目录索引问题。不管你读写比多少,一亿个文件的元数据处理就能干趴下所有存储。分布式存储天然地解决了这个索引问题,但是其本身的读写能力并不突出。不同配置架构下,性能大相迥异。读多场景就配大缓存和SSD,写多场景就上Nvme闪存卡和后端infiband...
显示全部海量小文件的主要问题是文件目录索引问题。不管你读写比多少,一亿个文件的元数据处理就能干趴下所有存储。分布式存储天然地解决了这个索引问题,但是其本身的读写能力并不突出。不同配置架构下,性能大相迥异。读多场景就配大缓存和SSD,写多场景就上Nvme闪存卡和后端infiband网络。
收起