分布式文件系统在存储海量非结构化数据时,其处理性能和应用程序有着密切的关联性,我们在建设和维护期间,需要着重关注哪几个影响性能的因素呢?
简单列举几项如下:
1、元数据管理:重点关注元数据服务器的复制结构和查询策略、元数据服务器的硬件配置(CPU/内存/缓存大小)、元数据服务器处理线程数量等
2、存储节点性能:重点关注存储节点底层磁盘I/O、系统读写cache大小等。
3、存储网络性能:关注分布式文件系统中存储网络对数据传输速率的影响。
4、客户端支持:不同的分布式文件系统对客户端的支持是有差别的,要关注文件系统I/O吞吐是否能够对客户端增加有较好的可扩展性。