作者简介：匡岳林某知名大型券商信息技术中心高级经理数据库&存储工程师长期致力于数据库运维，存储规划等工作，对数据库优化，存储分级管理等有丰富经验，近年来紧跟分布式数据库，分布式存储等新兴技术，对分布式数据库和分布式存储的落地使用有独到的心得。摘要：本文通过分析某...
(more)1.心跳介绍心跳是用于节点间检测对方是否故障的，以便及时发现故障节点进入相应的故障处理流程。问题：故障检测时间和心跳报文带来的负载之间做权衡。心跳频率太高则过多的心跳报文会影响系统性能。心跳频率过低则会延长发现故障节点的时间，从而影响系统的可用性。故障检测策...
(more)分布式存储和超融合的使用场景并不相同，超融合最好的例子是VMware的VSAN，但是这个功能只能在特定的场景下使用，并不使用所有的场景；分布式存储也是一样的道理。因此不同的应用场景下要选择不同的产品架构。超融合的出现是为了提高效率、降低运营成本。现在真正算上超融合架构...
摘要：本文介绍了英大基金IT基础架构向超融合架构全面转型的背景、评估过程、部署方案和使用的心得体会，尤其是针对原支撑核心生产业务的小型机加SAN存储部分的相关顾虑和针对性的评估和方案设计，希望为业内同行带来参考。一.背景介绍英大基金原IT架构一直采用如下业内常见的...
(more)日志文件随着时间会是个很大的量，所以建议考虑统一的日志中心存储处理，可以用es等，备份到hdfs。配置文件在量上通常不是个问题，可以考虑配置中心统一管理，无需额外存储非结构化数据通常是大量的文件，可以采用传统nas或分布式对象存储，当然资金充裕可以采购好的存储，存储性能很重...
摘要：泰康自2017年跟进超融合技术，在其稳定性和可靠性上积累了一些生产运维经验和心得体会。本文通过对超融合技术的调研分析和应用实践梳理，希望为保险行业对超融合选型和场景应用提供一些观点和思考。一、引入超融合技术背景及原因分析泰康作为业内大型保险集团公司和金融...
(more)ceph 和 raid 不建议混合使用。分布式存储已经做到了多副本的安全冗余机制。乃至1-6副本。ceph已经解决了数据冗余的问题。不需要在做raid，做raid后反而增加了运维难度，若raid 在出现问题时，数据做重平衡过程中也会影响ceph 存储集群...
cephfs多mds默认是动态负载均衡的，为了负载文件系统请求到多个mds。cephfs会根据每个mds计算一个热点值，热点高的mds缓存中的目录会往热点低的mds迁移，缓存中的目录在迁移的过程中是被锁定的，应用层的IO不能访问正在迁移的目录或文件，会导致部分IO访问中断几秒。于是用户就感...
ceph同时提供对象存储、块存储、文件存储三种接口，但本质上其实是对象存储，也就是说一个rbd image实际上包含了多个对象（默认情况下是image_size/4M）。此处以块存储（RBD）为例进行演示，因为三种接口最终存储文件的操作单元都是对象，所以其他接口的方法类似：前提：在bloc接口下有一个...
在存储领域，统计性能的主要是IOPS和带宽，IOPS也被称为Throughput（吞吐量），即每秒钟的I/O数量，如果知道每个I/O的平均大小，那么就可以算出这些I/O总共产生了多大的数据量，即Bandwidth（带宽）。因此，IOPS * I/O size = Bandwidth。
有这两个概念后我们再看存储性能的评估，存储的速度和硬...
