随着大数据时代的到来，分布式存储方案受到了越来越多的关注。然而，要实现分布式存储的最佳性能，需要与之相配套的硬件，本文将详细阐述分布式存储方案中需要考虑的各种硬件兼容性因素。1、分布式存储产品的交付形式分布式存储的产品交付形式包括 分布式存储一体机 和 分布...(more)

在分布式存储领域，数据安全性问题一直备受重点关注，而数据冗余机制的选择有多副本和纠删码。多副本：多个数据的副本，简单来说就是一个数据拷贝多份完全一样的副本，分别存放在多个不同节点上。它的高性能和高可靠性成为目前分布式存储配置时的首选，但是高昂的成本和较低的有效磁...(more)

摘要：本文将围绕GPFS在行内应用的实际情况的和华为NAS存储技术的先进性，展开探讨中小规模的城商银行在文件共享场景下从GPFS迁移至企业级NAS实践路径和思考。1背景我行多套业务系统（如柜面业务、支付业务、前置服务等）应用服务器集群存在应用节点之间共享目录的文件访问需求...(more)

随着云计算、大数据的快速发展，数据体量急速增长，与之相应，数据管理技术也在快速演进，其中，就包括湖仓一体（Lakehouse）技术。在咨询公司Gartner发布的“数据管理技术成熟度曲线”中，湖仓一体技术处于高速发展阶段。按照云计算提供商亚马逊的定义，湖仓一体是一种新的数据管理模式，它...(more)

本文介绍分布式存储数据可靠性的一种简单估计方法。如前文所述，在分布式存储系统中，为防止因为单点失效（单个硬盘、单个存储节点等）造成数据丢失，一般采用一定的数据冗余策略（多副本、纠删码等）来提升数据可靠性。以三副本为例，数据在写入分布式存储系统时，会被切割成固定长度的数...(more)

存储系统的数据可靠性是指在给定的时间（一般取一年）内数据不丢失的概率。利用分布式方法存储的数据，一般可以达到比较高的数据可靠性。比如，亚马逊S3存储服务的数据可靠性指标是11个9，也就是99.999999999%。照此计算，用户存储百亿对象，平均十年可能出现1个对象丢失。对存储系统...(more)

（接上篇）五、数据存储效率随着数据量的高速增长，所需存储设备的空间越来越大。如何在固定的存储物理空间上存储更多的数据，就是数据存储效率问题。需要说明的是，高效的数据存储不能损害数据可靠性。常见的提升数据存储效率的方法包括精简配置、RAID/EC（Erasurecoding）、重删、压...(more)

（接上篇）四、IO性能对于存储系统，经常用IOPS（I/Opersecond）、带宽（Throughput）、时延（Latency）这三个参数作为性能衡量指标。IOPS指的是系统在单位时间（1秒）内能处理的最大的I/O数量。把IOPS的值乘以IO尺寸，就得到了带宽指标。所以说，IOPS和带宽不是两个独立的指标。那为什么人们为什...(more)

本文对分布式存储系统的一些基本问题作一简要描述，以期对希望了解分布式存储基本概念的读者有所帮助。#一、内容总括分布式存储系统是基于分布式架构，由多个软硬件协同的存储节点通过网络互联来提供存储服务的系统。或简言之，分布式存储系统使用分布式的方法来提供存储服务...(more)

文章摘要本文介绍了文件共享需求场景下中小银行由GPFS迁移华为企业级NAS的实践经验。GPFS作为金融企业广泛采用的文件共享解决方案，数年来很好地支撑了某城商行业务的发展。但由于虚拟化环境部署的特殊性，以及GPFS维护管理相对的复杂性，行内决定以华为企业级NAS替换GPFS，华为...(more)