gluster FS与CEPH开源的Ceph及Red Hat旗下的Gluster都是比较新的文件系统，Ceph与Gluster在原理上有着本质上的不同。Ceph基于一个名为RADOS的对象存储系统，使用一系列API将数据以块(block)、文件(file)和对象(object)的形式展现。Ceph存储系统的拓扑结构围绕着副本与信息分...

从存储的角度看来：1）存储容量要能保证业务的使用2）存储性能要能保证业务的使用3）存储的可靠性4）存储的可扩展性从和容器的结合看来：1）是否有plugin的插件配合2）是否能够满足容器的特性3）集群文件系统的支持情况...

对于容器持久化存储建设有如下方面需要考量：1）存储的容量，需要准确估量业务几年甚至十年内的需求2）存储的可扩展情况，以备后续的扩容3）存储和容器的兼容性，是否在volume plugin列表中，是否支持对接4）存储的挂载5）集群文件系统的可靠性6）集群文件系统的性能调优...

目前IBM Spectrum Scale + Ubiquity支持两种容器，一是Docker，另一是Kubernetes，所有使用这两种技术的容器云平台都可以使用IBM Spectrum Scale作为持久化存储。

从存储的类型看来1）传统存储2）分布式存储推荐分布式存储，相对而言，分布式存储的可扩展性是容器存储最看重的从集群文件系统看来1）cephFS2）GPFS3）GFS4）OCFS25）HDFS各有千秋，但是商业支持的GPFS使用的场景更多，在互联网这块，使用cephFS更多...

关键点或者说难点包括：动态分配存储动态mount存储到容器实例集群环境下不同容器实例共享存储持久化存储的数据分层管理持久化存储的高可用持久化存储的备份和恢复

目前使用的是Ceph

IBM Spectrum Scale是通过一个叫Ubiquity的插件来实现对容器持久化存储的支持，Ubiquity可以看作一个volume plugin，介于容器和IBM Spectrum Scale之间。在容器host上安装一个Ubiquity的client，在Spectrum Scale 的Server上安装一个Ubiquity 的Server，从而可以实现动态分配vol...

IBM Spectrum Scale本身是一个分布式文件系统，其架构设计完全支持高可用，任何一个存储IO节点down掉都不影响数据的访问。IBM Spectrum Scale支持快照snapshot、备份以及多数据块副本技术，从而可以很好的实现各种形式灾备。...

基于ceph的开源分布式存储中，数据分层使用的是cache tiering的功能，需要手动配置hot pool和cool pool，并将hot pool overlay 到cool pool之上。自动备份可以支持snapshot以及rbd mirror功能来实现