CephFS
CephFS
Ceph文件系统( Ceph FS )是个 POSIX 兼容的文件系统,它使用 Ceph 存储集群来存储数据。 Ceph 文件系统与 Ceph 块设备、同时提供 S3 和 Swift API 的 Ceph 对象存储、或者原生库( librados )一样,都使用着相同的 Ceph 存储集群系统。
Ceph文件系统( Ceph FS )是个 POSIX 兼容的文件系统,它使用 Ceph 存储集群来存储数据。 Ceph 文件系统与 Ceph 块设备、同时提供 S3 和 Swift API 的 Ceph 对象存储、或者原生库( librados )一样,都使用着相同的 Ceph 存储集群系统。

问题

银行银行文件存储·2019-04-25
byethen · CMBC 擅长领域:存储, 灾备, 服务器
585 会员关注
昨日夜里无事,又针对这一问题思考了下,个人愚见,欢迎各位拍砖!票据影像是交易中的重要凭证,针对票据影像的业务特点,对大规模的票据影像数据存储系统,我总结了下,总共大致是有这么四个需求:1、既要保证海量小文件的高速录入、查询,又可以提供大文件的性能保证;2、票据影像的数据量未...
互联网服务分布式存储·2019-01-07
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
93 会员关注
扩容/缩容 会涉及到数据的迁移,对于客户端理论上是不影响的,数据都会正常访问和写入。 不过,如果内部数据迁移io太频繁,可能会影响客户端io的响应时间,延迟会拉高。需要控制好内部的频率和速度。...
证券行业分布式存储·2019-01-10
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
93 会员关注
分布式文件系统自然地,“分布式”是重点,它是相对与本地文件系统而言的。分布式文件系统通常指C/S架构或网络文件系统,用户数据没有直接连接到本地主机,而是存储在远程存储服务器上。NFS/CIFS是最为常见的分布式文件系统,这就是我们说的NAS系统。并行文件系统这种文件系统能够...
IT其它分布式存储·2019-01-10
sunands · 乐视云计算 擅长领域:分布式系统, 存储, 分布式架构
媒体文件文件一般都比较大,使用对象存储,ceph 的对象存储对大文件支持的还不错,再配合cdn使用
IT其它分布式存储·2019-01-10
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
93 会员关注
首先ceph本身就是分布式高可用,高可靠,可扩展的系统。而cephfs 的相关组件包含:z4ixlqfvr7gmon监控整体集群信息mds元信息文件及目录信息osd数据节点及文件信息针对这三个组件都是可以 横向扩展,性能也是随着节点的增加而线性增加。三个组件都是基于分布式协议Paxos 实现的, ...
互联网服务分布式存储·2019-01-08
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
93 会员关注
三种存储类型-块存储典型设备:磁盘阵列,硬盘主要是将裸磁盘空间映射给主机使用的。优点:• 通过Raid与LVM等手段,对数据提供了保护。• 多块廉价的硬盘组合起来,提高容量。• 多块磁盘组合出来的逻辑盘,提升读写效率。 缺点:• 采用SAN架构组网时,光纤交换机,造价成本...
互联网服务分布式存储·2019-01-07
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
93 会员关注
单个mds性能 fuse模式5000ops/s 左右, kernel模式8000ops/s 左右。kernel client 在4.x 以下的内核版本,存储很多坑和问题。 官方建议升级内核版本到4.x以上,社区也有部分大厂升级到了新内核版本,稳定性还是不错的。建议如果用kernel client模式,升级内核到4.x以上,否则推荐使...
互联网服务分布式存储·2019-01-07
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
93 会员关注
对文件数量没有限制,但是单个目录的子文件 默认是10w个文件。如果超过就会报错,可以通过相关参数修改。
互联网服务分布式存储·2019-01-07
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
93 会员关注
te14pxrzcprMDS缓存元信息和文件目录信息。文件目录和其他元数据存储在RADOS中。核心组件:MDS、Clients、RADOS。Client <–> MDS元数据操作和capalities。Client <–> OSD 数据IO。MDS <–> OSD 元数据IO。多个客户端都是从MDS拉取文件和目录 元信息, ...
保险分布式存储·2019-01-08
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
93 会员关注
用这个还真没有对比测试过, 但是ceph fuse client 稳定性倒是提升了不少,修复了不少bug。 fuse用户态模式 肯定比直接用kernel内核模式性能低。 如果您的性能要求比较严格,肯定考虑直接用kernel client, 新版本关于kernel模式 稳定性很高,性能有保障。...

描述

Ceph文件系统( Ceph FS )是个 POSIX 兼容的文件系统,它使用 Ceph 存储集群来存储数据。 Ceph 文件系统与 Ceph 块设备、同时提供 S3 和 Swift API 的 Ceph 对象存储、或者原生库( librados )一样,都使用着相同的 Ceph 存储集群系统。
Ceph文件系统( Ceph FS )是个 POSIX 兼容的文件系统,它使用 Ceph 存储集群来存储数据。 Ceph 文件系统与 Ceph 块设备、同时提供 S3 和 Swift API 的 Ceph 对象存储、或者原生库( librados )一样,都使用着相同的 Ceph 存储集群系统。
X社区推广
  • 提问题