Ceph
Ceph
Ceph 最初是一项关于存储系统的 PhD 研究项目,由 Sage Weil 在 University of California, Santa Cruz(UCSC)实施。Ceph 是开源分布式存储,也是主线 Linux 内核(2.6.34)的一部分。
Ceph 最初是一项关于存储系统的 PhD 研究项目,由 Sage Weil 在 University of California, Santa Cruz(UCSC)实施。Ceph 是开源分布式存储,也是主线 Linux 内核(2.6.34)的一部分。

文章

分布式存储·2018-11-27
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
95 会员关注
1.bucketindex背景简介bucketindex是整个RGW里面一个非常关键的数据结构,用于存储bucket的索引数据,默认情况下单个bucket的index全部存储在一个shard文件(shard数量为0,主要以OMAP-keys方式存储在leveldb中),随着单个bucket内的Object数量增加,整个shard文件的体积也在不断增长...(more)
浏览2463
对象存储·2018-11-13
平台人生 · 平台人生 擅长领域:服务器, 数据库, 关系型数据库
83 会员关注
作者:林青--对象存储是公有云中常见的非结构化数据存储解决方案,常被作为网站、移动应用、图片、视频数据的主要存储方式,也是CDN回源及云上数据备份的不二选择。对象存储采用无层次结构的数据存储方法。基于对象的存储不使用目录树,数据组织采用桶作为划分域,对象存储于桶中;...(more)
专栏: 平台人生
浏览14275
评论1
分布式存储·2018-12-13
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
95 会员关注
1.说明1.1介绍一个Ceph集群需要多个Monitor组成的小集群,它们通过Paxos同步数据,用来保存OSD的元数据。2.常用操作2.1查看mon状态$cephmonstate1:3monsat{ceph-xx-osd00=10.69.0.1:6789/0,ceph-xx-osd01=10.69.0.2:6789/0,ceph-xx-osd02=10.69.0.3:6789/0},electionepoch52...(more)
浏览1229
分布式存储·2019-01-09
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
95 会员关注
一、前言首先来一段英文关于PG和PGP区别的解释:PG=PlacementGroupPGP=PlacementGroupforPlacementpurposepg_num=numberofplacementgroupsmappedtoanOSDWhenpg_numisincreasedforanypool,everyPGofthispoolsplitsintohalf,buttheyallremainmappedtotheirparentOSD.Untilth...(more)
浏览1463
分布式存储·2019-01-24
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
95 会员关注
1.介绍一般来说,你应该在运行时增加调试选项来调试问题;也可以把调试选项添加到Ceph配置文件里来调试集群启动时的问题,然后查看/var/log/ceph(默认位置)下的日志文件。Tip:调试输出会拖慢系统,这种延时有可能掩盖竞争条件。日志记录是资源密集型任务。如果你碰到的问题在集群的...(more)
浏览1640
分布式存储·2019-01-16
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
95 会员关注
1.mds存储元数据的内存缓存,为了加快元数据的访问。保存了文件系统的元数据(对象里保存了子目录和子文件的名称和inode编号)还保存cephfs日志journal,日志是用来恢复mds里的元数据缓存重启mds的时候会通过replay的方式从osd上加载之前缓存的元数据2.mds冷备/热备冷备就是备...(more)
浏览3166
评论1
分布式存储·2018-12-18
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
95 会员关注
1.管理存储池1.1创建存储池PG数量的预估集群中单个池的PG数计算公式如下:PG总数=(OSD数*100)/最大副本数/池数(结果必须舍入到最接近2的N次幂的值)#cephosdpoolcreate{pool-name}{pg-num}[{pgp-num}][replicated][crush-ruleset-name]$cephosdpoolcreatetest_pool512512re...(more)
浏览2127
Ceph·2019-06-10
大天使之剑 · 杭州才云科技 擅长领域:云计算, 私有云, 云管平台
16 会员关注
ceph常用命令检查集群健康状况启动集群后、读写数据前,先检查下集群的健康状态cephhealthdetail查看pool下的文件rbdls<poolname>**要观察集群内正发生的事件,打开一个新终端**ceph-w输出信息里包含:集群唯一标识符集群健康状况监视器图元版本和监视器法定人数状态OSD...(more)
浏览1547
分布式存储·2018-11-07
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
95 会员关注
1.背景说明继上次分享的《Ceph介绍及原理架构分享》和《分布式存储Ceph之PG状态详解》,这次分享点干货。用户需要从cephfs存储系统中检索一个大文件指定关键字的一行信息,并且对延迟和性能要求比较高。2.原始方案2.1流程图image.png2.2说明假如用户拉取的文件大小是16M,文...(more)
浏览1663
Ceph·2019-06-05
大天使之剑 · 杭州才云科技 擅长领域:云计算, 私有云, 云管平台
16 会员关注
ceph删除pool报错删除pool的时候提示下面的错误[root@node3~]#cephosdpooldeleteecpoolecpool--yes-i-really-really-mean-itErrorEPERM:pooldeletionisdisabled;youmustfirstsetthemon_allow_pool_deleteconfigoptiontotruebeforeyoucandestroyapool解决方法在mon节点上...(more)
浏览4780

描述

Ceph 最初是一项关于存储系统的 PhD 研究项目,由 Sage Weil 在 University of California, Santa Cruz(UCSC)实施。Ceph 是开源分布式存储,也是主线 Linux 内核(2.6.34)的一部分。
Ceph 最初是一项关于存储系统的 PhD 研究项目,由 Sage Weil 在 University of California, Santa Cruz(UCSC)实施。Ceph 是开源分布式存储,也是主线 Linux 内核(2.6.34)的一部分。
X社区推广
  • 提问题