非结构化数据存储
非结构化数据存储(趋势联盟课题方向)
非结构化数据是数据结构不规则或不完整,没有预定义的数据模型,不方便用数据库二维逻辑表来表现的数据。包括所有格式的办公文档、文本、图片、XML, HTML、各类报表、图像和音频/视频信息等等。
非结构化数据是数据结构不规则或不完整,没有预定义的数据模型,不方便用数据库二维逻辑表来表现的数据。包括所有格式的办公文档、文本、图片、XML, HTML、各类报表、图像和音频/视频信息等等。

文章

分布式存储·2019-01-03
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
92 会员关注
MDS锁类型/**metadatalocktypes.*-thesearebitmasks..wecancomposethem*-theyalsodefinethelockorderingbytheMDS*-afewoftheseareinternaltothemds*/#defineCEPH_LOCK_DVERSION1#defineCEPH_LOCK_DN2#defineCEPH_LOCK_IVERSION16/*mdsinternal*/#defineCEPH_LOCK_ISNAP3...(more)
浏览1929
评论1
分布式存储·2019-01-02
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
92 会员关注
1.Ceph架构介绍image.pngCeph是一种为优秀的性能、可靠性和可扩展性而设计的统一的、分布式文件系统。特点如下:高性能a.摒弃了传统的集中式存储元数据寻址的方案,采用CRUSH算法,数据分布均衡,并行度高。b.考虑了容灾域的隔离,能够实现各类负载的副本放置规则,例如跨机房、机架...(more)
浏览7443
分布式存储·2018-12-28
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
92 会员关注
4.全局Ceph节点宕机处理在极端情况下,如数据中心断电,造成Ceph存储集群全局宕机,可以按照本节所示流程进行Ceph集群上电恢复操作。4.1手动上电执行步骤如为Ceph集群上电,monitorserver应最先上电;集群上电前确认使用Ceph之前端作业服务已停止。使用IPMI或于设备前手动进行上电...(more)
浏览2014
分布式存储·2018-12-27
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
92 会员关注
3.常见PG故障处理3.1PG无法达到CLEAN状态创建一个新集群后,PG的状态一直处于active,active+remapped或active+degraded状态,而无法达到active+clean状态,那很可能是你的配置有问题。你可能需要检查下集群中有关Pool、PG和CRUSH的配置项,做以适当的调整。一般来说,你的集群中需...(more)
浏览4082
评论2
分布式存储·2018-12-26
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
92 会员关注
2.常见OSD故障处理进行OSD排障前,先检查一下monitors和网络。如果cephhealth或ceph-s返回的是健康状态,这意味着monitors形成了法定人数。如果monitor还没达到法定人数、或者monitor状态错误,要先解决monitor的问题。核实下你的网络,确保它在正常运行,因为网络对OSD的运行和性...(more)
浏览1874
分布式存储·2018-12-25
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
92 会员关注
1.常见MON故障处理Monitor维护着Ceph集群的信息,如果Monitor无法正常提供服务,那整个Ceph集群就不可访问。一般来说,在实际运行中,CephMonitor的个数是2n+1(n>=0)个,在线上至少3个,只要正常的节点数>=n+1,Ceph的Paxos算法就能保证系统的正常运行。所以,当Monitor出现故障的...(more)
浏览2253
评论1
分布式存储·2018-12-21
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
92 会员关注
一、说明Ceph把数据以对象的形式存于各存储池中。Ceph用户必须具有访问存储池的权限才能够读写数据。另外,Ceph用户必须具有执行权限才能够使用Ceph的管理命令。二、授权能力Ceph用“能力”(capabilities,caps)这个术语来描述给认证用户的授权,这样才能使用Mon、OSD和MDS的功...(more)
浏览1646
评论2
分布式存储·2018-12-20
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
92 会员关注
1.相关软件包1.1安装软件包PG数量的预估集群中单个池的PG数计算公式如下:PG总数=(OSD数*100)/最大副本数/池数(结果必须舍入到最接近2的N次幂的值)#在管理节点的工作目录下,给Ceph对象网关节点安装Ceph对象所需的软件包#ceph-deployinstall--rgw<node1>[<node2>...]$...(more)
浏览3034
评论1
分布式存储·2018-12-19
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
92 会员关注
1.创建元数据服务器1.1安装mdsPG数量的预估集群中单个池的PG数计算公式如下:PG总数=(OSD数*100)/最大副本数/池数(结果必须舍入到最接近2的N次幂的值)#ceph-deployinstallmds_server$ceph-deployinstallceph-xxx-osd03.gz01[ceph_deploy.conf][DEBUG]foundconfigurationfi...(more)
浏览1503
评论1
分布式存储·2018-12-19
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
92 会员关注
1.基本概念1.1什么是ScrubScrub是Ceph集群副本进行数据扫描的操作,用于检测副本间数据的一致性,包括scrub和deep-scrub。其中scrub只对元数据信息进行扫描,相对比较快;而deep-scrub不仅对元数据进行扫描,还会对存储的数据进行扫描,相对比较慢。1.2Scrub默认执行周期OSD的scrub...(more)
浏览2114

描述

非结构化数据是数据结构不规则或不完整,没有预定义的数据模型,不方便用数据库二维逻辑表来表现的数据。包括所有格式的办公文档、文本、图片、XML, HTML、各类报表、图像和音频/视频信息等等。
非结构化数据是数据结构不规则或不完整,没有预定义的数据模型,不方便用数据库二维逻辑表来表现的数据。包括所有格式的办公文档、文本、图片、XML, HTML、各类报表、图像和音频/视频信息等等。
X社区推广
  • 提问题