非结构化数据存储
非结构化数据存储(趋势联盟课题方向)
非结构化数据是数据结构不规则或不完整,没有预定义的数据模型,不方便用数据库二维逻辑表来表现的数据。包括所有格式的办公文档、文本、图片、XML, HTML、各类报表、图像和音频/视频信息等等。
非结构化数据是数据结构不规则或不完整,没有预定义的数据模型,不方便用数据库二维逻辑表来表现的数据。包括所有格式的办公文档、文本、图片、XML, HTML、各类报表、图像和音频/视频信息等等。

文章

分布式存储·2018-12-18
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
93 会员关注
1.管理存储池1.1创建存储池PG数量的预估集群中单个池的PG数计算公式如下:PG总数=(OSD数*100)/最大副本数/池数(结果必须舍入到最接近2的N次幂的值)#cephosdpoolcreate{pool-name}{pg-num}[{pgp-num}][replicated][crush-ruleset-name]$cephosdpoolcreatetest_pool512512re...(more)
浏览2093
分布式存储·2018-12-17
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
93 会员关注
1.说明1.1介绍MDS全称CephMetadataServer,是CephFS服务依赖的元数据服务。2.常用操作2.1查看mds的状态$cephmdsstattest_fs-1/1/1uptest1_fs-1/1/1up{[test1_fs:0]=ceph-xx-osd03.gz01=up:active,[test_fs:0]=ceph-xx-osd00=up:active}2.2查看mds的映射信息$cephmdsdumpdu...(more)
浏览1940
分布式存储·2018-12-14
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
93 会员关注
1.介绍CRUSH算法通过计算数据存储位置来确定如何存储和检索。CRUSH授权Ceph客户端直接连接OSD,而非通过一个中央服务器或代理。数据存储、检索算法的使用,使Ceph避免了单点故障、性能瓶颈、和伸缩的物理限制。CRUSH需要一张集群的Map,且使用CRUSHMap把数据伪随机地、尽量平...(more)
浏览1373
TerrenceX · IBM 擅长领域:存储, 软件定义存储, 灾备
46 会员关注
在企业数字化转型的大潮中,非结构化数据总量迎来了爆炸式的增长。Forrester最新的分析调查报告显示,受调查的企业中,非结构化数据总量超过PB级的企业,已经从2016年的13%快速增长到了2017年的38%。很明显,这意味着PB级非结构化数据的企业占比在短短一年之内就增长到近3倍!这让企...(more)
专栏: 新品解读
浏览7560
评论1
分布式存储·2018-12-13
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
93 会员关注
1.说明1.1介绍一个Ceph集群需要多个Monitor组成的小集群,它们通过Paxos同步数据,用来保存OSD的元数据。2.常用操作2.1查看mon状态$cephmonstate1:3monsat{ceph-xx-osd00=10.69.0.1:6789/0,ceph-xx-osd01=10.69.0.2:6789/0,ceph-xx-osd02=10.69.0.3:6789/0},electionepoch52...(more)
浏览1216
分布式存储·2018-12-12
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
93 会员关注
指标说明级别noscrubflag(s)set防止集群做清洗操作fullflag(s)set使集群到达设置的full_ratio值。会导致集群阻止写入操作nodeep-scrubflag(s)set防止集群进行深度清洗操作pauseflag(s)set集群将会阻止读写操作,但不会影响集群的in、out、up或down状态。集群扔保持正常运...(more)
浏览5747
评论1
分布式存储·2018-12-11
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
93 会员关注
1.RADOS1.1RGWClientMetricsTableceph--admin-daemon/var/run/ceph/ceph-client.rgw.ceph-xx-osd04.ys.asokperfdumpehmp0t7gb0p1.2CCTMetricsTablerr4mdlqx7x91.3RADOSClientMetricsTableceph--admin-daemon/var/run/ceph/ceph-client.rgw.ceph-xx-osd04.ys.asokperfdum...(more)
浏览1989
分布式存储·2018-12-10
zrosiness · JSRCB 擅长领域:存储, 服务器, 灾备
24 会员关注
1前言随着大数据时代的到来,使得诸多互联网金融企业服务更加智能化、营销更加精准化,作为银行业首当其冲面对来自互联网金融的强大压力,如何在新时代继续保持领先,准确识别金融风险,提供更加优质和差异化服务,是银行业首先想到的问题。大数据环境下,非结构化数据结构不固定,没有...(more)
专栏: 活动总结
浏览6579
分布式存储·2018-12-05
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
93 会员关注
1.查看运行时配置如果你的Ceph存储集群在运行,而你想看一个在运行进程的配置,用下面的命令:cephdaemon{daemon-type}.{id}configshow|less如果你现在位于osd.0所在的主机,命令将是:osd.0configshow|less2.修改配置文件Ceph配置文件可用于配置存储集群内的所有守护进程、或者某...(more)
浏览2350
分布式存储·2018-12-03
Lucien168 · 地平线机器人 擅长领域:存储, 分布式系统, 分布式架构
93 会员关注
一、业内灾备方案1.Snapshot1.1介绍ClusterA&B仍然是独立的Ceph集群,通过RBD的snapshot机制,在ClusterA端,针对image定期通过rbd创建image的snap,然后通过rbdexport-diff,rbdimport-diff命令来完成image备份到ClusterB。1.2原理异步备份,基于RBD的snapshot机制1.3命令和步...(more)
浏览2325

描述

非结构化数据是数据结构不规则或不完整,没有预定义的数据模型,不方便用数据库二维逻辑表来表现的数据。包括所有格式的办公文档、文本、图片、XML, HTML、各类报表、图像和音频/视频信息等等。
非结构化数据是数据结构不规则或不完整,没有预定义的数据模型,不方便用数据库二维逻辑表来表现的数据。包括所有格式的办公文档、文本、图片、XML, HTML、各类报表、图像和音频/视频信息等等。
X社区推广
  • 提问题