非结构化数据存储
非结构化数据存储
非结构化数据是数据结构不规则或不完整,没有预定义的数据模型,不方便用数据库二维逻辑表来表现的数据。包括所有格式的办公文档、文本、图片、XML, HTML、各类报表、图像和音频/视频信息等等。
非结构化数据是数据结构不规则或不完整,没有预定义的数据模型,不方便用数据库二维逻辑表来表现的数据。包括所有格式的办公文档、文本、图片、XML, HTML、各类报表、图像和音频/视频信息等等。
热点
来自主题:对象存储 · 2021-01-19
seposalGUOSEN 擅长领域:对象存储, 非结构化数据存储, Dell EMC ECS
4 会员关注
 前言:金融科技是券商行业创新发展的助推剂,国信证券在科技创新和应用的过程中,始终坚持以体验为核心,以数据为驱动,以技术为依托,为需求各异的投资者提供覆盖投融资全环节的智能化、专业化、陪伴式金融服务,同时帮助投资者提升投融资能力。背景:国信证券将科技领先战略视为公司...(more)
专栏: 最佳实践
浏览3344
评论3

对象存储选型优先顺序调查

发表您的选型观点,参与即得50金币。

来自主题:非结构化数据存储 · 2020-12-01
zhangjunxi570xjtu 擅长领域:对象存储, 文件存储, 非结构化数据存储
3 会员关注
这是一个很好的问题。是否要使用对象存储没有固定的标准,一定要一定要根据自身的实际出发。下面我提供集中建议使用对象存储的场景:1 非结构化数据体量过于庞大,在经济上和运维上的投入太大。对象存储通常采用分布式服务器加容量大性能一般的介质如sata盘,采用采用就删的方案...
浏览1180
回答3
来自主题:对象存储 · 2020-12-14
zhangjunxi570xjtu 擅长领域:对象存储, 文件存储, 非结构化数据存储
3 会员关注
目前非结构化海量数据存储较好的方案主要有传统分布式NAS方案和对象存储方案。传统NAS存储方案由于和现有SAN存储方案类似,都是基于文件系统的方案,均为树形目录组织结构,随着数据量的增大,同样存在文件寻址越来越慢的瓶颈。另外如果将企业现有SAN方案改为NAS存储方案,IOPS和I...(more)
专栏: 活动总结
浏览12299
来自主题:数据迁移 · 2020-12-01
SeaskyblueNetApp 
1 会员关注
好问题。这个问题的本质是需要变更存储访问协议。我的建议如下:1、自己做。可以考虑Rclone这个开源工具。2、花钱做。请厂商服务工程师或专业合作伙伴工程师来做。这是最佳选项,不过还有钱来说话。3、并存。老数据保持现有存储和访问方式,新数据直接写入对象存储。这个就要...
浏览2193
回答6
来自主题:备份 · 2020-12-01
非结构化数据同结构化数据一样,可按照不同的需求,实现多种方式的备份。而唯一不一样的,对于大数据,或者说海量的非结构化数据,由于数据量的巨大,不能用传统的备份方式来处理,这时候我们会建议采用历史数据归档替代传统的备份,一方面保证数据保护的时间窗,同时确保数据的回溯访问时...
浏览2299
回答6
来自主题:存储双活 · 2020-11-13
gk711某证券企业 擅长领域:云计算, OceanStor Dorado, oceanstor 18500
2 会员关注
从数据容量上看,不需要转对象存储。但是集中NAS文件存储,会涉及到一个inode索引空间。如果一个文件目录里面小文件数量太多,会占用的inode空间,一旦inode空间用完会导致文件系统不可用,同时会影响文件读取遍历速度。对象存储可以避免这种问题,需要结合应用使用文件系统的方式具...
浏览6186
回答12
来自主题:数据湖 · 2020-05-26
xclu_csdccsdc 擅长领域:数据湖
1 会员关注
前言:不久前召开的中央政治局常委会会议强调,“加快5G网络、数据中心等新型基础设施建设进度”。这一要求,为“新基建”按下快进键。战疫期间,助力线上交易、远程办公、在线教育,云服务无处不在;从流动人员健康监测,到疫情态势研判,大数据应用身手不凡;广泛应用机器人配送、无接触...(more)
专栏: 活动总结
浏览1391
来自主题:分布式存储 · 2019-11-08
吕作令XSKY 擅长领域:分布式存储, Ceph, 超融合
13 会员关注
不建议,建议硬盘直通进操作系统。做2-3副本保障数据安全。 1、如果在底层配置RAID组,把VD给Ceph,只做单副本相当于每个VD一个OSD。在VD出现问题后,由于数据是1副本,会数据丢失风险。2、底层RAID在做数据恢复时,也会影响ceph集群异常3、增加了集群运维难度,增大了集群风险点...
浏览6382
回答4
来自主题:分布式存储 · 2019-04-25
Steven99steven 擅长领域:容器云, 证券容器云平台, 微服务
21 会员关注
日志文件随着时间会是个很大的量,所以建议考虑统一的日志中心存储处理,可以用es等,备份到hdfs。配置文件在量上通常不是个问题,可以考虑配置中心统一管理,无需额外存储非结构化数据通常是大量的文件,可以采用传统nas或分布式对象存储,当然资金充裕可以采购好的存储,存储性能很重...
浏览3636
回答5
来自主题:分布式存储 · 2018-12-20
Lucien168滴滴 擅长领域:Ceph, 分布式存储, 非结构化数据存储
86 会员关注
1.相关软件包1.1安装软件包PG数量的预估集群中单个池的PG数计算公式如下:PG总数=(OSD数*100)/最大副本数/池数(结果必须舍入到最接近2的N次幂的值)#在管理节点的工作目录下,给Ceph对象网关节点安装Ceph对象所需的软件包#ceph-deployinstall--rgw<node1>[<node2>...]$...(more)
浏览1873
评论1
描述
非结构化数据是数据结构不规则或不完整,没有预定义的数据模型,不方便用数据库二维逻辑表来表现的数据。包括所有格式的办公文档、文本、图片、XML, HTML、各类报表、图像和音频/视频信息等等。
非结构化数据是数据结构不规则或不完整,没有预定义的数据模型,不方便用数据库二维逻辑表来表现的数据。包括所有格式的办公文档、文本、图片、XML, HTML、各类报表、图像和音频/视频信息等等。
  • 提问题