影像类等非结构化数据一般如何在大数据平台存储?

影像类数据一般如何在大数据平台存储?   前提是高效的访问和存储

参与18

2同行回答

sxtycxxsxtycxx 解决方案经理人工智能(计算机视觉)
大数据平台中适合存放数据量极大,而且是一次写入,多次读的应用需求,存储在HDFS分布式文件系统,采用多副本机制保障数据的安全和可靠影像类数据包括视频数据和图像数据,非常适合存放在HDFS中,系统将影像类数据进行切分,按照128MB大小进行切分,然后对每个128MB的数据进行多副本进行...显示全部

大数据平台中适合存放数据量极大,而且是一次写入,多次读的应用需求,存储在HDFS分布式文件系统,采用多副本机制保障数据的安全和可靠
影像类数据包括视频数据和图像数据,非常适合存放在HDFS中,系统将影像类数据进行切分,按照128MB大小进行切分,然后对每个128MB的数据进行多副本进行备份,这样就可以将影像类数据按照数据块的方式存放在HDFS中了

收起
互联网服务 · 2018-10-19
浏览6300
  • 存放在hdfs,那后续查询是不是会很慢? 最终产品还有前端查询界面,根据请求调用对应的影像数据。 hbase中存放效果怎么样,了解不?
    2018-10-19
  • 存放在hdfs,那后续查询是不是会很慢? 最终产品还有前端查询界面,根据请求调用对应的影像数据。 hbase中存放效果怎么样,了解不?
    2018-10-19
  • hbase不适合存放非结构化数据,像设备日志或是HTML这类型的半结构化数据量非常大,随机性比较大更适合于 hbase
    2018-10-19
windixwindix联盟成员商业分析师某证券公司
如果是图像文件,根据业务需求可使用不同存储方案。(1)如果做在线内容服务,使用FastDFS、MogileFS等分布式文件系统。(2)如果做图片存储备份,可以使用MongoDB,或者将大量图片压缩后保存在HDFS。HDFS更适合大文件的存储。...显示全部

如果是图像文件,根据业务需求可使用不同存储方案。
(1)如果做在线内容服务,使用FastDFS、MogileFS等分布式文件系统。
(2)如果做图片存储备份,可以使用MongoDB,或者将大量图片压缩后保存在HDFS。HDFS更适合大文件的存储。

收起
互联网服务 · 2018-10-19
浏览6330

提问者

houjiankun
系统工程师sjbank

问题来自

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2018-10-19
  • 关注会员:3 人
  • 问题浏览:7758
  • 最近回答:2018-10-19
  • X社区推广