影像类数据一般如何在大数据平台存储? 前提是高效的访问和存储
大数据平台中适合存放数据量极大,而且是一次写入,多次读的应用需求,存储在HDFS分布式文件系统,采用多副本机制保障数据的安全和可靠影像类数据包括视频数据和图像数据,非常适合存放在HDFS中,系统将影像类数据进行切分,按照128MB大小进行切分,然后对每个128MB的数据进行多副本进行备份,这样就可以将影像类数据按照数据块的方式存放在HDFS中了
如果是图像文件,根据业务需求可使用不同存储方案。(1)如果做在线内容服务,使用FastDFS、MogileFS等分布式文件系统。(2)如果做图片存储备份,可以使用MongoDB,或者将大量图片压缩后保存在HDFS。HDFS更适合大文件的存储。
关于TWT使用指南社区专家合作厂商入驻社区企业招聘投诉建议版权与免责声明联系我们 © 2023talkwithtrend — talk with trend,talk with technologist京ICP备09031017号-30