随着国有大型企业信息化的发展,越来越重视数据的重要性,除了传统结构化的数据,非结构化数据价值也逐步体现。非结构化数据由文件,视频,音频,图片等组成,而且数据量庞大,以电力系统为例,省级公司至少有几十个tb,这些数据如何存储,即保证容量需求,又兼顾成本考虑?这些数据如何备份,即保证备份的时间窗口,又易于实现?这是困扰运维人员的难题!
可以按照数据生命周期进行管理,分为热数据、温数据和冷数据,冷数据就不再有修改权限;这样每次备份的就是热数据和一点点需要修改的温数据,冷数据由于具有三份副本,由于不做修改,其实可以满足三副本的数据冗余要求
有针对海量数据的数据归档产品。
对于非结构化数据数据的安全性问题,个人认为,应该着重关注两个方面:1、所使用数据平台的隐私保护。2、数据访问模型1、隐私保护方面,可以借助如Hive中的Kerberos身份 认证机制来实现如角色的认证、LDAP等安全策略等。2、访问控制可以分为登录访问控制和数据查询访问控制,通过设定约束阀值检查用户权限。
对象存储是一个考虑的选型之一
关于TWT使用指南社区专家合作厂商入驻社区企业招聘投诉建议版权与免责声明联系我们 © 2024talkwithtrend — talk with trend,talk with technologist京ICP备09031017号-30