基础设施设计规划过程对非结构化数据(大数据应用)重点做好哪些设计和规划?

对于正在进行基础设施规划的公司来说,针对大数据的应用,重点要走好哪方面的规划?1、设计思路方面逐渐在流行0存储的设计思路,同业是否对0存储和专业存储两个思路在成本、效能上的分析和比较可以分享?2、闪存技术应用对于闪存技术的应用,在哪些关键要素出现后,需要考虑闪存技术的...显示全部

对于正在进行基础设施规划的公司来说,针对大数据的应用,重点要走好哪方面的规划?

1、设计思路方面
逐渐在流行0存储的设计思路,同业是否对0存储和专业存储两个思路在成本、效能上的分析和比较可以分享?

2、闪存技术应用
对于闪存技术的应用,在哪些关键要素出现后,需要考虑闪存技术的应用?

3、单点故障方面
应用层面双倍架构应用比较广,但在数据存储方面(尤其数据量较大时),现有技术是否已经足够成熟,在规划前期可以不需要考虑单点故障的问题?

收起
参与5

返回qq373793057的回答

qq373793057qq373793057课题专家组系统工程师某银行

1、存储选择时的成本比较,还是要从实际业务入手,如果是对数据扩展性要求高、需求变化快的应用,使用分布式存储方式肯定会节省一定的成本。而如果业务追求稳定和性能,且变化不大,从长远上看,使用集中式存储比较合适。

2、是否考虑使用闪存存储,要考虑的因素有很多,以本活动探讨的PB、EB级别的海量非结构化数据为例,数据全部放入闪存中,既不经济也不现实。而如果是将访问量较大的元数据放入闪存中,就可以快速提高应用对非结构化数据的检索效率,进而提升整个集群存储的效能。

3、存储的单点故障在设计初期也要考虑,分布式文件系统的存储方式,除了要关注存储节点还要关注计算节点的高可用。而对于异构的各单点存储,可以考虑使用如SVC等存储虚拟化网关技术,避免单点存储的存在。

银行 · 2017-06-30
浏览1407

回答者

qq373793057
系统工程师某银行
擅长领域: 存储灾备分布式系统

qq373793057 最近回答过的问题

回答状态

  • 发布时间:2017-06-30
  • 关注会员:2 人
  • 回答浏览:1407
  • X社区推广