大数据平台下如何合理规划存储资源

在大数据背景下,针对存储,如何合理规划存储的使用,在即保证可用性的基础上,又能保证数据的安全性,还有保证性能不会有问题。

在容量上,我们采用什么样的磁盘类型配比合适?

在性能上,如何更好的与应用结合,哪种技术适合大数据平台的建设?分布式存储如何规划?是靠软件级的应用来切分,还是靠SDS的技术?对于哪些类型应用更合适?

参与6

3同行回答

pweypwey系统架构师中体骏彩
根据需求来定义技术方向及配置方案肯定是最好的,但现在很多项目都是只知道目标,在过程中会有很多技术方案可以选择,两位是否有相关经验分享,谢谢。显示全部

根据需求来定义技术方向及配置方案肯定是最好的,但现在很多项目都是只知道目标,在过程中会有很多技术方案可以选择,两位是否有相关经验分享,谢谢。

收起
政府机关 · 2015-12-10
浏览2202
flying_eagleflying_eagle系统架构师某汽车制造公司
不管你使用哪种技术,最终要实现的是你的需求目标。首先应该去把你的数据进行分类,针对每类数据标识:热度、需要的空间、并发访问情况、需要的响应时间等这些儿指标。然后再针对每一类数据去规划相应的存储类型。...显示全部

不管你使用哪种技术,最终要实现的是你的需求目标。

首先应该去把你的数据进行分类,针对每类数据标识:热度、需要的空间、并发访问情况、需要的响应时间等这些儿指标。

然后再针对每一类数据去规划相应的存储类型。

收起
互联网服务 · 2015-12-09
浏览2490
liyafeiliyafei软件开发工程师IBM
其实您这个需求不止在大数据平台,在很多业务都需要综合考虑存储的可用性,安全性和性能。以一般企业构建大数据平台为例,在存储系统架构之初,就要考虑整体存储的架构,架子搭好了。至于选择怎样的磁盘配比就可以根据业务的需求去填就行了。比如说,选择spectrum scale+spectrum vi...显示全部

其实您这个需求不止在大数据平台,在很多业务都需要综合考虑存储的可用性,安全性和性能。

以一般企业构建大数据平台为例,在存储系统架构之初,就要考虑整体存储的架构,架子搭好了。至于选择怎样的磁盘配比就可以根据业务的需求去填就行了。比如说,选择spectrum scale+spectrum virtualize作为存储架构选型,既能满足大数据平台mapr应用,又能提供posix接口,同时还能支持传统的结构化数据应用。同时底层存储设备可以选择flash,服务器本地磁盘,高端、中端磁盘设备都可以。

收起
硬件生产 · 2015-12-08
浏览2592

提问者

pwey
系统架构师中体骏彩
擅长领域: 存储灾备虚拟化

问题来自

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2015-12-08
  • 关注会员:3 人
  • 问题浏览:7391
  • 最近回答:2015-12-10
  • X社区推广