如何更智能的规划数据的分布?

企业生产数据逻辑上可分为 在线数据、近线数据和离线数据。 我们是否可以考虑从存储或者应用角度将数据剥离并分层,不同的数据类型,存放在不同的存储上。比如,在线存储等访问较为频繁的热点数据放在闪存阵列中,进线数据放在普通FC阵列中,离线数据放在低端NAS存储或者带库中。...显示全部
企业生产数据逻辑上可分为 在线数据、近线数据和离线数据。 我们是否可以考虑从存储或者应用角度将数据剥离并分层,不同的数据类型,存放在不同的存储上。

比如,在线存储等访问较为频繁的热点数据放在闪存阵列中,进线数据放在普通FC阵列中,离线数据放在低端NAS存储或者带库中。

这只是一直比较理想层面的设想,具体如何规划并实施还有待讨论。
比如,利用SVC等存储虚拟化产品提供的存储分层级热点数据自动迁移功能,在一定程度上能提高生产系统的使用效率,但是如何更智能的规划数据的分布,还是存在很大的难度。
或者说,利用GPFS软件来实现数据的分布、迁移及备份等。 GPFS可以连接不同的存储(如闪存、FC及NAS等),同时可以在一定程度上控制数据的分布,比如将近线数据存放在
相对性能差一点的存储,当程序请求访问到该部分数据时,再将这部分数据拷贝到高性能存储并提供访问,对于离线数据可直接打通与备份软件的接口,等等诸如此类的功能,

伴随而来的问题是,规划和实施的难度很大,对管理人员的技术要求也相对较高,同时实施后性能提升的效果到底有多大,可预见性也难以量化。希望大家能针对这个来进行一些交流和看法!收起
参与13

查看其它 6 个回答pwey的回答

pweypwey系统架构师中体骏彩
根据经验,分层存储对生产数据库的提升效果一般都非常明显,热点数据的响应时间可以从硬件上解决一定的应用性能问题。但不是绝对,如果性能问题原因不是IO问题的时候则不会有明显效果。
从某些角度而言,传统存储的优势在于技术的成熟及硬件的更新上,个人对GPFS觉得是个比较好的选择,但需要管理人员技术水平要求较高。
NAS存储对于传统行业,结构化数据而言,个人感觉意义不大,如果真正需要存储数据,虚拟带库和备份软件的结合感觉性价比更好,或者自己建设备份体系(备份恢复服务器等)。
以上仅仅个人观点,欢迎大家指正。
政府机关 · 2015-08-05
浏览1494

回答者

pwey
系统架构师中体骏彩
擅长领域: 存储灾备虚拟化

pwey 最近回答过的问题

回答状态

  • 发布时间:2015-08-05
  • 关注会员:1 人
  • 回答浏览:1494
  • X社区推广