数据管理过程中,如何解决大量数据查询速度很慢的问题?

海量数据按照生命周期,迁移到离线存储,越来越多的海量文件造成metadata越来越多,会造成数据查询越来越慢,就像是打开成千上万个文件的文件夹,可能读取非常消耗时间,在数据的管理过程中,对于这类问题有什么解决方案呢?

参与12

5同行回答

y18511664518y18511664518技术总监长城超云
标题里既然选用了大量数据,就还没到大数据的范畴,建议分类存储,就算已经归档,也要把需要查询的表分区,建立合适索引,你在怎么查询也不能查询很多年以前的数据吧,具体方案只能根据你实际情况来做,这方面应该联合你们的业务和DBA进行详细商讨,然后制定计划。...显示全部

标题里既然选用了大量数据,就还没到大数据的范畴,建议分类存储,就算已经归档,也要把需要查询的表分区,建立合适索引,你在怎么查询也不能查询很多年以前的数据吧,具体方案只能根据你实际情况来做,这方面应该联合你们的业务和DBA进行详细商讨,然后制定计划。

收起
金融其它 · 2017-06-14
浏览2953

提问者

zhenyu6688
运维工程师中亦安图
擅长领域: 备份存储软件定义存储

问题来自

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2017-06-13
  • 关注会员:6 人
  • 问题浏览:6614
  • 最近回答:2017-06-26
  • X社区推广