业务需求,存储性能不足,大家有存储或者方案推荐吗?

业务需求,存储性能不足,大家有存储或者方案推荐吗?
现在是分布式存储,数据量110TB左右,每年以40TB左右的速度增长
主要是海量小文件组成,文件平均大小为1M左右,文件数量2亿8千万左右!

现在存储的性能和容量都有点跟不上,想换一个存储,大家有好的存储推荐或者好的解决方案吗?

参与112

14同行回答

feidaodaofeidaodao系统运维工程师GA
什么业务类型?每年40t这么高,应该不会是互联网企业吧,那些都是pb级了猜测。。。分布式存储现在解决不了你的性能问题(不知道优化原因还是你的数据本身就需要高读写?),全ssd我觉得也不现实,能否从需求端考虑呢。。。1是什么样的文件,能压缩保存不?---减少容量2考虑数据按年分层存储...显示全部

什么业务类型?每年40t这么高,应该不会是互联网企业吧,那些都是pb级了猜测。。。

分布式存储现在解决不了你的性能问题(不知道优化原因还是你的数据本身就需要高读写?),全ssd我觉得也不现实,能否从需求端考虑呢。。。

1是什么样的文件,能压缩保存不?---减少容量
2考虑数据按年分层存储不?---得看实际业务需求

收起
金融其它 · 2017-07-12
浏览6398
  • 档案管理系统来的,现在性能还是可以的,但是数据量还有不停的增长,目前的存储可能在以后的一年内就难以支撑了!现在的问题是,元数据量大,双机恢复时间要4、5小时,问题也挺多的,所以想换一个存储来解决这些问题
    2017-07-13
  • 我们上了一个影像检索系统!后续数据会分层存储了。
    2017-09-19
匿名用户匿名用户
针对你提的这个问题,收集了一些大家对这种情况的方案建议,供你参考。1、分布式存储,全用SSD。2、换成对象存储。3、没啥太好的解决方法,小文件ssd固态能提升速度,但是你的容量太大了。4、既然是分布式存储,那就扩节点。5、多配点热点盘,提高IO性能,已经写进来的数据自动导入普通...显示全部

针对你提的这个问题,收集了一些大家对这种情况的方案建议,供你参考。

1、分布式存储,全用SSD。
2、换成对象存储。
3、没啥太好的解决方法,小文件ssd固态能提升速度,但是你的容量太大了。
4、既然是分布式存储,那就扩节点。
5、多配点热点盘,提高IO性能,已经写进来的数据自动导入普通硬盘降低成本。
6、你要保证数据的安全性,还是首选san。分布式IP很浪费的,100T网络肯定要独立出来,成本也不低。除非用容量节点做。

收起
汽车 · 2017-07-12
浏览6270
txdyjsyztxdyjsyz技术总监上海七牛信息技术有限公司
[此回答已删除]
浏览2640
myciciymyciciyIT顾问某金融科技公司
请问业务是什么应用场景?现在用的什么存储,每年数据增长很快啊.显示全部

请问业务是什么应用场景?现在用的什么存储,每年数据增长很快啊.

收起
银行 · 2017-07-12
浏览7004

提问者

永远在学习
系统运维工程师系统管理员
擅长领域: 服务器系统管理AIX

问题来自

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2017-07-12
  • 关注会员:17 人
  • 问题浏览:16902
  • 最近回答:2020-05-02
  • X社区推广