海量的文档文件如何长久保存和快速调用?

参与8

2同行回答

hang0912hang0912技术经理苏州互盟信息存储技术限公司
分级存储策略:经过研究发现比较科学的储存机制是:在线——近线——离线:1、 一般在线存储设备为磁盘和磁盘阵列等磁盘设备。在线储存安全性较差,价格相对昂贵,但实效性最高。2、 近线存储就是指将那些并不是经常用到,或者说数据的访问量并不大的数据存放在性能较低的存储设备上...显示全部

分级存储策略:
经过研究发现比较科学的储存机制是:在线——近线——离线:
1、 一般在线存储设备为磁盘和磁盘阵列等磁盘设备。在线储存安全性较差,价格相对昂贵,但实效性最高。
2、 近线存储就是指将那些并不是经常用到,或者说数据的访问量并不大的数据存放在性能较低的存储设备上。对这些的设备要求是寻址迅速、传输率高。因此,就意味着近线存储设备首先要保证的是容量。
3、 离线存储主要是用于对在线存储的数据进行备份,以防范可能发生的数据灾难,因此又称备份级的存储。
  分级储存对不同性质的数据采用不同的储存和管理方式,可以降低数据储存的能耗,维护成本,极大地降低了系统的运营成本。此外,降低数据与系统之间的耦合程度,使数据安全得到保障。

光盘库设备同光盘库管理服务器一同组合成光存储NAS系统,并且通过虚拟化技术将光盘库设备在光盘库管理服务器上映射为单独的虚拟文件系统(体现为一个单独的盘符),可以向外提供网络路径,所以可以在数据源端上通过网络驱动映射的方式,将光盘库文件存储路径挂载到数据源端本地,使用起来就像操作数据源端本地硬盘一样简单。由于光盘库设备是通过机械手自动移动盘匣的方式,来实现存储介质的交换,所以对数据请求的响应时间要低于硬盘,一般近线数据读取的响应时间在1~2分钟左右,所以为了通过光盘库管理软件的缓冲技术可以保证近期内的数据在刻录到光盘匣后也会放置于光盘库管理服务器的缓冲空间内(即硬盘存储介质上)实现光磁混合式存储方式,保证近期被写入和被频繁访问的数据处于在线状态,能够被快速读取。缓存空间可以通过服务器本身硬盘空间提供,也可以外接磁盘阵列进行提供。
收起
硬件生产 · 2017-11-14
浏览1606
baizhaoxianbaizhaoxian联盟成员容灾备份管理工程师
1、采用小文件自动组包技术,把多个小文件合并成一个较大的网络请求,这样可以有效的利用网络的带宽,降低网络延迟对于性能的影响。同时在打包过程中自动进行压缩和属性合并等操作,提高单个网络请求的效率。这种方法也完全不消耗任何多余空间。2、采用多个线程和流水线并发技术...显示全部

1、采用小文件自动组包技术,把多个小文件合并成一个较大的网络请求,这样可以有效的利用网络的带宽,降低网络延迟对于性能的影响。同时在打包过程中自动进行压缩和属性合并等操作,提高单个网络请求的效率。这种方法也完全不消耗任何多余空间。
2、采用多个线程和流水线并发技术,使得对文件的IO延迟、网络延迟等操作全部可以在多个线程并发进行,提高CPU、网络和磁盘资源的利用率。

收起
互联网服务 · 2017-11-22
浏览1654
王希瑞 邀答

提问者

建奎生
数据库工程师长安

问题来自

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2017-11-06
  • 关注会员:3 人
  • 问题浏览:4219
  • 最近回答:2017-11-22
  • X社区推广