NAS存储切换对象存储?

1、存量应用系统接口怎么改造
2、nas存储里面的存量文件如何同步到对象存储
3、对象存储如何实现备份和双活

参与12

2同行回答

zrosinesszrosiness系统架构师JSRCB
1)存量应用系统,不建议做接口改造。涉及到单位开发人员,应用厂商等技能和掌握程度。工作量大,存在不确定性2)nas存量文件可通过编写简单程序调用S3接口,上传至对象存储。也可使用一些开源工具同步3)对象存储本身就是分布式,多副本,通常不需要做额外备份。不同的厂商有不同的要求和...显示全部

1)存量应用系统,不建议做接口改造。涉及到单位开发人员,应用厂商等技能和掌握程度。工作量大,存在不确定性
2)nas存量文件可通过编写简单程序调用S3接口,上传至对象存储。也可使用一些开源工具同步
3)对象存储本身就是分布式,多副本,通常不需要做额外备份。不同的厂商有不同的要求和实现手段,涉及到距离和带宽等因素,大体上有两种方式:一,可将副本放在异地机房;二,可新建一套对象存储实现

收起
银行 · 2018-12-05
浏览2508
孟威孟威系统架构师IT
存量应用系统接口改造:对企业现有系统主要的改变和影响体现在应用改造方面,需要根据用户的具体应用场景进行分析,譬如用户是做备份、归档、还是代替现有文件系统存储海量数据等。1.如果用户的应用支持标准的对象存储接口,则不需要更改应用,将COS直接使用和访问;2.如果用户具备C...显示全部

存量应用系统接口改造:
对企业现有系统主要的改变和影响体现在应用改造方面,需要根据用户的具体应用场景进行分析,譬如用户是做备份、归档、还是代替现有文件系统存储海量数据等。
1.如果用户的应用支持标准的对象存储接口,则不需要更改应用,将COS直接使用和访问;
2.如果用户具备COS的合作伙伴支持的应用,比如备份、归档类的应用作为gateway;
3.如果用户要求不更改应用,兼顾老系统应用访问接口,且需求受益于对象存储,可选择IBM GPFS、第三方NAS网关无缝集成COS,将对象存储作为二级存储池。比如,对于影像系统来说,用户使用GPFS做并行分布式文件系统,可在后端加入COS作为一个分层的存储解决方案。GPFS负责性能和NFS等文件协议,而COS负责无限制扩展对象存储池。GPFS TCT功能通过策略自动实现GPFS和COS的迁移和回迁,全过程对应用是透明的。GPFS+TCT+COS整体解决方案兼顾应用访问兼容性和性能,保持现有应用的访问模式不变,应用开发无需适配对象存储。
4.对多数用户来说,需要对应用的接口进行更改,改为标准的S3等COS支持的标准接口。但是从长远角度来说,对象存储是未来突破数据临界点的一个发展方向,用来整合海量的非结构化数据,如果数据存在一个统一的平台上,具备标准的接口,那么未来就可以实现跨平台的应用数据共享。此时应用改造的解决方式是,对于新上线的系统对非结构化数据的访问采用对象存储,对于存量的系统,逐步推进变更的方式。

nas存储里面的存量文件如何同步到对象存储?

典型的NAS设备在线迁移至对象存储说明如下图所示:
gqlre1dp2qq

gqlre1dp2qq

DB:修改访问地址,文件系统地址转到对象存储服务的url。
File Gate Way说明:
 指定源和目标:
 源端:NAS设备,采用NFS/CIFS协议,由文件系统组成,目录结构Folder/Directory/File
 目标:COS设备,采用Swift/S3协议,Buckets组成,存放Object ID,http://hostIP/namespace/AABB
 程序判断:
 已经迁移完成的文件直接提供对象存储访问
 未迁移过来的文件通过回源的方式提供访问
 完整性校验,完成迁移
迁移至对象存储的设计,移除迁移链路的不稳定性和风险,因此COS迁移机制支持多种功能,保障用户成功完成数据的在线迁移。
 查看数据迁移进度
 文件一致性校验
 失败重传
 断点续传
 启动HTTPs安全传输等功能
为了提升迁移效率机制,分布式并行传输有利于加快迁移速度,迁移至对象存储支持:
 可迁移全量或增量数据
 根据网络环境自定义调整大小文件的阈值
 针对大文件小文件分别定义并发度
 实现大文件分块、小文件并发传输
 自定义迁移执行时间和带宽限制
 监控生产数据压力,保证自身业务运行不受迁移数据带宽占用影响等最佳迁移方式
IBM COS为应用提供完整的NAS和对象存储的切换方案,规避新技术引入的风险,保障业务连续性。IBM会帮助用户更好的针对应用和架构的具体情况进行针对性的改造、部署、测试等。

对象存储如何实现备份和双活?
IBM COS对象存储的数据保护机制不仅提供采用跨站点的纠删码算法,使得对象存储根据多节点部署,某存储节点发生故障时生产不受影响;还可以提供同步、异步的镜像配置技术;提供多版本的功能,规避逻辑错误,保证非结构化数据被误删除后可进行恢复,数据可靠性得到了很高的提升。

收起
IT咨询服务 · 2018-12-05
浏览2510

提问者

宁泽阳
系统工程师某科技公司
擅长领域: 存储服务器分布式系统

问题来自

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2018-12-03
  • 关注会员:3 人
  • 问题浏览:3754
  • 最近回答:2018-12-05
  • X社区推广