互联网服务迁移数据

数据迁移问题求助:老环境的文件目录里面有很多几K的小文件,总计600G左右,如何迁移到新环境?

数据迁移问题求助:有一个老环境的文件目录,里面有很多几K的小文件,总大小在600G左右,如何迁移到新环境?


请问在保证安全不丢数据、保证时间效率的情况下,有哪些好的办法?

参与16

4同行回答

pysx0503pysx0503联盟成员系统工程师第十区。散人
以往有过处理小文件的经历。很痛苦。我们的环境中有一个业务。大约200G左右的数据。文件数量大约百万级,但是查看一下主文件属性。都要很长时间。更别提拷贝了。效率极其低下。不了解你的具体环境,可以考虑多任务并行迁移吧。...显示全部

以往有过处理小文件的经历。很痛苦。我们的环境中有一个业务。大约200G

左右的数据。文件数量大约百万级,但是查看一下主文件属性。都要很长时间。更别提拷贝了。效率极其低下。

不了解你的具体环境,可以考虑多任务并行迁移吧。

收起
系统集成 · 2017-03-24
浏览1723
yueliushayueliusha技术经理北京太极信息系统技术有限公司
其实也可以考虑使用类似CV等备份软件的快照备份功能。毕竟不是移动数据,而是通过拷贝快照等机制来处理小数据,相对安全。显示全部

其实也可以考虑使用类似CV等备份软件的快照备份功能。毕竟不是移动数据,而是通过拷贝快照等机制来处理小数据,相对安全。

收起
系统集成 · 2017-03-24
浏览1623
wangqlwangql系统工程师NULL
小文件确实头疼,建议两种方式1.打包压缩后传输  2.采用基于image的备份恢复,600g也不是很大显示全部

小文件确实头疼,建议两种方式

1.打包压缩后传输  

2.采用基于image的备份恢复,600g也不是很大

收起
IT咨询服务 · 2017-03-24
浏览1618
yujin2010goodyujin2010good系统工程师大型零售巨头
我们迁移过上t的小文件,基本都是先压缩,copy过去显示全部

我们迁移过上t的小文件,基本都是先压缩,copy过去

收起
互联网服务 · 2017-03-24
浏览1584

提问者

eianbo
IT顾问PBCCRC
擅长领域: 服务器中间件监控

问题来自

问题状态

  • 发布时间:2017-03-24
  • 关注会员:5 人
  • 问题浏览:5689
  • 最近回答:2017-03-24
  • X社区推广