如何充分利用有限的异地带宽,解决好异地数据的传输和同步?

如何充分利用有限的异地带宽,解决好异地数据的传输和同步?这个大家是否有很好的方案,如何做的?显示全部

如何充分利用有限的异地带宽,解决好异地数据的传输和同步?这个大家是否有很好的方案,如何做的?

收起
参与7

查看其它 1 个回答去世的闲人的回答

去世的闲人去世的闲人售前技术支持星辰天合(北京)数据科技有限公司
如果是从存储端讲的话,异步复制带宽确实会成为瓶颈。因为存储一般采用快照的形式来做异步复制,复制的数据都是全量数据,带宽无法节约。一些高端存储有重删技术,也只能是把数据复制到异地之后再进行重删,所以带宽确实会成为瓶颈。
**若带宽确实有限,只能是最大限度的降低需要传输的数据量**。
备份设备就比较好解决这个问题。备份重删技术分为源端重删和目的端重删:
源端重删:在数据备份到备份设备前就在主机端进行重删,利用生产主机的CPU+内存把需要备份的数据进行重删,重删后的数据在传输到本地的备份一体机中。原理也较为简单,就是把数据库进行切片,重复的就进行备份了,只索引指针信息。这么一来备份设备中需要备份的数据量就比较少。需要购买的设备就是异地机房中加一套备份设备就可以。
目的端重删:生产数据把数据全部备份到同机房的备份设备上,备份设备进行重删。然后把重删的数据利用较低的带宽,远程复制到异地。需要采购的设备是,本地数据中心的备份设备+异地数据中心接受的备份设备,两套备份设备
优缺点说明:源端重删,需要采购的备份空间较少(省钱),在备份之前就能重删,需要占用生产服务器一些资源(一般占用1.3G左右的内存,影响不大)。目的端重删:不占用主机资源,但是需要购买较多的备份空间(浪费钱)。
宗旨:想要利用有限带宽进行数据传输和同步,**只能在传输的数据量上下功夫**,既然存储无法解决,就只能依靠备份了。
软件开发 · 2017-05-05
浏览3479

回答者

去世的闲人
售前技术支持星辰天合(北京)数据科技有限公司
擅长领域: 存储大数据软件定义存储

去世的闲人 最近回答过的问题

回答状态

  • 发布时间:2017-05-05
  • 关注会员:3 人
  • 回答浏览:3479
  • X社区推广