数据去重 - 主题 - twt企业IT交流平台

热点

42 会员关注

在上一篇文章“重复数据删除技术详解（一）”中，介绍了重复数据删除技术的基本原理和主要分类，本篇文章就块级重复数据删除技术（后文简称“重删”）的实现原理进行讲解。块级重删是指将数据流或者文件根据某种方式进行切片(也叫分块)，以数据块为单位进行hash计算，以此找到相同的数据...(more)

备份·2020-06-10

Q先生 · 某公司　擅长领域：备份, 灾备, 数据库

42 会员关注

在之前的文章“备份系统中的常见功能特性”中简单介绍了下重复数据删除的概念，本文就重复数据删除（也叫数据去重）技术进行深入讲解。概述重复数据删除（后文简称“重删”）是灾备系统中非常重要的一项能力，它通过删除数据集中的重复数据达到缩减数据量的效果，以此满足日益增长的数...(more)

系统集成重复数据删除·2018-04-27

1223 会员关注

当前的重删技术包含源端重删和服务端端重删两类。以tsm为例（NBU也类似），tsm从v6版本开始支持重删，最早只支持服务端重删，后来开始支持源端重删。v7版本的7.1.3开始新增在线的重复数据删除功能，7.1.5新增了在线的压缩功能。重删可以有效的利用空间，但会以牺牲部分主机的性能为代...

IT咨询服务重复数据删除·2018-03-26

· 江西农信　擅长领域：存储, 灾备, 双活

1053 会员关注

重删功能主要是解决闪存SSD寿命较短的问题。闪存SSD的数据写入和更新是电子式擦除方式，必然带来数据块的频繁擦除动作，而数据块的擦除是有次数限制的，所以寿命自然不长，寿命到了，数据块也就无法使用了，无法使用的数据块达到一定程度时，整个SSD盘也就寿命到期了，需要更换。而重删...