数据重删技术在源端，还是在目标端进行，或者采用数据库本身的重删技术，如何去考虑？

各有优点吧，如果在源端进行压缩的话，将会减少网络带宽压力，提升数据传输速度，但可能会消耗部分客户端性能，如果才用目标端压缩，对数据量大的数据库，网络带宽压力较大，同时对目标端服务器性能提出高要求，因为有可能同时备份多个数据库。一般建议在客户端进行压缩。至于是否采取数据库压缩技术还是备份本身压缩技术，据我行实践来看，采用数据库压缩技术较好，毕竟数据库对本身的压缩技术兼容性应该是最好的。但是不支持压缩技术的数据库，还是要采用备份产品的压缩技术。

最好的处理办法是在入库的时候控制重复。
针对已有的重复可在数据库侧删除，如果客户端有缓存的话需要刷新下缓存。