系统集成 SVC

处理历史数据的问题

处理历史数据的问题通常数据量都很大，可以采用哪些方式或技术对历史数据进行必要的处理，重复数据删除技术是否可用等？

收起

关注 3

参与8

查看其它 1 个回答sxtycxx 的回答

sxtycxx 解决方案经理人工智能（计算机视觉）

重复数据删除技术是作用于数据初始写入的时候和原有的数据进行对比分析，是否有重复数据，如果有即本次只存放数据的指针而且

我理解针对大量的历史数据，可以通过借助了大数据分析处理工具和技术，结合业务需求，对数据进行有效大分析，进而提取和业务相关的价值，此时重复数据删除应该是没有什么用

互联网服务 · 2016-04-20