对于多数据源的时间不一致的数据如何处理和分析?

监控数据采集和处理方面,一般采用怎么样的数据频率、模型训练的数据量和异常检测的数据量达到多少?对于多数据源的时间不一致的数据如何处理和分析?显示全部

监控数据采集和处理方面,一般采用怎么样的数据频率、模型训练的数据量和异常检测的数据量达到多少?对于多数据源的时间不一致的数据如何处理和分析?

收起
参与11

查看其它 1 个回答cherrylook的回答

cherrylookcherrylook软件架构设计师中国人寿保险集团

在数据采集的过程中,由于各个监控系统对系统日志、数据库日志和应用日志等采集的时间点和频率都不相同,针对各个监控系统的指标,我们按照较粗粒度的监控记录进行了时间段的划分,再将时间粒度较小的指标数据进行了汇总处理。模型训练的历史数据采用了近三个月的监控数据,采用当前时间点的数据通过模型判断是否为异常。

保险 · 2019-04-17
浏览2279

回答者

cherrylook
软件架构设计师中国人寿保险集团

cherrylook 最近回答过的问题

回答状态

  • 发布时间:2019-04-17
  • 关注会员:3 人
  • 回答浏览:2279
  • X社区推广