如何设计链路日志的实时计算逻辑也是亟待解决的难题?

链路日志规模大,计算分析复杂,存储容量大。链路日志采集后,日志量成千倍增长,而业务决策、故障排查、扩缩容等都需要可靠且实时的计算能力,如何设计链路日志的实时计算逻辑也是亟待解决的难题。...显示全部

链路日志规模大,计算分析复杂,存储容量大。链路日志采集后,日志量成千倍增长,而业务决策、故障排查、扩缩容等都需要可靠且实时的计算能力,如何设计链路日志的实时计算逻辑也是亟待解决的难题。

收起
参与10

查看其它 2 个回答ljosef的回答

ljosefljosef系统架构师某股份制银行

实时计算框架flink可以给出一定的参考,通过可扩展性的计算和模版化的规则引擎提供实时计算的能力。一种可参考的技术框架可以设计如下:
beat->kafka->flink->alert
             |
           ES

银行 · 2021-03-20
浏览802

回答者

ljosef
系统架构师某股份制银行
擅长领域: 云计算容器容器云

ljosef 最近回答过的问题

回答状态

  • 发布时间:2021-03-20
  • 关注会员:4 人
  • 回答浏览:802
  • X社区推广