首先, Kafka 的弹性和容错能力是kafka自身的能力,这一点和容器化并没有直接关联,如果二者的优势可以结合,就要选择合适的集群模式。比如说,如果有一些流量大的数据链路,在容器云上可以配置比较多的 Pod 和 CPU 数量。当突发流量到来时,使用容器云弹性可以快速扩充 Mirrormaker ...显示全部
首先, Kafka 的弹性和容错能力是kafka自身的能力,这一点和容器化并没有直接关联,如果二者的优势可以结合,就要选择合适的集群模式。 比如说,如果有一些流量大的数据链路,在容器云上可以配置比较多的 Pod 和 CPU 数量。当突发流量到来时,使用容器云弹性可以快速扩充 Mirrormaker 的数据同步能力。还有一种方式,当流量增大时,可以通过修改 Pod 数量来增加该条链路上的 Mirrormaker 进程数量,以此加快数据同步的速度。 这是最简单最直接的弹性伸缩。