应用的高可用分为本地高可用、同城高可用、异地高可用；对应到容器部署环境就是集群内高可用、同城跨集群高可用、异地高可用等方案。本地高可用上，NAS的多读多写能力可以支撑POD在集群内的快速漂移，一分钟以内恢复业务；华为企业级NAS存储支持集群内双活，即一个Kafka的Broker P...(more)

应用的高可用分为本地高可用、同城高可用、异地高可用；对应到容器部署环境就是集群内高可用、同城跨集群高可用、异地高可用等方案。本地高可用上，NAS的多读多写能力可以支撑POD在集群内的快速漂移，一分钟以内恢复业务；华为企业级NAS存储还支持集群内双活，即一个Kafka的Broker...(more)

在弹性扩缩容问题上，K8S支持通过修改Broker配置Yaml文件中的Broker数量就可以实现扩缩。扩容时POD、PVC和PV都会根据Yaml文件的配置自动创建，无需人工干预。缩容时由于涉及到持久化数据，需要考虑数据留存问题；如果数据需要继续保留，需要对相关分区进行迁移。...(more)

可评估滴滴开源的可视化工具：https://doc.knowstreaming.com  

Kafka性能的主要指标是吞吐量（带宽）和时延。分布式存储是否满足需求，首先需要评估性能需求，根据Kafka消息的IO大小、存储的软硬件配置、批量参数、网络配置等综合评估可达到的吞吐量和时延情况。Kafka最核心的问题是数据访问的低时延，普通的分布式存储，由于三副本或者EC机制，需...(more)

在容器云环境下性能的影响因素有很多，例如虚机容器相对于裸金属容器就会带来额外的10%-15%的开销，因此从性能的角度，裸金属容器是更好的选择。回到存储，首先为了保证性能，无论是存算一体还是存算分离都建议使用SSD盘来保证性能。在成本方面，服务器本地盘看似便宜，但因为其相对低...(more)

数据可靠性是专业存储相对于本地盘的核心优势。专业存储在盘级、控制器级、系统级通过软件和硬件的设计和优化实现多层面做数据可靠性保证，其中就包括您提到的防数据丢失、容错等能力。但相对本地盘，由于IO路径变长，在时延上会略高于本地盘；因此需要通过TCP协议卸载、NVMe ov...(more)

弹性是使用容器部署Kafka带来的一大优势。如果Broker处理能力不足，简单的修改Broker配置Yaml文件中的Broker数量就可以实现自动扩容，POD、PVC和PV都可以自动创建。扩容本身对业务无影响；扩容后如果要做数据在节点间的再均衡会触发Broker和 Partition的对应关系发生变化，导致...(more)