kafka容器化后存储选型?

分布式存储、NAS存储、本地盘等,kafka容器化后如何进行存储选型保证其性能,扩容,数据安全以及容量管理?

参与11

3回答

北京不眠夜@博云北京不眠夜@博云  产品经理 , 公司
看需求。 应用对kafka使用量不大,没有太高的性能要求(IO、延时),一般用分布式存储即可。或者,使用旧有NAS存储也可以。 如果应用使用kafka很重,对IO、延时都有较高的要求,一般使用本地存储。原生的本地存储方案功能比较简单,可以看看carina。...显示全部

看需求。
应用对kafka使用量不大,没有太高的性能要求(IO、延时),一般用分布式存储即可。或者,使用旧有NAS存储也可以。
如果应用使用kafka很重,对IO、延时都有较高的要求,一般使用本地存储。原生的本地存储方案功能比较简单,可以看看carina。

收起
软件开发 · 2023-05-09
浏览195
zftangzftang  其它 , 小白一枚
kafka容器化以后性能和虚拟化之间没有任何变化,因为容器化技术本身是个进程级别的隔离技术,机器还是那个机器,网络还是那个网络,运行的程序,容器也只是个进程。显示全部

kafka容器化以后性能和虚拟化之间没有任何变化,因为容器化技术本身是个进程级别的隔离技术,机器还是那个机器,网络还是那个网络,运行的程序,容器也只是个进程。

收起
互联网服务 · 2023-05-09
浏览191
洪月洪月  企业存储产品规划 , 华为数据存储解决方案中心
首先,K8S对存储做了抽象,不关心集中式还是分布式,主要还是看性能、可靠性、扩展能力、功能等能否匹配业务要求。在这个前提下,本地盘虽然性能较好,但可靠性、扩展能力、跨节点共享能力等都问题突出,存算分离是更好的选择。扩容方面,无论是分布式存储、NAS存储(本文主要是指企业级...显示全部

首先,K8S对存储做了抽象,不关心集中式还是分布式,主要还是看性能、可靠性、扩展能力、功能等能否匹配业务要求。
在这个前提下,本地盘虽然性能较好,但可靠性、扩展能力、跨节点共享能力等都问题突出,存算分离是更好的选择。
扩容方面,无论是分布式存储、NAS存储(本文主要是指企业级NAS存储)都具备PB级以上的扩容能力,单卷也支持弹性扩容,都可以满足要求。
从时延角度,由于分布式存储涉及到跨节点副本转发,时延比企业级NAS高,需要看是否满足业务需求。
在安全方面,NAS存储相对块存储更优,可以支持租户隔离、多种鉴权模式、防病毒、防勒索检测等功能。
在容量管理上,我们推荐使用租户级配额来实现一个Kafka集群的容量管理,这样存储管理员只需要管理整个集群可用的存储容量,而不需要限制每个PV的大小,管理更简单。

收起
硬件生产 · 2023-05-12
浏览165

提问者

whitewindmind
系统工程师浙商证券
擅长领域: 存储灾备云计算

问题来自

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2023-05-08
  • 关注会员:4 人
  • 问题浏览:970
  • 最近回答:2023-05-12
  • X社区推广