对计算资源(虚拟机或者物理主机,X86)的配置要求是否有计算模型?

电信行业大数据事件处理上无论采用storm还是spark技术,对计算资源(虚拟机或者物理主机,X86)的配置要求是否有计算模型?主机之间的网络资源(带宽,吞吐),存储资源的要求是否有基本要求?...显示全部

电信行业大数据事件处理上无论采用storm还是spark技术,对计算资源(虚拟机或者物理主机,X86)的配置要求是否有计算模型?主机之间的网络资源(带宽,吞吐),存储资源的要求是否有基本要求?

收起
参与11

查看其它 2 个回答loveryue的回答

loveryueloveryue软件开发工程师IBM

考虑几点吧

1, CPU要强,最好主频高,支持并发多线程。

2. 内存要大,特别是Spark,基本数据都在内存中,内存大小直接对性能有影响。

3. 内部通道要宽,CPU到内存,CPU到IO的数据通道。

4. 网络要好,在分布式环境下,节点间的通信以及数据同步的开销很大,网络带宽很容易成为瓶颈。

互联网服务 · 2015-11-06
浏览2447

回答者

loveryue
软件开发工程师IBM
擅长领域: 服务器数据库大数据

loveryue 最近回答过的问题

回答状态

  • 发布时间:2015-11-06
  • 关注会员:4 人
  • 回答浏览:2447
  • X社区推广