电信行业大数据事件处理上无论采用storm还是spark技术,对计算资源(虚拟机或者物理主机,X86)的配置要求是否有计算模型?主机之间的网络资源(带宽,吞吐),存储资源的要求是否有基本要求?
考虑几点吧
1, CPU要强,最好主频高,支持并发多线程。
2. 内存要大,特别是Spark,基本数据都在内存中,内存大小直接对性能有影响。
3. 内部通道要宽,CPU到内存,CPU到IO的数据通道。
4. 网络要好,在分布式环境下,节点间的通信以及数据同步的开销很大,网络带宽很容易成为瓶颈。
关于TWT使用指南社区专家合作厂商入驻社区企业招聘投诉建议版权与免责声明联系我们 © 2024talkwithtrend — talk with trend,talk with technologist京ICP备09031017号-30