Spark加速大数据在企业落地

IBM在Spark上的措施和行动:核心代码贡献;人才培养;Linux on Power对Spark的优化
Spark对IBM解决方案的影响:IBM把很Spark视为数据分析的操作系统。IBM将很多产品和solution基于Spark设计,为企业提供更好的数据分析服务。
Spark在交通行业的应用:某地市的交通局,每天产生几亿条的数据,需要进行ETL、去重、过滤等准备,再做算法模型,对人、车、路进行分析、统计、预测。流处理用、核心算法模型、交通预测等都用到Spark的相关组建。
Spark在气象行业的应用:某气象局每天处理的数据300TB左右,请求用户在上亿,有实时性的数据分析、历史性的数据,都用到了Spark的不同组建。
IBM Linux on Power和Spark结合的优势:Spark是一种数据密集型的计算,对内存有很高的要求。Power的芯片刚好能够满足这种要求。Linux on Power的性能要比同等CPU的x86高出2倍左右。

    讲师

    曾永华
    资深大数据解决方案架构师,IBM

    相关课程

  • 上线时间:2016-09-19
  • X社区推广