目前我行在用的是华为的FusionInsight大数据平台C8.0版本,想基于此平台之上,构建一个即席查询应用,主要为满足行内业务人员对数据的快速查询和快速分析,目前苦于架构的设计(还缺少加速引擎),考虑过MPP,希望业界的大佬们,能给出意见,谢谢!
我们银行目前也在用FusionInsight大数据平台C8.0版本,实时数据可以放到HBASE里面,用HIVE ON HBASE的方式去处理实时的数据,SPARK SQL处理轻量级别的数据没有问题,大量的数据SPARK SQL 不合适,SPAKR 的计算单元RDD每一个动作都会有一个RDD产生对内存要求很高。
关于TWT使用指南社区专家合作厂商入驻社区企业招聘投诉建议版权与免责声明联系我们 © 2024talkwithtrend — talk with trend,talk with technologist京ICP备09031017号-30