大数据平台中hadoop后续演进思路是怎么样的？有没有考虑到迁移到spark？

随着spark技术越来越成熟，其采用的内存计算的方式，效率比hadoop快10倍，而且文件系统支持建立在hadoop的hdfs上，可从批量处理向实时批量处理过度，我们计划后期hadoop逐步演进为全spark架构，但因为对内存有较高需求，需要对现有机器进行扩容内存，集群中单机内存从现有128G扩容到384G，目前已经在立项中。