大数据模式下ETL对现有数据库管理技术的挑战

我一直主张一个思路，大数据或者说NoSQL其实其本身并不是要替代传统的RDB的，大数据主张的是其强大的计算能力和分布式存储能力，其本质并不是要替换RDB的应用场景，利用其强大的计算能力将计算出来的结果推送给业务线的RDB，业务线的RDB原有的架构不需要太大的变动，只是其原有的计算和清洗任务迁移到了大数据集群而已，对于各种BI也好，前端也罢，我们是搭配合作的过程、

其实技术方式基本上一致，如果非说挑战，那么“转换思路的挑战最大，如何在关系型数据库的思路转变到非结构化存储数据库的思想”，这个过程转换比较有挑战。包括我们熟悉的设计表结构都完全不一样了。