目前我司数据量并不大,但有些特殊的需求 多维度(将近200个常用维度),事实表N年历史数据数据量过亿,常用的数据模型三年数据量50个G左右。其实数据量算小了,虽说传统的数仓技术也可以覆盖。
但是目前受限于使用手段,比如这200个维度自由组合,快速响应(这个很重要,粒度很细)。目前数仓用的oracle数据量一大就慢甚至无返回。
我们也测试了Cognos11的dynamic cube,对数据质量要求高,使用上也不是多方便。然后我们测试了cdh的impala受限于技术水平性能维度一多反应很慢,然后测试了开源版本spark sql作为查询引擎性能很好,速度也很好,稳定性有欠缺。所以咨询下有没有商业版解决方案or产品,以及是否支持Cognos?
如果有其他数仓产品,也可以推荐,谢谢~~
收起