开展本次性能调优原因是发现我们目前有些OLAP的分析查询，数据流是从Hive-->oracle回环。为什么会有这种回环链路依赖，大家都说是Impala有不少查询很不稳定，性能低，可能是资源不足造成。所以又把Hive的数据再反向导回oracle。真相究竟如何？我们来找找。借用clouderaManager，...(more)

【摘要】：过去的历史阶段，IT行业对于数据库的选择相对比较单元化，基于行式存储的关系型数据库基本一统江湖。因此OLTP&OLAP业务均以关系型数据库理论为基础来设计数据视图以及数据模型。随着数据量的爆发式发展，人们逐渐发现传统行式存储在处理特殊业务场景时候的不足，尤...(more)

测试背景ApacheCarbonData是开源的大数据高效存储格式解决方案。针对当前大数据领域分析场景需求各异而导致的存储冗余问题，CarbonData提供了一种新的融合数据存储方案，以一份数据同时支持“交互式分析、详单查询、任意维度组合的过滤查询等”多种大数据应用场景，并通过丰富...(more)

OLAP是基于数据仓库的信息分析处理过程，支持复杂的分析操作，侧重决策支持，并且提供直观易懂的查询结果。其基本特点是：1.本身不产生数据，其基础数据来源于生产系统中的操作数据；2.基于查询的分析系统；3.复杂查询经常使用多表联结、全表扫描等，牵涉的数据量往往十分庞大；4.响应时间...(more)

最近的一个项目是风控过程数据实时统计分析和聚合的一个OLAP分析监控平台，日流量峰值在10到12亿上下，每年数据约4000亿条，占用空间大概200T。面对这样一个数据量级的需求，我们的数据如何存储和实现实时查询将是一个严峻的挑战。经过对Elasticsearch多方调研和超过几百亿条数...(more)

在计算机领域，OLAP指的是对多维数据的分析查询。一般来说，OLAP分为ROLAP和MOLAP。其中ROLAP指的是RelationalOLAP，具体说来是在关系型数据库之上的多维建模。比如IBMCognosFrameworkManager的MDR建模。MOLAP，则直接基于多维数据库。比如TM1、Essbase、PowerCube。OLAP工具是...(more)

背景不论你是投资方、还是CTO或者架构师，如果你需要在非常核心的场合选择一款数据库产品，或者你要投资一个数据库产品或团队，本文一定会为你提供一个很好的指导。现在的数据库分类在dbranking上已经分得很细：https://db-engines.com/en/rankingCompleterankingRelationalDBMS...(more)

联机分析处理 (OLAP) 的概念最早是由关系数据库之父E.F.Codd于1993年提出的，OLAP的提出引起了很大的反响，OLAP作为一类产品同联机事务处理 (OLTP) 明显区分开来。当今的数据处理大致可以分成两大类：联机事务处理OLTP、联机分析处理OLAP。OLTP是传统的关系型数据库的主要应用...(more)

1. Introduction宽泛的讲，数据仓库是一种数据库，它与单位的操作数据库分别维护。数据仓库系统允许将各种应用系统集成在一起，为统一的历史数据分析提供坚实的平台，对信息处理提供支持。Data warehousing is acollection of decision support technologies, aimed at enabling...(more)

Palo是一款开源OLAP服务器，多语言是它的一个特性。PaloXmla是Smartbi专门针对Palo Server开发了一个MDX查询引擎，类似Microsoft XML For Analysis SDK，提供了使用MDX语句访问Palo Server的能力。为了提供类似Microsoft Sqlserver Analysis Service的多语言能力，Pal...(more)