1   离群点和离群点分析1.2    离群点的类型             a.全局离群点                &nb...(more)

这几天研究了一家美国的大数据公司1010data，它在产品白皮书中提出了新一代数据仓库的概念（NEXT-GENERATION DATA DISCOVERY），相对于第一代数据仓库，具有如下一些特征：l  用户可以针对任何问题进行分析和查询，也就是说，分析系统要提供更加友好的操作体验，更加明细的数据粒度；l&...(more)

凡是建设数据仓库，一定会提到维度建模方法。这一方法是Kimball最先提出的，其最简单的描述就是，按照事实表、维度表来构建数据仓库、数据集市。在维度建模方法体系中，维度是描述事实的角度，如日期、商品、地址等，事实是要度量的指标，如用户数、销售额等。按照一般书籍的介绍，维度...(more)

1        引言数据仓库建设中的ETL(Extract, Transform, Load)是数据抽取、转换和装载到模型的过程，整个过程基本是通过控制用SQL语句编写的存储过程和函数的方式来实现对数据的直接操作，SQL语句的效率将直接影响到数据仓库后台的性能。 目...(more)

简介： 本文的主要内容不是介绍现有的比较流行的主要行业的一些数据模型，而是将笔者在数据仓库建设项目中的一些经验，在这里分享给大家。希望帮助大家在数据仓库项目建设中总结出一套能够合乎目前业界规范的，满足大部分行业数据仓库建设标准的一种方法。所谓水无定势，兵无...(more)

传统数据仓库项目的优化手段 （针对 Oracle+DataStage ） 普通手段分区，HASH-JOIN，数据仓库函数，物化视图，位图索引等等为大伙在数据仓库常用的技术，而下面列举的tips为项目中常用的优化手段/技巧，绿色背景highlight的部分属于非常规手段，使用场景较为极端，需谨慎考量。 Oracl...(more)

如果没有高质量的数据，要构建客户关系是很困难的。公司需要清理数据库，基于完整、实时的信息构建关联，否则就会带来业务风险。历史系统难题如果企业面临的不只是劣质数据，还有原有IT应用程序投资，那数据质量和MDM就会变得异常困难。RelianceHome Comfort是多伦多一家制冷制热...(more)

0 引 言    增量抽取是数据仓库ETL(extraction，transformation，loading，数据的抽取、转换和装载)实施过程中需要重点考虑的问题。在ETL过程中，增量更新的效率和可行性是决定ETL实施成败的关键问题之一，ETL中的增量更新机制比较复杂，采用何种机制往往取决于源数...(more)

每个数据库，都创建和维护一组系统编目表。这些表包含关于数据库对象(例如表、视图、索引和包 ) 的定义的信息以及关于用户对这些对象的访问类型的安全信息。 1、对于DB2数据库来说，这些表存储在 SYSCATSPACE 表空间中，并采用保留的系统模式名： SYSIBM、SYSFUN和SYSPROC：一组...(more)

根据哈里斯互动公司刚刚公布的一项针对154家的企业调查显示，超过一半以上的受访企业属于中小型企业。调查显示他们是如何界定“大数据”的。有28%的受访企业表示这意味着“交易数据的大规模增长”。而有24%的人认为这是指管理海量数据的新技术，19%的受访企业将其定义为“合...(more)