浙商银行数据仓库系统高层架构设计
资料简介:
目录
1 概述
1.1 背景
1.2 目的
1.3 适用对象
1.4 范围
1.5 叁考文档
2概念性体系构架
2.1 数据源
2.2 数据仓库
2.3 分析
2.4 交互参考功能
3 参考体系架构
4 技术体系架构
4.1 源数据和数据接口
4.1.1 数据源
4.1.1.1 数据源范围
4.1.2 文件缓冲区
4.1.3 接口文件区
4.2 数据架构和存储
4.2.1 接口文件区
4.2.2 数据仓库
4.2.2.1 细节数据暂存区SSA(SOR Staging Area)
4.2.2.2 细节数据SOR(System Of Record)
4.2.2.3 汇总数据区Summary
4.2.2.4 反馈数据区(Feedback Area)
4.2.2.5 元数据存储MDR(Meta Data Repository)
4.2.3 数据集市和多维立方体
4.2.3.1 多维数据存储
4.2.3.2 OLAP和多维立方体
4.2.4 数据仓库应用
4.2.5 实现中的一些特别因素
4.2.5.1 参照表
4.2.5.2 MQT的应用
4.2.5.3 表和列的命名规则
4.2.5.4 代理键的使用
4.2.5.5 历史数据的处理
4.3 ETL处理架构
4.3.1 ETL调度
4.3.2 ETL监控
4.3.3 数据质量控制
4.3.4 ETL任务
4.3.4.1 ETL0-数据抽取
4.3.4.2 ETL1-处理接口文件
4.3.4.3 ETL2-生成SOR
4.3.4.4 ETL3-数据汇总
4.3.4.5 ETL4-生成数据集市
4.3.4.6 ETL5-计算KPI
4.3.5 ETL规范
4.3.5.1 SQL规范
4.3.5.2 可重运行
4.3.5.3 DB2 RUNSTATS
4.3.5.4 ETL工作流程
4.4 应用架构
4.4.1 访问途径
4.4.1.1 网络浏览器
4.4.2 展示内容
4.4.2.1 BST分析主题
4.4.2.2 1104报表
4.4.2.3 绩效考核
4.4.2.4 输出服务
4.5 软硬件架构
4.6 系统管理
4.6.1 备份恢复
4.6.1.1 数据仓库的备份恢复
4.6.1.2 接口文件的备份恢复
4.6.1.3 开发环境的备份恢复
4.6.2 配置管理
4.6.3 安全与保密
4.6.3.1 数据安全
1 概述
1.1 背景
1.2 目的
1.3 适用对象
1.4 范围
1.5 叁考文档
2概念性体系构架
2.1 数据源
2.2 数据仓库
2.3 分析
2.4 交互参考功能
3 参考体系架构
4 技术体系架构
4.1 源数据和数据接口
4.1.1 数据源
4.1.1.1 数据源范围
4.1.2 文件缓冲区
4.1.3 接口文件区
4.2 数据架构和存储
4.2.1 接口文件区
4.2.2 数据仓库
4.2.2.1 细节数据暂存区SSA(SOR Staging Area)
4.2.2.2 细节数据SOR(System Of Record)
4.2.2.3 汇总数据区Summary
4.2.2.4 反馈数据区(Feedback Area)
4.2.2.5 元数据存储MDR(Meta Data Repository)
4.2.3 数据集市和多维立方体
4.2.3.1 多维数据存储
4.2.3.2 OLAP和多维立方体
4.2.4 数据仓库应用
4.2.5 实现中的一些特别因素
4.2.5.1 参照表
4.2.5.2 MQT的应用
4.2.5.3 表和列的命名规则
4.2.5.4 代理键的使用
4.2.5.5 历史数据的处理
4.3 ETL处理架构
4.3.1 ETL调度
4.3.2 ETL监控
4.3.3 数据质量控制
4.3.4 ETL任务
4.3.4.1 ETL0-数据抽取
4.3.4.2 ETL1-处理接口文件
4.3.4.3 ETL2-生成SOR
4.3.4.4 ETL3-数据汇总
4.3.4.5 ETL4-生成数据集市
4.3.4.6 ETL5-计算KPI
4.3.5 ETL规范
4.3.5.1 SQL规范
4.3.5.2 可重运行
4.3.5.3 DB2 RUNSTATS
4.3.5.4 ETL工作流程
4.4 应用架构
4.4.1 访问途径
4.4.1.1 网络浏览器
4.4.2 展示内容
4.4.2.1 BST分析主题
4.4.2.2 1104报表
4.4.2.3 绩效考核
4.4.2.4 输出服务
4.5 软硬件架构
4.6 系统管理
4.6.1 备份恢复
4.6.1.1 数据仓库的备份恢复
4.6.1.2 接口文件的备份恢复
4.6.1.3 开发环境的备份恢复
4.6.2 配置管理
4.6.3 安全与保密
4.6.3.1 数据安全
2014-09-12
浏览5228
下载328