Datastage_JOB_开发指导说明
资料简介:
本文档是用来对ETL 开发人员初步熟悉整个基于DataStage平台进行ETL 开发指导手册。
整个DS 处理的过程如下:
从一张业务系统数据源表到DW模型目的表的数据流处理在开发CODING中一般分4个JOB,包含一个调度JOB。
l
第一个JOB(XXXX_DS10CD)用于队连续2天的数据源表进行比较和记录的筛选(选出新增和变化的)
l
第二个JOB(XXXX_DS20)对第一步处理后的数据进行Trim和简单的校验格式处理确认、以及生成各个目的表所需要的KEY值(比如各IP主题区域表的IP_ID)
l
第三步JOB(XXXX_DS30)将第二步处理后的数据分别映射到各个目的表、代码转换,最终形成按照各个目的表结构的文件。
DS的详细处理流程。
2014-03-18
浏览5109
下载62