ETL设计说明书模板.doc

WORD格式 编辑整理 专业知识分享 ETL设计说明书 REF prop_Text2 \* Charformat Author: Zhang Jian Customer: *** 目录 TOC \o 1-3 1. 概述 PAGEREF _Toc132166343 \h 5 2. ETL开发策略 PAGEREF _Toc132166344 \h 7 3. ETL系统架构设计 PAGEREF _Toc132166345 \h 8 3.1 ETL整体框架 PAGEREF _Toc132166346 \h 8 3.2 ETL系统逻辑架构 PAGEREF _Toc132166347 \h 8 3.2.1 ETL系统的备份和恢复 PAGEREF _Toc132166348 \h 9 4. ETL应用框架设计 PAGEREF _Toc132166349 \h 10 4.1 ETL应用架构逻辑图 PAGEREF _Toc132166350 \h 10 4.2 ETL模式 PAGEREF _Toc132166351 \h 11 4.3 数据抽取(Extract)和数据变换(Convert) PAGEREF _Toc132166352 \h 11 4.3.1 数据抽取（Extract） PAGEREF _Toc132166353 \h 11 4.3.2 数据变换（Convert） PAGEREF _Toc132166354 \h 11 4.3.3 数据分割（Split） PAGEREF _Toc132166355 \h 12 4.4 数据转换(Transform) PAGEREF _Toc132166356 \h 12 4.4.1 字段合并与拆分 PAGEREF _Toc132166357 \h 12 4.4.2 赋缺省值 PAGEREF _Toc132166358 \h 12 4.4.3 数据排序（Sort） PAGEREF _Toc132166359 \h 12 4.4.4 数据翻译(Lookup) PAGEREF _Toc132166360 \h 12 4.4.5 数据合并(Merge) PAGEREF _Toc132166361 \h 13 4.4.6 数据聚合(Aggregate) PAGEREF _Toc132166362 \h 13 4.4.7 文件比较(File Compare) PAGEREF _Toc132166363 \h 13 4.4.8 其他复杂计算 PAGEREF _Toc132166364 \h 13 4.5 数据加载(Load) PAGEREF _Toc132166365 \h 13 4.5.1 Pre-Load PAGEREF _Toc132166366 \h 13 4.5.2 Load PAGEREF _Toc132166367 \h 13 4.5.3 Post-Load PAGEREF _Toc132166368 \h 14 4.6 ETL进程和进程调度 PAGEREF _Toc132166369 \h 14 4.7 管理功能（Management Interface） PAGEREF _Toc132166370 \h 14 4.8 初始数据、历史数据和日常数据ETL PAGEREF _Toc132166371 \h 15 5. 开发规范 PAGEREF _Toc132166372 \h 16 5.1 中间文件 PAGEREF _Toc132166373 \h 16 5.2 临时文件 PAGEREF _Toc132166374 \h 16 5.3 BAPI参数文件 PAGEREF _Toc132166375 \h 17 5.4 ETL程序 PAGEREF _Toc132166376 \h 17 5.4.1 DataStage Project命名 PAGEREF _Toc132166377 \h 17 5.4.2 DataStage中Job命名 PAGEREF _Toc132166378 \h 17 5.4.3 DataStage中Stage命名 PAGEREF _Toc132166379 \h 18 5.4.4 DataStage中Link命名 PAGEREF _Toc132166380 \h 19 5.4.5 DataStage中Routine命名 PAGEREF _Toc132166381 \h 19 5.4.6 DataStage产