adsfasdfasd本资料仅供内部使用！中投证券数据整合项目ETL总体设计规格东南融通集团2009年6月04日本文件中出现的任何文字叙述、文档格式、插图、照片、方法、过程等内容，除另有特别注明，版权均属厦门东南融通系统工程有限公司所有，受到有关产权及版权法保护。任何个人、机构未经厦门东南融通系统工程有限公司的书面授权许可，不得以任何方式复制或引用本文件的任何片断。总体设计规格修改记录制定日期生效日期制定/修订内容摘要页数版本拟稿审查批准目录TOC\o"1-3"\h\z\uHYPERLINK\l"_Toc232778513"1简介PAGEREF_Toc232778513\h4HYPERLINK\l"_Toc232778514"1.1项目背景PAGEREF_Toc232778514\h4HYPERLINK\l"_Toc232778515"1.2本文目的PAGEREF_Toc232778515\h4HYPERLINK\l"_Toc232778516"1.3目标读者PAGEREF_Toc232778516\h4HYPERLINK\l"_Toc232778517"2总体设计方案PAGEREF_Toc232778517\h5HYPERLINK\l"_Toc232778518"2.1设计原则PAGEREF_Toc232778518\h5HYPERLINK\l"_Toc232778519"2.1.1考虑因素PAGEREF_Toc232778519\h5HYPERLINK\l"_Toc232778520"2.2总体架构介绍PAGEREF_Toc232778520\h8HYPERLINK\l"_Toc232778521"2.2.1ETL系统架构PAGEREF_Toc232778521\h8HYPERLINK\l"_Toc232778522"2.2.2ETL逻辑架构PAGEREF_Toc232778522\h8HYPERLINK\l"_Toc232778523"2.3ETL整体架构设计PAGEREF_Toc232778523\h10HYPERLINK\l"_Toc232778524"2.3.1源数据层设计PAGEREF_Toc232778524\h11HYPERLINK\l"_Toc232778525"2.3.2数据处理层设计PAGEREF_Toc232778525\h15HYPERLINK\l"_Toc232778526"2.3.3模型层设计PAGEREF_Toc232778526\h18HYPERLINK\l"_Toc232778527"2.4模块设计PAGEREF_Toc232778527\h21HYPERLINK\l"_Toc232778528"2.4.1异常处理PAGEREF_Toc232778528\h21HYPERLINK\l"_Toc232778529"2.4.2ETL重跑设计PAGEREF_Toc232778529\h27HYPERLINK\l"_Toc232778530"2.4.3ETL备份与恢复PAGEREF_Toc232778530\h28HYPERLINK\l"_Toc232778531"2.4.4ETL存储设计PAGEREF_Toc232778531\h30HYPERLINK\l"_Toc232778532"2.4.5总控设计PAGEREF_Toc232778532\h32HYPERLINK\l"_Toc232778533"2.4.6软硬件架构PAGEREF_Toc232778533\h38HYPERLINK\l"_Toc232778534"3开发规范PAGEREF_Toc232778534\h38HYPERLINK\l"_Toc232778535"3.1布局规范PAGEREF_Toc232778535\h38HYPERLINK\l"_Toc232778536"3.2注释规范PAGEREF_Toc232778536\h39HYPERLINK\l"_Toc232778537"3.3命名规范PAGEREF_Toc232778537\h40HYPERLINK\l"_Toc232778538"3.4程序命令规则