企業(yè)數(shù)據(jù)倉(cāng)庫(kù)概要設(shè)計(jì)說(shuō)明書(shū)ETL概要設(shè)計(jì)分冊(cè)

1、XXXX企業(yè)數(shù)據(jù)倉(cāng)庫(kù)概要設(shè)計(jì)說(shuō)明書(shū)ETL概要設(shè)計(jì)分冊(cè)文檔編碼：OM-BIDW-C008 版本 01.00.000未經(jīng)許可,不得以任何形式抄襲XXXX版權(quán)所有,翻板必究OM數(shù)據(jù)倉(cāng)庫(kù)XXXX企業(yè)數(shù)據(jù)組2021年3月文檔變更歷史日期版本作者修改內(nèi)容評(píng)審 號(hào)變 更 控 制 號(hào)發(fā)布日期2021-04-0201.00.000黃浩建立初始版本2021-04-02目錄1 概述 42 設(shè)計(jì)原那么和前提 52.1 整體部署52.2 前提條件62.3 設(shè)計(jì)原那么63 整體框架 73.1 ETL系統(tǒng)架構(gòu)圖 73.2 ETL系統(tǒng)功能模塊描述 74 數(shù)據(jù)抽取模塊 94.1 假設(shè)與約定94.2 模塊功能圖94.3 各子模塊

2、功能及處理流程 115 數(shù)據(jù)加載模塊 115.1 假設(shè)與約定115.2 數(shù)據(jù)加載模塊圖115.3 數(shù)據(jù)加載功能模塊描述 126 作業(yè)調(diào)度模塊 136.1 模塊概述136.2 假設(shè)與約定136.3 作業(yè)調(diào)度流程136.4 ETL作業(yè)種類(lèi)及調(diào)度實(shí)現(xiàn)方法 147 監(jiān)控治理模塊 157.1 監(jiān)控治理模塊圖15ETL監(jiān)控內(nèi)容16附錄1限制表及限制文件設(shè)計(jì) 16附錄2:文件目錄及編碼說(shuō)明 191概述ETL是數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)開(kāi)發(fā)中至關(guān)重要的一個(gè)過(guò)程,它涉及到對(duì)源數(shù)據(jù)的抽取、 整合及各種轉(zhuǎn)換,并最終形成面向用戶的分析數(shù)據(jù).由于數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的數(shù)據(jù)源 來(lái)自于多個(gè)分散的業(yè)務(wù)系統(tǒng),對(duì)不同業(yè)務(wù)系統(tǒng)的數(shù)據(jù)整合及活洗轉(zhuǎn)換將是一

3、個(gè)復(fù) 雜的過(guò)程,ETL過(guò)程決定了數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)獲取數(shù)據(jù)的準(zhǔn)確性.另外由于ETL包括數(shù)據(jù)抽取、數(shù)據(jù)活洗、數(shù)據(jù)轉(zhuǎn)換及數(shù)據(jù)加載等數(shù)據(jù)處理過(guò) 程,這些處理過(guò)程分散在不同的系統(tǒng)平臺(tái)及開(kāi)發(fā)工具上, 對(duì)這些作業(yè)過(guò)程的統(tǒng)一 調(diào)度將是一個(gè)重要的問(wèn)題,作業(yè)調(diào)度涉及到系統(tǒng)的穩(wěn)定性.2設(shè)計(jì)原那么和前提2.1整體部署網(wǎng)關(guān)通道、產(chǎn)品效勞器數(shù)據(jù)組效勞器載加據(jù)數(shù)該效勞器完成兩項(xiàng)功能：1、接口文件效勞器,所有 被接入DW數(shù)據(jù)文件必須通 過(guò)該效勞器中轉(zhuǎn)2、數(shù)據(jù)備份,來(lái)自網(wǎng)關(guān)的 數(shù)據(jù)文件將長(zhǎng)期保存在該服 務(wù)器上,作為文件備份數(shù)據(jù)倉(cāng)庫(kù)DW效勞器數(shù)據(jù)倉(cāng)庫(kù)ETL整體部署圖網(wǎng)關(guān)通道數(shù)據(jù)庫(kù)效勞器是數(shù)據(jù)倉(cāng)庫(kù)的外圍數(shù)據(jù)庫(kù)系統(tǒng),數(shù)據(jù)倉(cāng)庫(kù)中的絕大局部

4、數(shù)據(jù)都將來(lái)自網(wǎng)關(guān)通道數(shù)據(jù)庫(kù)效勞器基丁 B前短彩部自身情況的考慮,在數(shù)據(jù)源效勞器和數(shù)據(jù)倉(cāng)庫(kù)效勞器之間增加一臺(tái)FTP文件效勞器,其功能有二：接口文件效勞器,所有被接入DWJ數(shù)據(jù)文件必須通過(guò)該效勞器中轉(zhuǎn) 數(shù)據(jù)備份,來(lái)自網(wǎng)關(guān)的數(shù)據(jù)文件將長(zhǎng)期保存在該效勞器上,作為文件 備份2.2前提條件ETL概要設(shè)計(jì)將基于下面的前提條件ETL邏輯：XXXX企業(yè)的數(shù)據(jù)雖然分布在不同的通道,但是各通道數(shù)據(jù)的共性度非常高,因此ETL中不存在邏輯復(fù)雜的轉(zhuǎn)換(Transformation )及數(shù) 據(jù)質(zhì)量治理等流程,整個(gè)ETL只需要實(shí)現(xiàn)抽取(Extraction )和加載(Loading ) 兩個(gè)功能即可ETL工具：自主開(kāi)發(fā),具體

5、開(kāi)發(fā)語(yǔ)言待定？；作業(yè)調(diào)度工具：自主開(kāi)發(fā),具體開(kāi)發(fā)語(yǔ)言待定？.2.3設(shè)計(jì)原那么ETL應(yīng)該是基于元數(shù)據(jù)庫(kù)中定義好的處理規(guī)那么；并且應(yīng)由可復(fù)用的過(guò)程 或相關(guān)組件來(lái)實(shí)現(xiàn)；用戶或客戶端應(yīng)用程序不應(yīng)該直接執(zhí)行數(shù)據(jù)獲取程序,數(shù)據(jù)倉(cāng)庫(kù)層所有 的數(shù)據(jù)更新應(yīng)該由數(shù)據(jù)獲取過(guò)程自動(dòng)限制；通過(guò)良好的設(shè)計(jì)和相關(guān)處理過(guò)程的協(xié)調(diào)使得系統(tǒng)的CPU處理時(shí)間最少；要充分利用系統(tǒng)和軟件的并行處理性能；ETL過(guò)程盡可能分解為獨(dú)立的幾個(gè)子處理過(guò)程以便于作業(yè)治理和調(diào)度；在ETL設(shè)計(jì)時(shí),需要詳細(xì)計(jì)算并考慮 ETL的處理性能,時(shí)間窗口及錯(cuò)誤處理限制.并詳細(xì)考慮各個(gè) ETL任務(wù)在各臺(tái)物理主機(jī)上的分布.需要提供一個(gè)監(jiān)控統(tǒng)計(jì)模塊對(duì) ETL的整個(gè)過(guò)程

6、進(jìn)行有效的監(jiān)控和統(tǒng)計(jì), 提供GUI界面對(duì)ETL各個(gè)任務(wù)的處理情況進(jìn)行統(tǒng)計(jì)和監(jiān)控,例如每個(gè)ETL 任務(wù)的狀態(tài)、處理記錄的條數(shù)、處理某個(gè)任務(wù)所用的時(shí)間、出錯(cuò)的情況3整體框架本章從宏觀體系結(jié)構(gòu)的高度,概要表達(dá) ETL系統(tǒng)的根本架構(gòu)和設(shè)計(jì)思想,著 重丁描述架構(gòu)的特點(diǎn)、系統(tǒng)主要組成、ETL各個(gè)局部的根本功能和它們之間的關(guān) 系以及方案選擇的出發(fā)點(diǎn).3.1 ETL系統(tǒng)架構(gòu)圖ETL負(fù)責(zé)對(duì)業(yè)務(wù)系統(tǒng)數(shù)據(jù)及其他外部源數(shù)據(jù)進(jìn)行數(shù)據(jù)抽取,并存放在數(shù)據(jù)倉(cāng) 庫(kù)系統(tǒng)中的STAG改據(jù)庫(kù)中.ETL過(guò)程包括數(shù)據(jù)抽取和數(shù)據(jù)加載等幾個(gè)邏輯上相 對(duì)獨(dú)立的數(shù)據(jù)處理過(guò)程.同時(shí)由丁在ETL的處理過(guò)程中需要對(duì)ETL的錯(cuò)誤處理以 及作業(yè)調(diào)度等,E

7、TL系統(tǒng)邏輯架構(gòu)圖如下列圖所示：監(jiān)控治理界面作業(yè)調(diào)度錯(cuò)誤處理ET成輯構(gòu)架圖3.2 ETL系統(tǒng)功能模塊描述從上圖可以看到ETL系統(tǒng)包括數(shù)據(jù)抽取、數(shù)據(jù)加載、錯(cuò)誤處理、作業(yè)調(diào)度、 監(jiān)控治理等幾個(gè)功能模塊,各功能模塊的具體情況如下：功能模塊功能描述物理分布實(shí)現(xiàn)工具或方法數(shù)據(jù)抽取該模塊獲取外部系統(tǒng)數(shù)據(jù)以形成文本文件ETL.SERVEF17自主程序開(kāi)發(fā)數(shù)據(jù)加載將數(shù)據(jù)抽取獲得的文本文件通過(guò)數(shù)據(jù)加載階段入庫(kù)到STAGEoDW SERVEFORACLE的數(shù)據(jù)加載程序SQLLDR錯(cuò)誤處理錯(cuò)誤處理模塊針對(duì)作業(yè)在運(yùn)行過(guò)程中出現(xiàn)錯(cuò)誤時(shí)ETL系統(tǒng)應(yīng)采取的作業(yè)限制舉措DW SERVEFETL ERVER自主開(kāi)發(fā)程序作業(yè)調(diào)度

8、作業(yè)調(diào)度主要實(shí)施整個(gè)系統(tǒng)中的 作業(yè)運(yùn)作,實(shí)時(shí)的監(jiān)控作業(yè)運(yùn)行的 條件是否具備,一旦作業(yè)運(yùn)行的條 件具備,就將作業(yè)調(diào)入作業(yè)運(yùn)行隊(duì) 列.DW SERVEF自主開(kāi)發(fā)程序監(jiān)控治理在ETL的處理過(guò)程中需要實(shí)時(shí)對(duì) ETL的作業(yè)過(guò)程進(jìn)行監(jiān)控,以便了 解ETL的執(zhí)行狀況并根據(jù)ETL執(zhí)行 過(guò)程中遇到的問(wèn)題采取相應(yīng)的措 施.ETLSERVER/DWSERVER自主開(kāi)發(fā)程序外部數(shù)據(jù)手工輸入模塊由丁市公司數(shù)據(jù)集市存在一些需 要手工輸入或EXCELS格式的外部 數(shù)據(jù),需把這些外部數(shù)據(jù)錄入到市 公司數(shù)據(jù)集巾中PCEXCELS輔助工具4數(shù)據(jù)抽取模塊4.1假設(shè)與約定重復(fù)文件處理：文件重復(fù)上傳,那么采取覆蓋式的處理方法,我們認(rèn)為

9、最 后上傳的文件是接近正確的文件.即如果某個(gè)文件先后上傳了幾次,那 么我們最后入庫(kù)的文件將是最后一個(gè)上傳的文件.不對(duì)數(shù)據(jù)質(zhì)量作監(jiān)控：由于數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)源平臺(tái)比擬單一,涉及到的 網(wǎng)絡(luò)比擬平穩(wěn),因此不對(duì)數(shù)據(jù)抽取的結(jié)果文件作質(zhì)量監(jiān)控.系統(tǒng)的所有功能都由程序自動(dòng)限制,原那么上不允許手工十預(yù)4.2模塊功能圖數(shù)據(jù)抽取模塊如下列圖所示：開(kāi)始敏據(jù)抽取于秩序讀取數(shù)據(jù)抽取配置信息、生成接口文件、記錄日志,并處理異常 zA讀取配置信息#數(shù)據(jù)抽取配置表U全一一增告判斷抽取類(lèi)型.一乙一堂BC險(xiǎn)量抽取程序BCP曾量抽取程序數(shù)據(jù)抽取流程圖該模塊由自主程序開(kāi)發(fā)實(shí)現(xiàn),除主程序外,還包括目錄掃描進(jìn)程,文件處理進(jìn)程,文件壓縮,文件

10、傳輸?shù)葞讉€(gè)子模塊.該模塊將由兩個(gè)子程序驅(qū)動(dòng)數(shù)據(jù)抽取子程序：該程序主要完成定時(shí)的數(shù)據(jù)抽取功能,并將抽取后得 到的文本文件放到指定的目錄下面.FTP傳輸子程序：該程序定時(shí)掃描指定目錄,如果文件到達(dá),那么將文件傳 輸至接口機(jī)上.從上圖中可以看到在該模塊處理流程中用到一系列的限制表及限制文件,各 限制表及限制文件的具體格式見(jiàn)4.3各子模塊功能及處理流程子模塊作用及功能需用到的限制表或限制文件文件抽取進(jìn)程該進(jìn)程定時(shí)從數(shù)據(jù)源信息表中獲取數(shù)據(jù),對(duì)原 始數(shù)據(jù)源進(jìn)行抽取工作數(shù)據(jù)源文件信息表?數(shù)據(jù) 源定義表?數(shù)據(jù)ETL日志 表?目錄掃描進(jìn)程該子功能模塊將定時(shí)對(duì)相關(guān)接口目錄進(jìn)行掃 描,以檢查是否有新的接口文件需進(jìn)行

11、處理. 由于各類(lèi)型數(shù)據(jù)源文件抽取的頻率不一樣,因 此對(duì)各接口目錄的頻率也不同.?數(shù)據(jù)源定義表?數(shù)據(jù)ETL 日志表?FTP傳輸進(jìn)程假設(shè)目錄掃描進(jìn)程檢測(cè)到某接口目錄下有新的文件到達(dá),那么調(diào)用 FTP命令,將文件傳輸?shù)街付?效勞器的指定目錄卜面?數(shù)據(jù)源定義表?數(shù)據(jù)ETL 日志表?FTP狀態(tài)表?對(duì)丁以上處理步驟的關(guān)鍵過(guò)程信息都要記錄到?數(shù)據(jù)ETL日志表?表中.5數(shù)據(jù)加載模塊5.1假設(shè)與約定由于數(shù)據(jù)抽取與數(shù)據(jù)加載是在不同的效勞器上執(zhí)行,為了同步兩者之間 的事件消息,我們需要建立一個(gè)消息同步的機(jī)制,即當(dāng)數(shù)據(jù)抽取完成時(shí), 需要發(fā)給數(shù)據(jù)加載一個(gè)消息.即在傳輸數(shù)據(jù)接口文件完成后,附帶一個(gè) 傳輸完成標(biāo)志文件.5.

12、2數(shù)據(jù)加載模塊圖數(shù)據(jù)加載模塊流程如下列圖所示：文件掃描程序定時(shí)監(jiān)控臨時(shí)目錄下的接口文件J定時(shí)文件掃描FT啾取程序定時(shí)將接口文件獲取到效勞器上,并進(jìn)行登記* FT啾取文件接口文件登記數(shù)據(jù)加載程序根據(jù)配置信息,調(diào)用不同的sqlldr限制文件,并記錄日志解壓文件數(shù)據(jù)加載信息表?更新加載狀態(tài)*1數(shù)浦載J記錄加載日志乂數(shù)據(jù)加載日志表I結(jié)束數(shù)據(jù)加載模塊流程圖5.3數(shù)據(jù)加載功能模塊描述子模塊作用及功能需用到的限制表或限制文件目錄掃描進(jìn)程該子功能模塊將定時(shí)對(duì)相關(guān)接口目錄進(jìn)行掃 描,以檢查是否有新的接口文件需進(jìn)行處理. 由于各類(lèi)型數(shù)據(jù)源文件抽取的頻率不一樣,因 此對(duì)各接口目錄的頻率也不同.?數(shù)據(jù)源定義表?數(shù)據(jù)E

13、TL 日志表?FTP傳輸進(jìn)程假設(shè)目錄掃描進(jìn)程檢測(cè)到某接口目錄下有新的文件到達(dá),那么調(diào)用 FTP命令,將文件傳輸?shù)街付?效勞器的指定目錄卜面?數(shù)據(jù)源定義表?數(shù)據(jù)ETL 日志表?FTP狀態(tài)表?接 口文件登記表?數(shù)據(jù)加載進(jìn)程該進(jìn)程定時(shí)對(duì)指定目錄下的文件進(jìn)行掃描,如 果文件存在,那么對(duì)文件進(jìn)行解壓、加載處理,?數(shù)據(jù)源定義表?數(shù)據(jù)ETL 日志表?最終將數(shù)據(jù)加載進(jìn)STAGE婁攵據(jù)庫(kù)中6作業(yè)調(diào)度模塊6.1模塊概述作業(yè)調(diào)度是系統(tǒng)運(yùn)轉(zhuǎn)的支點(diǎn),從數(shù)據(jù)加載到數(shù)據(jù)處理的全部腳本都由作業(yè)調(diào) 度系統(tǒng)自動(dòng)完成.其功能包括：事件掃描.根據(jù)作業(yè)的執(zhí)行周期屆性,周期性定時(shí)掃描作業(yè)所依賴(lài)的事 件是否完成,以決定該作業(yè)是否執(zhí)行；參數(shù)

14、生成.根據(jù)作業(yè)配置信息,自動(dòng)生成作業(yè)執(zhí)行參數(shù),并將參數(shù)傳遞 給作業(yè)；追跑歷史數(shù)據(jù).由于某些原因,導(dǎo)致作業(yè)執(zhí)行延時(shí),在作業(yè)滿足事件依 賴(lài)后,需要追跑歷史作業(yè).6.2假設(shè)與約定數(shù)據(jù)抽取模塊分散到各數(shù)據(jù)源效勞器,由各數(shù)據(jù)源效勞器自行根據(jù)文檔 要求進(jìn)行數(shù)據(jù)抽取,并將抽取結(jié)果 FTP到指定的接口機(jī)的制定目錄下 為了簡(jiǎn)化調(diào)度流程,OMDW將采用事件掃描模式,而不是事件觸發(fā)模式 即為了觸發(fā)某個(gè)作業(yè),程序會(huì)定時(shí)的掃描作業(yè)所依賴(lài)的事件,如果所依 賴(lài)的事件全都完成,那么執(zhí)行該作業(yè).6.3作業(yè)調(diào)度流程作業(yè)調(diào)度流程如下列圖:的全部表事.依賴(lài)的數(shù)據(jù)是否已經(jīng)完成L補(bǔ)跑歷史數(shù)據(jù)讀取作業(yè)配置信息,生成 作業(yè)執(zhí)行參數(shù)調(diào)度執(zhí)行隊(duì)

15、列作業(yè)調(diào)度流程圖6.4 ETL作業(yè)種類(lèi)及調(diào)度實(shí)現(xiàn)方法作業(yè)類(lèi)型作業(yè)調(diào)度方式作業(yè)實(shí)現(xiàn)的 功能作業(yè)的物理分布ORACLE#儲(chǔ)過(guò)程O(píng)RACLE存儲(chǔ)過(guò)程調(diào)度存在兩個(gè) 要點(diǎn)：參數(shù)、依賴(lài).因此,在作業(yè) 調(diào)度設(shè)置頁(yè)而要設(shè)置好參數(shù)與依 賴(lài)的具體內(nèi)容.數(shù)據(jù)處理DW SERVERORACLE 的數(shù)據(jù)加載主要依賴(lài)丁接口文件,要數(shù)據(jù)加載DW SERVER數(shù)據(jù)加載點(diǎn)有：加載類(lèi)型、文件信息.加載 作業(yè)會(huì)根據(jù)加載類(lèi)型及文件的相 關(guān)信息字段、文件名、字段分隔 符等生成限制文件7監(jiān)控治理模塊7.1監(jiān)控治理模塊圖ETL監(jiān)控治理示意圖如下：ETW控JOB乍業(yè)狀態(tài)查詢JOEfe理日志查詢數(shù)據(jù)加載日志查詢JO咄錯(cuò)告警JOEfe理時(shí)間查詢

16、ETLB控治理示意圖功能模塊功能描述物理分布實(shí)現(xiàn)工具或方法Job作業(yè)狀態(tài)查詢可以根據(jù)時(shí)間及job名查詢job的 處理的狀態(tài)成功或失敗開(kāi)發(fā)Job處理時(shí)間查詢查詢某次job完成處理任務(wù)的開(kāi)始 時(shí)間和結(jié)束時(shí)間開(kāi)發(fā)Job處理日志明細(xì)查看job處理的詳細(xì)日志開(kāi)發(fā)數(shù)據(jù)加載日志明細(xì)查看數(shù)據(jù)加載的詳細(xì)日志工具提供查詢ORACLE 勺日忐義件Job出錯(cuò)告警在job出夸日時(shí)提供尸首,短伯等口警開(kāi)發(fā)ETL監(jiān)控內(nèi)容從上圖可以看到ETL監(jiān)控包括如下幾方面內(nèi)容：ETL系統(tǒng)在ETL作業(yè)出現(xiàn)錯(cuò)誤或ETL數(shù)據(jù)處理質(zhì)量沒(méi)到達(dá)要求時(shí)通過(guò) ETL 監(jiān)控系統(tǒng)進(jìn)行短信息、BR EMAIL聲音、特殊圖像等多種告警手段提供 現(xiàn)場(chǎng)和遠(yuǎn)程告警；

17、ETL在作業(yè)處理過(guò)程中需把作業(yè)的處理時(shí)間、作業(yè)完成或失敗信息等記 錄到數(shù)據(jù)庫(kù)中并在ETL監(jiān)控系統(tǒng)中進(jìn)行顯示以了解 ETL作業(yè)的狀態(tài)以及 歷史狀況；另一方面需通過(guò)ETL監(jiān)控系統(tǒng)了解ETL各作業(yè)的數(shù)據(jù)處理質(zhì)量情況如 處理的記錄數(shù)等；附錄1 :限制表及限制文件設(shè)計(jì)Table Name: TE_ETL_CYCTable Comment: TE調(diào)度周期表Table ColumnNameTableColumnDatatypeTable ColumnCommentTable ColumnIs PKTable ColumnIs FKCYC_CDvarchar2(10)周期編pYesNoCYC_NAMVARCH

18、AR2(20)周期名稱(chēng)NoTable Name: TE_ETL_DS_INFTable Comment: TE數(shù)據(jù)抽取信息表Table ColumnNameTableColumnDatatypeTable ColumnCommentTable ColumnIs PKTable ColumnIs FKDS_CDvarchar2(10)數(shù)據(jù)源編號(hào)YesNoDS_NAMVARCHAR2(20)數(shù)據(jù)源名稱(chēng)NoDS_FILE_NAM數(shù)據(jù)源文件名DS_TYP_CDvarchar2(10)數(shù)據(jù)源類(lèi)型ETL_CYC_CD數(shù)據(jù)抽取周期ETL_TYP_CD抽取類(lèi)型ETL_STATVARCHAR2(20)文件狀態(tài)F

19、LD_SPLIT字段分隔符COMPRESS_FLAGINTEGER壓縮標(biāo)識(shí)LOCAL_PATHVARCHAR2(20)本地路徑JKJ_PATH遠(yuǎn)程路徑CYC_CDvarchar2(10)周期編pYesDW_PATHVARCHAR2(20)倉(cāng)庫(kù)效勞器路徑NoTable Name: TE_ETL_DS_LOGTable Comment: TE數(shù)據(jù)抽取日志表Table ColumnNameTableColumnDatatypeTable ColumnCommentTable ColumnIs PKTable ColumnIs FKLOG_SEQvarchar2(10)日志序號(hào)YesNoDS_CD數(shù)據(jù)

20、源編號(hào)NoYesLOG_TYPVARCHAR2(20)日志類(lèi)型NoLOG_DTIMDATE日志時(shí)間LOG_STATVARCHAR2(20)日志狀態(tài)FILE_FULL_NAM文件全拼Table Name: TE_ETL_FILE_INFTable Comment: TE數(shù)據(jù)源文件信息表Table ColumnNameTableColumnDatatypeTable ColumnCommentTable ColumnIs PKTable ColumnIs FKDS_CDvarchar2(10)數(shù)據(jù)源編號(hào)YesYesFLD_NAMVARCHAR2(20)字段名稱(chēng)NoFLD_TYP字段類(lèi)型NoFLD_

21、LENNUMBER(5)字段長(zhǎng)度FLD_REMARKVARCHAR2(20)字段描述Table Name: TE_ETL_FILE_REGTable Comment: TE接口文件登記表Table ColumnNameTable ColumnDatatypeTable ColumnCommentTable ColumnIs PKTable ColumnIs FKREG_SEQvarchar2(10)登記序號(hào)YesNoDS_CD數(shù)據(jù)源編號(hào)NoYesFILE_DTIMNUMBER(10)數(shù)據(jù)文件日期NoFILE_SEQNUMBER(5)文件序號(hào)REG_DTIMDATE登記時(shí)間Table Name:

22、 TE_FTP_STATTable Comment: TE_FTP 狀態(tài)表Table ColumnNameTableColumnDatatypeTable ColumnCommentTable ColumnIs PKTable ColumnIs FKFTP_CDvarchar2(10)FTP傳輸編碼YesNoDS_CD數(shù)據(jù)源編號(hào)NoYesFILE_NAMVARCHAR2(20)數(shù)據(jù)源名稱(chēng)NoBEGIN_DTIMDATE開(kāi)始時(shí)間END_DTIM結(jié)束時(shí)間FTP_STATINTEGER狀態(tài)Table Name: TE_PRO_EXE_STATTable Comment: TE程序執(zhí)行狀態(tài)表Table

23、 ColumnNameTableColumnDatatypeTable ColumnCommentTable ColumnIs PKTable ColumnIs FKEXE_CDvarchar2(10)執(zhí)仃編勺YesNoPRO_CD程序編號(hào)NoYesREC_EXE_DTI MDATE程序執(zhí)行時(shí)間NoBEGIN_EXE_DTIM程序執(zhí)行開(kāi)始時(shí) 間END_EXE_DTIM程序執(zhí)行結(jié)束時(shí) 間EXE_STATVARCHAR2(20)執(zhí)行狀態(tài)Table Name: TE_PRO_INFTable Comment: TE程序信息表Table ColumnNameTableColumnDatatypeTable ColumnCommentTable ColumnIs PKTable ColumnIs FKPRO_CDvarchar2(10)程序編號(hào)YesNoPRO_NAMVARCHAR2(20)程序名稱(chēng)NoPRO_REMARK:程序中文名PRO_PATHVARCHAR2(50)程序所在路徑CYC_CDvarchar2(10)周期編pYesVALID_DTIMDATE生效時(shí)間NoINVALID_DTIM失效時(shí)間Table Name: