Inatica學(xué)習(xí)筆記整理.doc

Informatica學(xué)習(xí)整理1.Informatica產(chǎn)品介紹: PowerCenter：Informatica PowerCenter是世界級的企業(yè)數(shù)據(jù)集成平臺，它在ETL領(lǐng)域中無論是執(zhí)行能力還是戰(zhàn)略遠(yuǎn)見方面都是佼佼者，是Informatica的核心產(chǎn)品 。2.ETL環(huán)節(jié)中最重要的: 大家可能大部分會認(rèn)為轉(zhuǎn)換才是最重要的環(huán)節(jié)，但事實(shí)上是加載環(huán)節(jié)。 按重要程度遞減排序，分別是load（裝載）、clean（清洗）、transfer（轉(zhuǎn)換）、extract（抽?。?.具有2個server: Informatica Repository Server:資料庫server,管理ETL過程產(chǎn)生的元數(shù)據(jù),用來管理對資料庫中元數(shù)據(jù)的請求和操作; Informatica server:實(shí)際的ETL引擎;4.具有5個client: PowerCenter Designer：設(shè)計(jì)開發(fā)環(huán)境，定義源及目標(biāo)數(shù)據(jù)結(jié)構(gòu)；設(shè)計(jì)轉(zhuǎn)換規(guī)則，生成ETL映射 Workflow Manager：合理地實(shí)現(xiàn)復(fù)雜的ETL工作流，基于時間、事件的作業(yè)調(diào)度 Workflow Monitor：監(jiān)控Workflow和Session運(yùn)行情況，生成日志和報告 Repository Manager：資料庫管理，包括安全性管理等，元數(shù)據(jù)維護(hù)和安全操作，如：元數(shù)據(jù)查找，用戶、組、權(quán)限管理等。 Repository Server Administrator Console：對知識庫的操作，如：知識庫的創(chuàng)建、備份、恢復(fù)等。5.基本的ETL任務(wù)設(shè)計(jì)和部署的大致步驟: 使用Designer客戶端，獲取源數(shù)據(jù)表的元數(shù)據(jù)。 使用Designer客戶端，獲取目標(biāo)數(shù)據(jù)表的元數(shù)據(jù)。 使用Designer客戶端，設(shè)計(jì)一個Mapping，其中就是源-目標(biāo)的ETL規(guī)則。 使用Workflow Manager客戶端，針對上面實(shí)現(xiàn)的Mapping，實(shí)例化為一個Session，為其指定實(shí)際的數(shù)據(jù)源、目標(biāo)連接，以及其他屬性。 使用Workflow Manager客戶端，創(chuàng)建一個Workflow，其中包含上述的Session以及其他的Task，在Workflow中可實(shí)現(xiàn)復(fù)雜的流程控制。 運(yùn)行上述Workflow，使用Workflow Monitor客戶端，監(jiān)測最終的任務(wù)運(yùn)行結(jié)果。6.一個簡單的Mapping設(shè)計(jì)過程(8.1.1版本):第一步:進(jìn)入Repository Manager,在你的庫下建立一個文件夾,用來儲存自己的Mapping,如圖1.1: 圖1.1第二步:假如你所建的文件夾名稱為org_wellzaj,然后打開Powercenter Designer,你就會看到你所建的文件夾org_wellzaj,右擊OPEN此文件夾,會發(fā)現(xiàn)有很多的子目錄,點(diǎn)擊Sources子目錄,從數(shù)據(jù)庫中導(dǎo)入表結(jié)構(gòu),如圖1.2: 圖1.2第三步:導(dǎo)入目標(biāo)表結(jié)構(gòu),導(dǎo)入過程和導(dǎo)入源表結(jié)構(gòu)一樣,假如源表為DEPTINFO,目標(biāo)表為USERANDDEPT,現(xiàn)在可以設(shè)計(jì)自己的mapping了,將目標(biāo)表和源表組件拖到設(shè)計(jì)臺中,在工具欄中選擇一個你想要處理的控件,假如為Filter也拖放到mapping設(shè)計(jì)臺中,通過名稱和位置進(jìn)行連接關(guān)聯(lián),效果如圖1.3: 圖1.3第四步:打開workflow manager,創(chuàng)建自己的Session,如圖1.4: 圖1.4第五步:create一個workflows,會產(chǎn)生一個綠色的Start(這個是自動產(chǎn)生的),再將做好的Session拖放到workflow的設(shè)計(jì)臺中,將start和session關(guān)聯(lián)(Link)如圖1.5: 圖1.5第六步:保存你的workflow,右擊運(yùn)行此workflow(kk_org),如圖1.6: 圖1.7第七步:此時會進(jìn)入workflow montitor,可以查看workflow、session的log,如圖1.8:說明:數(shù)據(jù)庫的安裝配置,服務(wù)端的安裝配置在此沒有說明,請查閱相關(guān)資料Informatica學(xué)習(xí)筆記二1. Expression transformation:類似與過濾控件,可以起到過濾的作用,當(dāng)選擇為O或者V時,才可以對Expression進(jìn)行編輯,如圖2.1: 圖2.12. Filter transformation:過濾控件,對相應(yīng)字段寫出自己的過濾條件,如圖2.2: 圖2.23. Aggregator transformation:基于多行記錄的匯總計(jì)算,如:取平均值和總和,如圖2.3: 圖2.34. Lookup transformation:從數(shù)據(jù)庫表中,按條件查找相關(guān)的值專送給其它的對象,如圖2.4: 圖2.4Lookup另外一種用法,在平臺中單獨(dú)出來,在Expression控件中進(jìn)行調(diào)用,如圖2.5: 圖2.5LKPTRANS控件被單獨(dú)的獨(dú)立出來,但在Expression中調(diào)用它,也起到了查找的作用;5. Sequence Generator transformation:當(dāng)你目標(biāo)表中莫個字段是遞增形式時,就可以使用此組件,如圖2.6: 圖2.6使用此組件可以將DEPTID,不斷的遞增;6. Joiner transformation:關(guān)聯(lián)組件,比如內(nèi)連接,左聯(lián)接等,如