超越ETL的BI整合工具sqlserver ssis課件

基于SSIS定制ETL解決方案基于SSIS定制ETL解決方案1內(nèi)容提要產(chǎn)品定位及工作原理增強的功能靈活的配置定制開發(fā)內(nèi)容提要產(chǎn)品定位及工作原理2SSIS的定位企業(yè)級全面、可靠、易管理高起點、高性能、易擴充平臺特征高效的IDE易于定制的嵌入式體系不僅是ETL集成多種異類數(shù)據(jù)源并在同一過程中處理高性能的數(shù)據(jù)移動大規(guī)模數(shù)據(jù)的處理與轉(zhuǎn)換集成了數(shù)據(jù)清洗,數(shù)據(jù)挖掘,報表與在線分析系統(tǒng)SSIS的定位企業(yè)級3整合BI平臺的粘合劑整合BI平臺的粘合劑4SSIS是…SSIS是…5更多更細的功能更多更細的功能6更多更細的功能更多更細的功能7更多更細的功能更多更細的功能8Package任務(wù)包的調(diào)試LoopTaskTaskLoopTaskTaskTaskTaskDataFlow

TransformTransformTaskTaskDataFlow

TransformTransform從錯誤中止的點重新執(zhí)行相關(guān)設(shè)定CheckpointFileName:路徑\文件名CheckpointUsage:IfExists或AlwaysSaveCheckpoints:TrueFailPackageOnFailure:

True(

Task

一級)當前

Package可調(diào)整CheckpointUsage屬性，設(shè)置其執(zhí)行是否遵照前次設(shè)置可重新啟動的邊界Package任務(wù)包的調(diào)試LoopTaskTaskL9靈活的設(shè)置修改Package屬性、執(zhí)行方式，不需要重新打開設(shè)計器來編輯(例如源文件的路徑設(shè)置)相關(guān)設(shè)定可存放于SQLServer表、XML文件、系統(tǒng)注冊表、環(huán)境變量、或Parentpackage每個Package都可以有多個配置（configurationsets）靈活的設(shè)置修改Package屬性、執(zhí)行方式，不需要重新打10回顧：SSIS的API體系結(jié)構(gòu)PackageLoops&

SequencesStandardtransformsCustomtransformsData

Destination

AdaptersDataSource

AdaptersXMLPackageXMLPackageCommandLineTasksDTSDesignerWizardsEvent

Handlers回顧：SSIS的API體系結(jié)構(gòu)PackageLoops&11SSIS定制開發(fā)定制工作流任務(wù)（Tasks）腳本任務(wù).net開發(fā)定制數(shù)據(jù)流任務(wù)（Pipeline）腳本任務(wù).net開發(fā)SSIS定制開發(fā)定制工作流任務(wù)（Tasks）12深入數(shù)據(jù)處理流程—Pipeline流水線緩存機制深入數(shù)據(jù)處理流程—Pipeline流水線緩存機制13企業(yè)級數(shù)據(jù)整合工具高性能支持復雜數(shù)據(jù)流程設(shè)計支持各類復雜數(shù)據(jù)源設(shè)計開發(fā)特性可視化數(shù)據(jù)流程設(shè)計動態(tài)調(diào)試、斷點自定義任務(wù)、轉(zhuǎn)換、數(shù)據(jù)源集成特性與數(shù)據(jù)挖掘緊密集成支持WebServices,XML,與BI應用緊密集成自身能夠作為數(shù)據(jù)源再度利用CallcenterbinaryfilesAppssemi-structuredLegacydatabaseWarehouseReportsMobileETL企業(yè)級數(shù)據(jù)整合工具Callcenterbinaryfil14參考資源參考資源15?2005MicrosoftCorporation.Allrightsreserved.Thispresentationisforinformationalpurposesonly.Microsoftmakesnowarranties,expressorimplied,inthissummary.?2005MicrosoftCorporation.16HOLLesson1：創(chuàng)建簡單的ETL包創(chuàng)建新的IntegrationServices項目添加和配置平面文件連接管理器添加和培訓OLEDB連接管理器在包中添加數(shù)據(jù)流任務(wù)添加并配置平面文件源添加并配置查找轉(zhuǎn)換添加和配置OLEDB目標測試包HOLLesson1：創(chuàng)建簡單的ETL包17HOLLesson2：添加循環(huán)復制Lesson1包添加和配置foreach循環(huán)容器修改平面文件連接管理器測試包HOLLesson2：添加循環(huán)18HOLLesson3：添加包配置復制Lesson2包啟用并配置包配置修改目錄屬性配置值測試包HOLLesson3：添加包配置19HOLLesson4：添加日志記錄復制Lesson3包添加和配置日志記錄測試包HOLLesson4：添加日志記錄20HOLLesson5：添加錯誤流重定向復制Lesson4包創(chuàng)建用于測試的bad文件添加錯誤流重定向測試包HOLLesson5：添加錯誤流重定向21基于SSIS定制ETL解決方案基于SSIS定制ETL解決方案22內(nèi)容提要產(chǎn)品定位及工作原理增強的功能靈活的配置定制開發(fā)內(nèi)容提要產(chǎn)品定位及工作原理23SSIS的定位企業(yè)級全面、可靠、易管理高起點、高性能、易擴充平臺特征高效的IDE易于定制的嵌入式體系不僅是ETL集成多種異類數(shù)據(jù)源并在同一過程中處理高性能的數(shù)據(jù)移動大規(guī)模數(shù)據(jù)的處理與轉(zhuǎn)換集成了數(shù)據(jù)清洗,數(shù)據(jù)挖掘,報表與在線分析系統(tǒng)SSIS的定位企業(yè)級24整合BI平臺的粘合劑整合BI平臺的粘合劑25SSIS是…SSIS是…26更多更細的功能更多更細的功能27更多更細的功能更多更細的功能28更多更細的功能更多更細的功能29Package任務(wù)包的調(diào)試LoopTaskTaskLoopTaskTaskTaskTaskDataFlow

TransformTransformTaskTaskDataFlow

TransformTransform從錯誤中止的點重新執(zhí)行相關(guān)設(shè)定CheckpointFileName:路徑\文件名CheckpointUsage:IfExists或AlwaysSaveCheckpoints:TrueFailPackageOnFailure:

True(

Task

一級)當前

Package可調(diào)整CheckpointUsage屬性，設(shè)置其執(zhí)行是否遵照前次設(shè)置可重新啟動的邊界Package任務(wù)包的調(diào)試LoopTaskTaskL30靈活的設(shè)置修改Package屬性、執(zhí)行方式，不需要重新打開設(shè)計器來編輯(例如源文件的路徑設(shè)置)相關(guān)設(shè)定可存放于SQLServer表、XML文件、系統(tǒng)注冊表、環(huán)境變量、或Parentpackage每個Package都可以有多個配置（configurationsets）靈活的設(shè)置修改Package屬性、執(zhí)行方式，不需要重新打31回顧：SSIS的API體系結(jié)構(gòu)PackageLoops&

SequencesStandardtransformsCustomtransformsData

Destination

AdaptersDataSource

AdaptersXMLPackageXMLPackageCommandLineTasksDTSDesignerWizardsEvent

Handlers回顧：SSIS的API體系結(jié)構(gòu)PackageLoops&32SSIS定制開發(fā)定制工作流任務(wù)（Tasks）腳本任務(wù).net開發(fā)定制數(shù)據(jù)流任務(wù)（Pipeline）腳本任務(wù).net開發(fā)SSIS定制開發(fā)定制工作流任務(wù)（Tasks）33深入數(shù)據(jù)處理流程—Pipeline流水線緩存機制深入數(shù)據(jù)處理流程—Pipeline流水線緩存機制34企業(yè)級數(shù)據(jù)整合工具高性能支持復雜數(shù)據(jù)流程設(shè)計支持各類復雜數(shù)據(jù)源設(shè)計開發(fā)特性可視化數(shù)據(jù)流程設(shè)計動態(tài)調(diào)試、斷點自定義任務(wù)、轉(zhuǎn)換、數(shù)據(jù)源集成特性與數(shù)據(jù)挖掘緊密集成支持WebServices,XML,與BI應用緊密集成自身能夠作為數(shù)據(jù)源再度利用CallcenterbinaryfilesAppssemi-structuredLegacydatabaseWarehouseReportsMobileETL企業(yè)級數(shù)據(jù)整合工具Callcenterbinaryfil35參考資源參考資源36?2005MicrosoftCorporation.Allrightsreserved.Thispresentationisforinformationalpurposesonly.Microsoftmakesnowarranties,expressorimplied,inthissummary.?2005MicrosoftCorporation.37HOLLesson1：創(chuàng)建簡單的ETL包創(chuàng)建新的IntegrationServices項目添加和配置平面文件連接管理器添加和培訓OLEDB連接管理器在包中添加數(shù)據(jù)流任務(wù)添加并配置平面文件源添加并配置查找轉(zhuǎn)換添加和配置OLEDB目標測試包HOLLesson1：創(chuàng)建簡單的ETL包38HOLLesson2：添加循環(huán)復制Lesson1包添加和配置foreach循環(huán)容器修改平面文件連接管理器測試包HOLLesson2：添