超越ETL的BI整合工具sqlserver ssis課件

基于SSIS定制ETL解決方案基于SSIS定制ETL解決方案1內容提要產品定位及工作原理增強的功能靈活的配置定制開發(fā)內容提要產品定位及工作原理2SSIS的定位企業(yè)級全面、可靠、易管理高起點、高性能、易擴充平臺特征高效的IDE易于定制的嵌入式體系不僅是ETL集成多種異類數據源并在同一過程中處理高性能的數據移動大規(guī)模數據的處理與轉換集成了數據清洗,數據挖掘,報表與在線分析系統(tǒng)SSIS的定位企業(yè)級3整合BI平臺的粘合劑整合BI平臺的粘合劑4SSIS是…SSIS是…5更多更細的功能更多更細的功能6更多更細的功能更多更細的功能7更多更細的功能更多更細的功能8Package任務包的調試LoopTaskTaskLoopTaskTaskTaskTaskDataFlow

TransformTransformTaskTaskDataFlow

TransformTransform從錯誤中止的點重新執(zhí)行相關設定CheckpointFileName:路徑\文件名CheckpointUsage:IfExists或AlwaysSaveCheckpoints:TrueFailPackageOnFailure:

True(

Task

一級)當前

Package可調整CheckpointUsage屬性，設置其執(zhí)行是否遵照前次設置可重新啟動的邊界Package任務包的調試LoopTaskTaskL9靈活的設置修改Package屬性、執(zhí)行方式，不需要重新打開設計器來編輯(例如源文件的路徑設置)相關設定可存放于SQLServer表、XML文件、系統(tǒng)注冊表、環(huán)境變量、或Parentpackage每個Package都可以有多個配置（configurationsets）靈活的設置修改Package屬性、執(zhí)行方式，不需要重新打10回顧：SSIS的API體系結構PackageLoops&

SequencesStandardtransformsCustomtransformsData

Destination

AdaptersDataSource

AdaptersXMLPackageXMLPackageCommandLineTasksDTSDesignerWizardsEvent

Handlers回顧：SSIS的API體系結構PackageLoops&11SSIS定制開發(fā)定制工作流任務（Tasks）腳本任務.net開發(fā)定制數據流任務（Pipeline）腳本任務.net開發(fā)SSIS定制開發(fā)定制工作流任務（Tasks）12深入數據處理流程—Pipeline流水線緩存機制深入數據處理流程—Pipeline流水線緩存機制13企業(yè)級數據整合工具高性能支持復雜數據流程設計支持各類復雜數據源設計開發(fā)特性可視化數據流程設計動態(tài)調試、斷點自定義任務、轉換、數據源集成特性與數據挖掘緊密集成支持WebServices,XML,與BI應用緊密集成自身能夠作為數據源再度利用CallcenterbinaryfilesAppssemi-structuredLegacydatabaseWarehouseReportsMobileETL企業(yè)級數據整合工具Callcenterbinaryfil14參考資源參考資源15?2005MicrosoftCorporation.Allrightsreserved.Thispresentationisforinformationalpurposesonly.Microsoftmakesnowarranties,expressorimplied,inthissummary.?2005MicrosoftCorporation.16HOLLesson1：創(chuàng)建簡單的ETL包創(chuàng)建新的IntegrationServices項目添加和配置平面文件連接管理器添加和培訓OLEDB連接管理器在包中添加數據流任務添加并配置平面文件源添加并配置查找轉換添加和配置OLEDB目標測試包HOLLesson1：創(chuàng)建簡單的ETL包17HOLLesson2：添加循環(huán)復制Lesson1包添加和配置foreach循環(huán)容器修改平面文件連接管理器測試包HOLLesson2：添加循環(huán)18HOLLesson3：添加包配置復制Lesson2包啟用并配置包配置修改目錄屬性配置值測試包HOLLesson3：添加包配置19HOLLesson4：添加日志記錄復制Lesson3包添加和配置日志記錄測試包HOLLesson4：添加日志記錄20HOLLesson5：添加錯誤流重定向復制Lesson4包創(chuàng)建用于測試的bad文件添加錯誤流重定向測試包HOLLesson5：添加錯誤流重定向21基于SSIS定制ETL解決方案基于SSIS定制ETL解決方案22內容提要產品定位及工作原理增強的功能靈活的配置定制開發(fā)內容提要產品定位及工作原理23SSIS的定位企業(yè)級全面、可靠、易管理高起點、高性能、易擴充平臺特征高效的IDE易于定制的嵌入式體系不僅是ETL集成多種異類數據源并在同一過程中處理高性能的數據移動大規(guī)模數據的處理與轉換集成了數據清洗,數據挖掘,報表與在線分析系統(tǒng)SSIS的定位企業(yè)級24整合BI平臺的粘合劑整合BI平臺的粘合劑25SSIS是…SSIS是…26更多更細的功能更多更細的功能27更多更細的功能更多更細的功能28更多更細的功能更多更細的功能29Package任務包的調試LoopTaskTaskLoopTaskTaskTaskTaskDataFlow

TransformTransformTaskTaskDataFlow

TransformTransform從錯誤中止的點重新執(zhí)行相關設定CheckpointFileName:路徑\文件名CheckpointUsage:IfExists或AlwaysSaveCheckpoints:TrueFailPackageOnFailure:

True(

Task

一級)當前

Package可調整CheckpointUsage屬性，設置其執(zhí)行是否遵照前次設置可重新啟動的邊界Package任務包的調試LoopTaskTaskL30靈活的設置修改Package屬性、執(zhí)行方式，不需要重新打開設計器來編輯(例如源文件的路徑設置)相關設定可存放于SQLServer表、XML文件、系統(tǒng)注冊表、環(huán)境變量、或Parentpackage每個Package都可以有多個配置（configurationsets）靈活的設置修改Package屬性、執(zhí)行方式，不需要重新打31回顧：SSIS的API體系結構PackageLoops&

SequencesStandardtransformsCustomtransformsData

Destination

AdaptersDataSource

AdaptersXMLPackageXMLPackageCommandLineTasksDTSDesignerWizardsEvent

Handlers回顧：SSIS的API體系結構PackageLoops&32SSIS定制開發(fā)定制工作流任務（Tasks）腳本任務.net開發(fā)定制數據流任務（Pipeline）腳本任務.net開發(fā)SSIS定制開發(fā)定制工作流任務（Tasks）33深入數據處理流程—Pipeline流水線緩存機制深入數據處理流程—Pipeline流水線緩存機制34企業(yè)級數據整合工具高性能支持復雜數據流程設計支持各類復雜數據源設計開發(fā)特性可視化數據流程設計動態(tài)調試、斷點自定義任務、轉換、數據源集成特性與數據挖掘緊密集成支持WebServices,XML,與BI應用緊密集成自身能夠作為數據源再度利用CallcenterbinaryfilesAppssemi-structuredLegacydatabaseWarehouseReportsMobileETL企業(yè)級數據整合工具Callcenterbinaryfil35參考資源參考資源36?2005MicrosoftCorporation.Allrightsreserved.Thispresentationisforinformationalpurposesonly.Microsoftmakesnowarranties,expressorimplied,inthissummary.?2005MicrosoftCorporation.37HOLLesson1：創(chuàng)建簡單的ETL包創(chuàng)建新的IntegrationServices項目添加和配置平面文件連接管理器添加和培訓OLEDB連接管理器在包中添加數據流任務添加并配置平面文件源添加并配置查找轉換添加和配置OLEDB目標測試包HOLLesson1：創(chuàng)建簡單的ETL包38HOLLesson2：添加循環(huán)復制Lesson1包添加和配置foreach循環(huán)容器修改平面文件連接管理器測試包HOLLesson2：添