商业智慧SSIS整合服务.pptVIP

Microsoft SQL Server 2005SSIS整合服務 資料轉換的困難 異質資料來源 商業邏輯運算與彈性 分割,過濾,彙總,聯集,排序…等 效率 校正與一致化 男/女 ? M/F ? 0/1 週期性處理與管理 安全議題 SSIS簡介 特色 大幅強化DTS (Data Transformation Services)的功能 分離 Control Flow 與Data Flow 加入Event Handler 封裝(Packaging)功能提升 SSIS 整體架構 SSIS設計環境 建立專案 開始?程式集?Microsoft SQL Server 2005 ?SQL Server Business Intelligence Development Studio 方案總管 資料來源 方便統一連接資料來源,但是和連接管理員沒有相依性 資料來源檢視 封裝 副檔名為dtsx, SSIS專案的執行單位 XML格式存放在SQL Server的MSDB系統資料庫內 透過“部署”發佈到資料庫裡 控制流程 SSIS的資料整合工作，主要是透過控制流程加上資料流程來進行 控制流程負責程序的進行 容器(Container) 工作(Task) 優先順序條件約束 資料流程 資料流程負責控制流程當中，有關於資料存取、轉換的部份 資料來源存取 資料轉換 資料目的存取 可以觀察資料變化的過程 範例一、控制流程 條件約束 Dts.TaskResult=Dts.Results.Success 範例二、資料連結與檔案輸出 IP:18 帳號: hr 密碼: hr 範例三、衍生的資料與排序 Gender==“M”? “男” : “女” 範例四、FTP IP: 6 Port:222 帳號/密碼: student / student 範例五、檔案系統工作 參考資料 Microsoft Technet-微軟二日營, 恆逸資訊 胡百敬, /taiwan/technet/webcast/ondemand/downloads_technet.aspx Microsoft SQL Server 2005 SSIS整合服務, 恆逸資訊 胡百敬 姚巧玫,悅知文化 商業智慧及資料倉儲運作架構 SQL-2005 BI Solution Architecture, 慧盟資訊 * * SQL 2005 Integration Service 全新的 SQL Server 商業智慧應用程式 Data Transformation Services 的接續版本 高效能的資料整合平台 1GB/10 mins in FET DW(Trans data from Teradata to SQL 2005) 全新用 .NET 撰寫的架構，更豐富的功能 完善的資料檢視、單步除錯與錯誤處理 透過 pipeline 可以更豐富地加值資料，且全部在記憶體內完成，不需要中介資料表 以封裝(Package)為執行單位，而非專案(Project) * Merge data from heterogeneous data stores: Text files ?Mainframes Spreadsheets ? Multiple RDBMS Refresh data in data warehouses and data marts Cleanse data before loading to remove errors High-speed load of data into online transaction processing (OLTP) and online analytical processing (OLAP) databases Send status notifications on success/failure Build BI into a data transformation process without the need for redundant staging environments Automate data-administrative functions Integration ServicesWhy ETL Matters * Enterprise ETL platform High performance High scale More trustworthy and reliable Best in class usability Rich development environment Source control Visual debugging of control flow and data Great range of transf