Sybase IQ － 效率最佳化的资料仓储技术 - AccessUs - 正平整合行销.DOC

Sybase IQ? 效率最佳化的資料倉儲技術 _______________ 資料太多， 資訊卻是不足 ______________________________________________________ 現在的公司行號通常是經由完整的資訊來做出明智的決策以取得其競爭優勢。對於產品商機、競爭者威脅、貿易不平衡或一個新興的市場要能發展出一套最佳的回應，意味著你必須要能由多個地理位置、商業單位或產品線匯集大量資訊並予以篩選。 資料倉儲計劃通常是試圖讓企業內部得以存取到必要的企業資料(corporate date)以訂定出策略性決策。資料倉儲系統通常會定期的由許多關聯式系統及主機系統匯入資訊以建立一個經過整合的商業活動視野。這些系統接著會將資訊轉換為一種一致的、容易存取的格式，並分送到需要進行決策支援的單位。 在過去，資料倉儲的重點一直是在資料收集上。但是，各企業對於其資料倉儲系統的要求愈來愈多，透過一些有限制的應用或整夜執行的批次報表來擷取資訊已不再足夠。經理人員需要以“發現”(discovery)模式來運作﹔能夠即時的建立查詢，並能鑽入資料的更深層，以及迅速的回答一些更深入的問題，便成為經理人員在進行重要決策之前能對企業環境有更佳了解的必要功能。Meta Group最近的調查顯示對資料倉儲所進行的活動中49%是任意(ad hoc)查詢，而非是預先計劃好的查詢(planned query)。因此我們已經由強調匯集資料的第一代資料倉儲前進到第二代的互動式倉儲(interactive warehousing)，第二代的互動式倉儲著重於將資訊傳送給一個分散式企業的所有使用者。 我們以目前佔資料倉儲應用60%到80%的銷售應用系統及行銷資訊系統或是更廣範圍的客戶智慧系統來做說明。行銷人員及商人們除了能使用先前的商業決策資料來追蹤其以往的決策效率外，幾乎無法事先預知他們將會需要什麼資訊。市場狀況改變及一些特定的業務狀況，諸如庫存等級及客戶行為的詳細分析(經由客戶、交易及產品資料分析而出)，可以提供分析師一些他們先前無法預知的一些潛在有利途徑。 例如，即使是一個簡單的“定價”問題，可以導引到一些與客戶源有關的更深入查詢，諸如： ( 我們在那裏失去了市場佔有率？ ( 我們的競爭者在促銷那些產品？ ( 客戶的種類及他們購買的時間？ ( 客戶買了那些產品組合？ 為配合這一個接一個的問題，反應時間必須極短，決策者才能保持他們的思路以迅速完成他們的計劃。 企業亦必須要能經濟有效的提供此種迅速的、互動式的存取給大量的使用者。Meta Group在1995年的研究中建議，一旦上線後，資料倉儲必須預期要有500個使用者，建立的成本平均為3200萬美元。多個使用者同時執行任意查詢會使傳統的資料倉儲陷入泥沼，因為它會導致處理機的競爭更加嚴重，對於那些主要倚賴平行處理的系統而言更是明顯。因此，對於互動式資料倉儲而言，一個更具延展性、更經濟有效的方法是絕對必要的。 雖然現有的技術已納入許多方法得以增加查詢的效率及產能(throughput)，但如果是要提供能符合現代商業環境必須的互動層次及彈性層次，資料倉儲系統還要更進一步才行。這些新技術必須要能夠達成下列功能： ( 透過降低處理每個查詢所需的量來加速回應時間。 ( 在單處理機及多處理機系統上能經濟有效的支援許多使用者。 ( 提供一個彈性的方式來加速任何查詢(不論是事先規劃的查詢或未事 先規劃的查詢)的回應時間，且不需要為特定查詢而調整系統。 _________________ 傳統的方式 不適合互動式 資料倉儲 _______________________________________________________________ 認識到必須要提供快速的回應給使用者的分析需求，軟體公司正納入各種不同的索引及資料庫設計技術。雖然每一種技術均有其強處且可改善某些種類的操作，但這些技術沒有一個能獨立的完全滿足互動式資料倉儲的需求。 B-tree索引方式 傳統關聯式資料庫管理系統(RDBMS)是經由平衡樹(B-tree)索引方式來增進資料存取效率。一個索引經由記錄選定欄位的值並直接指向包含該資料的資料頁來提供一個尋找資料記錄的捷徑。(見圖1) 不相關的資料會自動的被過濾掉，因此要尋找某一特定客戶的記錄時，系統只要讀取該客戶的索引，再順著指標直接到該客戶資訊所在的資料頁(data page)即可。索引經由直接指向相關的資訊來免除昂貴表格掃瞄(table scan)。 圖1. Traditional