Sybase數據倉庫解決方案貴州電信應用案例

領測軟件測試網

概　述

　　

隨著電信市場的逐步開放，新興的運營商不斷產生，電信市場的競爭日趨激烈。一方面，為了能夠在競爭中生存和持續發展，各電信運營商都對企業的經營和管理提出了更高的要求。另一方面，電信

運營商原來為支撐各種業務運營所建立的計算機管理系統，由于功能比較單一，已無法全面滿足企業經營管理工作的需要，突出表現在單一系統產生的報表難以滿足企業管理的要求相對固定的報表不能跟上市場形勢的變化龐大的數據庫系統不能有效地產生企業知識。電信企業迫切需要尋找到一種新的經營管理支撐手段，使管理人員能夠及時準確地了解市場競爭、業務發展和資源使用情況，以便及時發現問題和解決問題，這正是電信經營分析系統的價值所在。

 　　

電信企業通過建設經營分析系統，能夠最終實現基于計算機管理系統的量化的閉環現代管理方式。即，由管理層制定政策，各生產部門根據管理層制定的政策組織業務管理，并把相關信息反饋給管理層，管理層分析反饋的信息，進行政策的調整，從而完成企業管理的閉環化�！�

　　

貴州電信經營分析系統建設思路

如何進行電信經營分析系統的建設呢

　　

首先，需要確定建設的路線和方針。這方面貴州電信有著者一整套的思路，為了有效的應對將來劇烈的市場變化，數據的集中是很關鍵的，集中的數據提供全省整體的視圖，是全局決策的基礎。因此經營分析系統作為綜合業務管理系統的一部分，同樣也按全省集中模式進行建設。省集中模式是指“一級平臺，兩級應用”�！耙患壠脚_”即在省一級建立統一的軟硬件平臺，對全省數據進行集中統一管理，同時建立相應的容災系統“兩級應用”即對系統應用而言，建立省中心和本地網兩級應用模式。各地的服務器和終端根據本地網規模及功能要求按需配置。各地州的客戶資料、資源等數據以及主用系統與容災系統之間的數據傳輸通過貴州電信DCN網實現。

　　

其次，需要確定采用的技術路線貴州電信在對諸多數據倉庫產品進行考察之后，考慮到Sybase產品的優異特性和在數據倉庫行業的豐富經營，如廣東電信運營分析系統、大鵬證券數據倉庫項目、全國鐵路客票系統、招商銀行數據倉庫項目、興業證券數據倉庫系統等最終選擇了Sybase提供的整體完整的解決方案。

采用的Sybase商業智能方案

　　

根據貴州電信綜合業務系統的要求，Sybase 和創智科技一起建議該決策支持系統解決方案采用集中式數據倉庫建立的方式。決策分析系統從各業務系統采集所需數據，經過整理轉換后，供決策分析系統使用。

　　

數據倉庫的實施是一個相當復雜的過程，主要包括五個部分的內容數據倉庫的設計建模、數據轉換與集成、數據存儲與管理、數據的分析和展現和數據倉庫的維護和管理。

　　

Sybase提供了覆蓋整個數據倉庫建立周期的一套完整的產品包: Warehouse Studio，它包括數據倉庫的建模、數據集成和轉換、數據存儲和管理、元數據管理和數據可視化分析等產品。以下說明了我們是如何結合Sybase的產品來做數據倉庫的設計與開發。

 

數據存儲與管理IQ

　　

數據倉庫的存儲可以選用多維數據庫，也可以選用關系型數據庫或其它特殊的存儲方式。數據的存儲要保證數據的安全性、完整性、一致性，同時還要具有復雜的分析查詢的高效性。

Sybase的數據倉庫產品Sybase IQ。IQ是一個關系型數據庫，為高性能決策支持和數據倉庫的建立而進行了優化。IQ中的關鍵技術是縱向數據存儲（通過列而不是通過行來進行）、Bit-Wise查詢索引、數據壓縮和Multiplex技術。使數據倉庫應用擁有卓越的查詢性能與最低的總擁有成本。

帶壓縮的列存儲

適合決策處理中的很多查詢只需要很少量的列數據

按列存儲數據時由于相鄰的字段值具有相同的數據類型，所以使Sybase IQ更容易對數據做壓縮處理。

增加列時不會引起數據庫結構的改變

IQ比典型傳統數據庫引擎少做超過10-100倍的磁盤I/O

獨特的索引結構

　

專利的比特式索引及相應的壓縮技術是Sybase的一項專利

Sybase IQ中對所有的列至少進行一次索引化，由此不僅帶來查詢效率的大幅提高，而且還降低了對磁盤空間的使用。IQ所需的磁盤一般只占原始輸入數據所需空間的40％－60％，而且，查詢速度會比傳統的數據庫引擎數以千倍的提高。

靈活性

　　

Sybase IQ支持任意類型的查詢。存取方法只與數據有關而與查詢無關,因此正確的數據結構在數據加載時就能夠預期得到。因此，數據倉庫的用戶可以隨心所欲地提出查詢要求而無須數據庫管理員作任何干預。

可擴展性

　　

Sybase IQ還使企業在處理能力上擁有極大的伸縮性，用戶可以從一個小型的數據倉庫開始，擴展到大型的數據倉庫。也可以從大型開始擴展到超大型的數據倉庫。

　　

IQ是一個新的并行數據庫架構，支持無限的用戶訪問數據倉庫，它與單節點的IQ一樣簡單，能夠將系統擴充到數百個節點而不需要對應用或DBA控制程序做任何的修改，并且不需要中斷系統的運行。在各種并行數據庫中，IQ 是唯一的能夠在同一個環境中混合使用不同架構(包括CPU和操作系統)節點的并行數據庫。IQ也是唯一的在流行的應用軟件中預先包裝好性能和擴展性的數據倉庫。

數據倉庫設計工具PowerDesigner

　　

從設計一開始，利用PowerDesigner的Warehouse Architect，很直觀地設計數據倉庫模型對象。然后，WarehouseArchitect可生成加載數據倉庫的腳本，甚至能夠直接向商業應用提交它們所需的信息。這樣，客戶就可以立即與數據倉庫交互了。由于WarehouseArchitect既支持關系模式，也支持星型模式，還支持聚集，所以無論設計者所面臨的業務需求多么復雜，都可以從Warehouse Architect得到強有力的工具支持。

數據轉換與集成PowerCenter

　　

在進行數據倉庫的建立時，最大的挑戰之一是如何將原始業務數據轉化為一致的格式，使之更好地為決策支持服務。這包括對已有數據的準確性和一致性進行檢驗、凈化，將數據進行轉化、提取、轉換、裝載到數據集市或數據倉庫以及對其進行定期更新和管理。PowerCenter作為數據抽取工具，從各種異夠的數據源中抽取數據，在數據抽取過程，用戶可以根據不同的抽取階段，靈活定制各種數據抽取流程，并定時地將數據加載到數據倉庫中。

　　

PowerCenter是一個集成的軟件產品套件,用于建造和管理數據集市和分析應用。PowerCenter交付了一個開放的可伸縮的解決方案，主要定位于數據集市完整的生命周期和分析應用開發及產品化的管理，能夠支持多種平臺上快速變化的大量數據作為數據來源，進行復雜的轉換處理以及支持高速的數據加載。其metadatarepository能夠協調并驅動一系列的核心功能，包括抽取、轉換、加載和管理等。

PowerCenter的圖形化用戶接口幫助數據倉庫管理人員很容易的設計復雜的source-to-target的映射，然后可以由PowerCenter強大的服務器來自動地執行。

數據分析和展現

　　

聯機分析處理(OLAP)是一個分析處理技術，它從企業的數據集合中收集信息，并運用數學運算和數據處理技術，靈活、交互式地提供統計、趨勢分析和預測報告。通過多種OLAP工具對數據倉庫中的數據進行多維分析、匯總，形成圖表或報表的形式，使決策者可以清晰、直觀地看到分析結果，這正是數據倉庫系統所要達到的目的。

　　

數據倉庫的開發應用主要有結構設計、數據集中組織和管理、數據的快速高效訪問等。其中數據的訪問一般都是由較為成熟的業務智能工具完成，因此不同于OLTP系統，數據倉庫系統的前端開發編程量是比較小的，但是其維護工作的時間跨度要大，因為決策支持應用的隨意性較強，不可能再象業務系統那樣固定一個統一的操作模式。

　　

Sybase的數據倉庫解決方案采取開放的集成策略，對現在市場上主流的OLAP和前端展現工具都可以很好的配合，因此可以更好的適應貴州電信的實際需要。

另外數據挖掘也是商業智能很重要的一個方面，本方案采用的SPSS Clementine提供了一個可視化的快速建立模型的環境，被譽為業界第一的數據挖掘工具。使用它，企業可以將數據分析和建模技術與特定的商業問題結合起來，找出其他傳統數據挖掘工具可能找不出的答案。

　　

組成部分??包括數據獲取(Data Access)、探查(Investigate)、整理(Manipulation)、建模(Modeling)和報告(Reporting)??都使用一些有效、易用的按鈕表示，用戶只需用鼠標將這些組件連接起來建立一個“數據流”，可視化的界面使得數據挖掘更加直觀交互，從而可以將用戶的商業知識在每一步中更好的利用。

數據倉庫的維護和管理

　　

元數據是關于數據的數據，能夠表示、定義數據的意義及系統各組成部件之間的關系的數據，它包括關鍵字、屬性、數據描述、物理數據結構、源數據結構、映射及轉換規則、綜合算法、代碼、缺省值、安全要求及數據時限等。管理好元數據是管理數據倉庫的關鍵。

　　

Sybase的Warehouse Control Center通過對元數據倉庫的集中管理，提供了數據倉庫解決方案的保證技術。從設計和開發到實現到最終用戶訪問，由工具和數據庫產生的對元數據的密集型集成和管理保證了真正企業級數據倉庫的建立。Warehouse Control Center是基于Intellidex技術的為數據倉庫開發人員提供的數據倉庫元數據管理工具，能夠在數據倉庫環境下進行數據采集、捕捉、存儲、管理和發布邏輯的、物理的以及上下文相關的信息，而不用去管它的物理存儲位置是在聯合數據倉庫上、分布式數據倉庫上還是二者兼有。業務用戶可以瀏覽根據其需求而生成的元數據對象，甚至可以使用發布和登記性能請求或選擇附加性能。

系統主要功能

　　

1.數據采集：采集系統管理、手工錄入采集、脫機平面文件采集和聯機數據的抽取采集。

2.主題分析：客戶主題分析、業務發展主題分析、帳務主題分析、營銷管理主題分析、市場競爭主題分析、服務質量主題分析。

3.專題分析: 客戶流失分析、客戶發展分析、客戶信用度評估分析、營銷計劃預演、競爭對手分析、高額欺詐分析、業務使用情況分析。

結束語

　　

的整體解決方案有效地支撐了當前貴州電信決策經營分析系統的建設，而且可以預見，由于整體方案領先的技術、開放的架構以及與戰略合作伙伴的軟件集成的策略，必為整個系統適應將來劇烈的市場變化環境下對經營分析系統的高適應性要求提供堅實的基礎。

SYBASE BI的整體解決方案有效地支撐了當前貴州電信決策經營分析系統的建設，由于整體方案領先的技術、開放的架構以及與戰略合作伙伴的軟件集成的策略，為整個系統適應將來劇烈的市場變化環境下對經營分析系統的高適應性要求提供堅實的基礎。 

文章來源于領測軟件測試網 http://www.kjueaiud.com/