數(shù)據(jù)倉庫技術論文
時間:2022-09-09 08:14:00
導語:數(shù)據(jù)倉庫技術論文一文來源于網友上傳,不代表本站觀點,若需要原創(chuàng)文章可咨詢客服老師,歡迎參考。
摘要:隨著計算機科學技術的發(fā)展,數(shù)據(jù)庫技術已經日益成熟,與此同時,數(shù)據(jù)倉庫技術也在飛速發(fā)展,它已被應用于企業(yè)管理、決策支持、市場分析等多個方面。本文首先介紹了數(shù)據(jù)倉庫技術,之后介紹了數(shù)據(jù)倉庫技術在商場(超市)中的應用。
關鍵字:數(shù)據(jù)倉庫商場(超市)計算機
一、前言
隨著計算機技術的發(fā)展,越來越多的企業(yè)逐漸建立了各種各樣的應用子系統(tǒng),如銷售系統(tǒng)、庫存系統(tǒng)、財務系統(tǒng)、人事系統(tǒng)等。它們能夠較好地滿足企業(yè)OLTP(OnlineTransactionProcessing,聯(lián)機事務處理)的應用需求。
但隨著市場競爭的日益激烈,企業(yè)需要利用現(xiàn)有的數(shù)據(jù),進行分析和推理,為企業(yè)的決策提供依據(jù)。當這種分析處理只涉及到很少的數(shù)據(jù)庫表時是可行的。當數(shù)據(jù)量迅速地增長而且查詢要求不斷復雜化時,這種建立在OLTP基礎上的DSS就不能很好地滿足決策的需求。另外從大量的歷史數(shù)據(jù)中獲取信息,要求系統(tǒng)保存大量的歷史數(shù)據(jù)。如果系統(tǒng)在進行事務處理時還要進行復雜的分析處理。這樣對于頻繁操作性處理的數(shù)據(jù)庫系統(tǒng)而言,將會不堪重負。因此,需要重新組織數(shù)據(jù),使其使于進行復雜分析。為適應這一需求,應運而生的就是數(shù)據(jù)倉庫技術。
商場(超市)關系到大眾生活水平的提高,它為大眾生活提供了便利,同時由于商場(超市)貨物、員工的復雜性,使得市場、人事管理、物品供需關系、設備管理顯得更為復雜,所以商場(超市)更應該象其他企業(yè)一樣,應用數(shù)據(jù)倉庫技術完善自己的市場、管理、供需關系等等。
二、數(shù)據(jù)倉庫技術概述
1.數(shù)據(jù)倉庫的概念
“數(shù)據(jù)倉庫是一個用以更好地支持企業(yè)或組織的決策分析處理的、面向主題的、集成的、不可更新的、隨時間不斷變化的數(shù)據(jù)集合”。面向主題、集成性、不可更新和隨時間變化性是其基本特征??梢哉f,數(shù)據(jù)倉庫是一種解決問題的方案,是用來更好地提取和管理并最終利用信息資源的辦法?!八詡鹘y(tǒng)的數(shù)據(jù)庫技術作為存儲數(shù)據(jù)和管理資源的基本手段,以統(tǒng)計分析技術作為分析數(shù)據(jù)和提取信息的有效手段,以人工智能技術作為挖掘知識和發(fā)現(xiàn)規(guī)律的科學途徑”。數(shù)據(jù)倉庫主要是面向聯(lián)機分析處理和決策分析的,而不面向事務處理。數(shù)據(jù)倉庫將信息按主題形式加以組織,來揭示信息的內在聯(lián)系和事物的規(guī)律及事物之間的聯(lián)系。對原有數(shù)據(jù)庫系統(tǒng)中的數(shù)據(jù)進行重新組織、按需求綜合以后,就得到數(shù)據(jù)倉庫中數(shù)據(jù)。因此,數(shù)據(jù)倉庫中的數(shù)據(jù)是高度集成的,反映的是一段相當長的時間內歷史數(shù)據(jù)的內容,是不同時點的數(shù)據(jù)庫快照的集合。數(shù)據(jù)倉庫中的數(shù)據(jù)是不可更新的,就應用而言,卻并非其中的數(shù)據(jù)一成不變,恰恰相反,數(shù)據(jù)倉庫中的數(shù)據(jù)由于不斷增加新的數(shù)據(jù)內容,定期刷新和添加,并剔除已經過時的數(shù)據(jù)內容,所以說,其數(shù)據(jù)內容是隨時間而不斷變化的。
2.數(shù)據(jù)倉庫中數(shù)據(jù)的組織結構
數(shù)據(jù)倉庫中的數(shù)據(jù)可分為兩類,(1)按照數(shù)據(jù)的綜合程度(稱之為粒度)分為四個等級:早期細節(jié)級、當前細節(jié)級、輕度綜合級、高度綜合級。“元數(shù)據(jù)經過綜合后,首先進入當前細節(jié)級,并根據(jù)具體需要進行進一步的綜合從而進入輕度綜合級乃至高度綜合級,老化的數(shù)據(jù)將進入早期細節(jié)級”。(2)元數(shù)據(jù)(metadata)是“關于數(shù)據(jù)的數(shù)據(jù)”,它能有效地管理數(shù)據(jù)倉庫,對元數(shù)據(jù)可從構建時間元數(shù)據(jù)、使用元數(shù)據(jù)、控制元數(shù)據(jù)三個角度分類分析。數(shù)據(jù)倉庫中的數(shù)據(jù)就是通過粒度劃分和分割進行有效地存儲的。
3.相關的信息開發(fā)工具
要滿足用戶全面、系統(tǒng)、多層次信息需求的目標,必須借助于數(shù)據(jù)倉庫并建立數(shù)據(jù)倉庫系統(tǒng)才能實現(xiàn)?!皵?shù)據(jù)倉庫系統(tǒng)是以數(shù)據(jù)倉庫為基礎,通過查詢工具和分析工具,完成對信息的提取,滿足用戶的各種需求”。因此,進行復雜數(shù)據(jù)分析、提供管理決策還必須引入相應的數(shù)據(jù)倉庫工具層?!皵?shù)據(jù)倉庫系統(tǒng)是多種技術的綜合體,由數(shù)據(jù)倉庫、數(shù)據(jù)倉庫管理系統(tǒng)、數(shù)據(jù)倉庫工具三個部分組成”。數(shù)據(jù)倉庫工具層包括:多維分析工具、數(shù)據(jù)挖掘工具以及可視化工具。多維分析工具主要指聯(lián)機分析處理(OLAP,On-lineAnalyticalProcessing),“OLAP是針對特定問題的聯(lián)機數(shù)據(jù)訪問和分析”。目前,這類產品己經有很多了,如BrioQuery,GQL,Impromptu,PowerPlay,Commander,InformationAdvantage等等。數(shù)據(jù)挖掘(DM,DataMining)是一種決策支持過程,它主要基于AI、機器學習、統(tǒng)計學等技術,高度自動化地分析原有數(shù)據(jù),做出歸納型的推理,從中挖掘出潛在的信息用于決策。
三、數(shù)據(jù)倉庫技術在商場(超市)中的應用
1.設備管理
數(shù)據(jù)倉庫化是商場(超市)范圍內數(shù)據(jù)的處理過程它將商場(超市)內分散的原始操作數(shù)據(jù)和來自外部的數(shù)據(jù)匯集和整理在一起,為商場(超市)提供完整、及時、準確和明了的決策信息,有效地服務于商場(超市)的全方位決策。作為一個決策支持環(huán)境,DW(DataWarhouse)收集存儲了各種不同數(shù)據(jù)源中的數(shù)據(jù)。通過數(shù)據(jù)的組織給決策支持者提供分布在整個商場(超市)內部跨平臺的數(shù)據(jù)。在對設備管理數(shù)據(jù)倉庫的開發(fā)過程中,首先根據(jù)商場(超市)對設備管理的具體要求和設想,確定數(shù)據(jù)倉庫開發(fā)的目標,規(guī)劃系統(tǒng)的數(shù)據(jù)范圍和功能制定工作計劃;然后分階段建立元數(shù)據(jù)模型,主題區(qū)數(shù)據(jù)模型,開發(fā)數(shù)據(jù)倉庫邏輯模型;再根據(jù)邏輯模型設計多維數(shù)據(jù)結構維表,在對源數(shù)據(jù)進行分析的基礎上,用數(shù)據(jù)轉換程序(DTS)將其轉入數(shù)據(jù)倉庫中,最后是對數(shù)據(jù)倉庫的使用和維護,添刪數(shù)據(jù),擴展功能等。
2.財務決策支持
典型的財務決策問題有:投資決策、籌資決策、成本決策、銷售決策等。
財務決策支持系統(tǒng)需要的信息是通過日常業(yè)務數(shù)據(jù)所體現(xiàn)的整體趨勢,或隨時間變化而表現(xiàn)出來的變化趨勢,必須對業(yè)務數(shù)據(jù)進行分類、析取、歸納、加工等處理才能得到這些信息。對數(shù)據(jù)信息的這些要求決定了財務決策支持系統(tǒng)的數(shù)據(jù)庫有別于普通的業(yè)務數(shù)據(jù)庫,因此,必須為企業(yè)建立數(shù)據(jù)倉庫以適應決策支持系統(tǒng)的要求。
財務決策支持系統(tǒng)具有三個功能:決策、管理和核算。核算,即會計功能。在會計層,它完成會計原始數(shù)據(jù)的收集、記帳、算帳和報帳的業(yè)務處理后輸出會計信息,同時將會計基礎信息傳輸?shù)焦芾韺印9芾?,即管理信息功能。在管理層,進行會計基礎信息的分析,并將分析結果輸出的同時,再送給決策層。決策,即根據(jù)會計分析信息和其它管理信息進行預測、判斷和決策,然后將決策方案下達到管理層。在管理層進行指標分解,編制財務計劃,再下達到核算層,并對核算層的執(zhí)行過程進行控制。
3.管理決策支持
在商場(超市)管理決策支持系統(tǒng)的構架方案中,OLTP應用系統(tǒng)中的數(shù)據(jù)庫,可分為不同的類型,它是DSS的數(shù)據(jù)來源。大量不同事務的、可靠的、歷史性的數(shù)據(jù)是建立DW的基礎。OLTP從DW中的可集成數(shù)據(jù)出發(fā),構建面向分析的多維數(shù)據(jù)模型,自動地發(fā)現(xiàn)數(shù)據(jù)中的潛在模式,并以這些模式為基礎自動做出預測。DM中挖掘的知識可以直接用于指導OLAP的分析處理,而OLAP分析得出的新知識又可以補充到系統(tǒng)的知識庫中。傳統(tǒng)的DSS往往獨立地設計并實現(xiàn),將數(shù)據(jù)庫、模型庫和知識庫,缺乏內在的統(tǒng)一性。而數(shù)據(jù)倉庫、聯(lián)機分析和數(shù)據(jù)挖掘組成的新的DSS,將三庫有力地結合在一個多維的數(shù)據(jù)庫中,利用多維分析工具,通過可視化工具將分析結果呈現(xiàn)給用戶。
4.其他應用
4.1提高市場競爭力,提升客戶服務水平。通過建立數(shù)據(jù)倉庫,為客戶資料的統(tǒng)計分析提供基本的信息源和輔助工具,已成為各個企業(yè)包括商場提高市場競爭能力和客戶服務水平的關鍵。
4.2提高管理水平,降低成本,提高效率。隨著市場經濟競爭的發(fā)展和反壟斷經營的推進,商場(超市)逐漸向規(guī)?;?、集約化方向發(fā)展,各個公司迫切要求提高其自身的管理水平。數(shù)據(jù)倉庫的建立可使企業(yè)更
加及時、準確地掌握自身的經營狀況、資金情況、利潤情況、客戶群分布等重要信息。
雖然數(shù)據(jù)倉庫技術在各個行業(yè)包括商場(超市)中的應用已日漸成熟,但作為商場(超市)不必要模仿其他行業(yè),應該根據(jù)自己行業(yè)的特點有針對性地應用數(shù)據(jù)倉庫技術,凸顯自己的行業(yè)優(yōu)勢。
參考文獻:
吳峨,即建軍.財務管理決策支持系統(tǒng)的研究。信息系統(tǒng)工程,1995
孫林,張培衢.財務數(shù)據(jù)倉庫系統(tǒng)的分析設計與實現(xiàn)。河南師范大學學報(自然科學版).2000
李海剛.基于數(shù)據(jù)倉庫的數(shù)據(jù)挖掘及其在決策系統(tǒng)中的應用[J].現(xiàn)代計算機.2001
李德勇.基于證券交易數(shù)據(jù)的數(shù)據(jù)倉庫的建立及運用[J].電腦與信息技術,2001
李靜.創(chuàng)建企業(yè)級數(shù)據(jù)倉庫的關鍵技術[J].計算機應用研究.2002