基于數(shù)據(jù)挖掘的物流信息系統(tǒng)的分析和設(shè)計(jì)
2008-3-3 1:19:00 來(lái)源:物流天下 編輯:56885 關(guān)注度:摘要:... ...
現(xiàn)代物流系統(tǒng)是一個(gè)龐大復(fù)雜的系統(tǒng),特別是全程物流,包括運(yùn)輸、倉(cāng)儲(chǔ)、配送、搬運(yùn)、包裝和物流再加工等諸多環(huán)節(jié),每個(gè)環(huán)節(jié)信息流量十分巨大。尤其是現(xiàn)代信息化物流網(wǎng)絡(luò)體系的應(yīng)用使原來(lái)數(shù)據(jù)庫(kù)的規(guī)模不斷擴(kuò)大,產(chǎn)生巨大的數(shù)據(jù)流,使企業(yè)很難對(duì)這些數(shù)據(jù)進(jìn)行準(zhǔn)確、高效的收集和及時(shí)處理,以此幫助決策者做出快速、準(zhǔn)確地決策,實(shí)現(xiàn)對(duì)物流過(guò)程的控制,降低整個(gè)過(guò)程的物流成本。數(shù)據(jù)挖掘技術(shù)能夠幫助企業(yè)在物流信息系統(tǒng)管理中,及時(shí)、準(zhǔn)確地收集和分析客戶(hù)、市場(chǎng)、銷(xiāo)售及整個(gè)企業(yè)內(nèi)部的各種信息,對(duì)客戶(hù)的行為及市場(chǎng)趨勢(shì)進(jìn)行有效的分析,了解不同客戶(hù)的愛(ài)好,從而可以為客戶(hù)提供有針對(duì)性的產(chǎn)品和服務(wù),大大提高各類(lèi)客戶(hù)對(duì)企業(yè)和產(chǎn)品的滿(mǎn)意度。
2.數(shù)據(jù)挖掘技術(shù)
數(shù)據(jù)挖掘是一個(gè)利用各種分析工具從大量的、不完全的、有噪聲的、模糊的、隨機(jī)的實(shí)際應(yīng)用數(shù)據(jù)中,提取隱含在其中的、人們事先不知道的、但又是潛在有用的信息和知識(shí)的過(guò)程。數(shù)據(jù)挖掘是一種新的信息處理技術(shù),其主要特點(diǎn)是對(duì)企業(yè)數(shù)據(jù)(倉(cāng)庫(kù)中的大量業(yè)務(wù)數(shù)據(jù)進(jìn)行抽取、轉(zhuǎn)換、分析和其他模型化處理,從中提取輔助企業(yè)決策的關(guān)鍵性數(shù)據(jù)。因此,數(shù)據(jù)挖掘可以描述為:按企業(yè)既定業(yè)務(wù)目標(biāo),對(duì)大量的企業(yè)數(shù)據(jù)進(jìn)行探索和分析,揭示隱藏的、未知的或驗(yàn)證已知的規(guī)律性,并進(jìn)一步將其模型化的先進(jìn)有效的方法。數(shù)據(jù)挖掘的對(duì)象可為數(shù)據(jù)庫(kù)、文件系統(tǒng)或其他任何組織在一起的數(shù)據(jù)集合。
數(shù)據(jù)挖掘過(guò)程一般由3個(gè)主要階段組成:數(shù)據(jù)準(zhǔn)備、數(shù)據(jù)采集、結(jié)果表達(dá)和解釋。
1 數(shù)據(jù)準(zhǔn)備對(duì)于數(shù)據(jù)挖掘的成功應(yīng)用至關(guān)重要,數(shù)據(jù)準(zhǔn)備大致分為3步: 數(shù)據(jù)集成、數(shù)據(jù)選擇、數(shù)據(jù)轉(zhuǎn)化。數(shù)據(jù)集成是從多個(gè)異質(zhì)操作性數(shù)據(jù)庫(kù)、文件或遺留系統(tǒng)提取并集成數(shù)據(jù);數(shù)據(jù)選擇是在相關(guān)領(lǐng)域和專(zhuān)家知識(shí)的指導(dǎo)下,辨別出需要進(jìn)行分析的數(shù)據(jù)集合,縮小挖掘范圍,避免盲目搜索,提高數(shù)據(jù)挖掘的效率和質(zhì)量;數(shù)據(jù)縮減和轉(zhuǎn)化是選定的數(shù)據(jù)在挖掘前,加以精煉處理,在專(zhuān)家的指導(dǎo)下得到的數(shù)據(jù)。
(2)數(shù)據(jù)采集作為數(shù)據(jù)挖掘技術(shù)的核心,主要是在確定挖掘任務(wù)的基礎(chǔ)上,選擇適當(dāng)?shù)臄?shù)據(jù)挖掘技術(shù)和算法,并在此基礎(chǔ)上反復(fù)迭代的搜索,從數(shù)據(jù)集合中抽取隱藏的、新穎的模式。如神經(jīng)元網(wǎng)絡(luò)、決策樹(shù)、聚類(lèi)分析技術(shù)、關(guān)聯(lián)發(fā)現(xiàn)和序列發(fā)現(xiàn)技術(shù)等和ID3算法、BP算法等。
(3)結(jié)果表達(dá)和解釋是對(duì)數(shù)據(jù)挖掘發(fā)現(xiàn)的模式進(jìn)行解釋和評(píng)價(jià),過(guò)濾出有用的知識(shí)呈現(xiàn)給用戶(hù)。 3.數(shù)據(jù)挖掘在物流信息系統(tǒng)中的應(yīng)用
隨著集成化物流管理信息系統(tǒng)的建立,以及網(wǎng)絡(luò)技術(shù)、EDI、人工智能、條形碼與POS等各種先進(jìn)技術(shù)的應(yīng)用,物流信息的商品化、物流信息收集的數(shù)據(jù)庫(kù)化和代碼、物流信息處理的電子化和計(jì)算機(jī)化,把挖掘到的規(guī)則與物流管理各方面有機(jī)地結(jié)合,就能極大地提高企業(yè)的競(jìng)爭(zhēng)力。 物流決策系統(tǒng)是一種結(jié)合了數(shù)據(jù)挖掘技術(shù)和人工智能的新型經(jīng)營(yíng)決策系統(tǒng),主要通過(guò)人工智能對(duì)原料采購(gòu)、加工生產(chǎn)、分銷(xiāo)配送到商品銷(xiāo)售的各個(gè)環(huán)節(jié)的大量信息進(jìn)行采集,并利用數(shù)據(jù)倉(cāng)庫(kù)和數(shù)據(jù)挖掘技術(shù)對(duì)其進(jìn)行分析處理,并據(jù)此確定相應(yīng)的經(jīng)營(yíng)策略。
3.1 數(shù)據(jù)倉(cāng)庫(kù)的建立
數(shù)據(jù)倉(cāng)庫(kù)作為數(shù)據(jù)挖掘的基礎(chǔ),不同于傳統(tǒng)的聯(lián)機(jī)事務(wù)處理系統(tǒng),它具有面向主題的、集成的、不可更新以及隨時(shí)間變化的特性。各個(gè)聯(lián)機(jī)事務(wù)處理系統(tǒng)作為數(shù)據(jù)倉(cāng)庫(kù)的原始數(shù)據(jù)源,以文件方式提供企業(yè)在日常活動(dòng)中收集的包括定貨單、存貨單、應(yīng)付帳、交易條款、客戶(hù)情況等在內(nèi)的大量數(shù)據(jù)資料和報(bào)表,同時(shí)還有大量的外部信息等數(shù)據(jù)。數(shù)據(jù)倉(cāng)庫(kù)通過(guò)ETL過(guò)程(抽取、轉(zhuǎn)換和加載處理這些接口文件,并且按不同的主題域組織、存儲(chǔ)和管理這些客戶(hù)數(shù)據(jù)。通過(guò)數(shù)據(jù)倉(cāng)庫(kù)接口,對(duì)數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)進(jìn)行聯(lián)機(jī)分析和數(shù)據(jù)挖掘。在建立完成企業(yè)級(jí)的信息數(shù)據(jù)倉(cāng)庫(kù)之后,可以基于這個(gè)數(shù)據(jù)倉(cāng)庫(kù)平臺(tái)進(jìn)行數(shù)據(jù)挖掘工作。
3.2 基于數(shù)據(jù)挖掘的物流信息系統(tǒng)的體系結(jié)構(gòu)
基于數(shù)據(jù)挖掘的物流信息的體系結(jié)構(gòu)主要由以下幾部分組成:
⑴ 物流信息收集與處理:記錄物流管理活動(dòng)中的各類(lèi)信息,對(duì)物流活動(dòng)的各種信息進(jìn)行采集、處理、傳輸,并按照統(tǒng)一的格式存入到數(shù)據(jù)倉(cāng)庫(kù)。
⑵ 數(shù)據(jù)挖掘的物流信息管理系統(tǒng):把收集得到的數(shù)據(jù)匯總到數(shù)據(jù)倉(cāng)庫(kù),再根據(jù)數(shù)據(jù)挖掘送來(lái)的數(shù)據(jù),為管理決策人員提供最新的和最有價(jià)值的信息或知識(shí),幫助其快速、正確地做出決策。
⑶ 數(shù)據(jù)挖掘:根據(jù)決策者提出的問(wèn)題特點(diǎn),確定挖掘的任務(wù)或目的,對(duì)數(shù)據(jù)倉(cāng)庫(kù)中的相關(guān)數(shù)據(jù)進(jìn)行精簡(jiǎn)和預(yù)處理,再?gòu)木?jiǎn)后的數(shù)據(jù)中挖掘出新的、有效的新知識(shí),提供給數(shù)據(jù)挖掘的物流信息管理系統(tǒng),由它給決策者提供有效的知識(shí)。
⑷ 知識(shí)庫(kù):包括基于部門(mén)的數(shù)據(jù)倉(cāng)庫(kù)的組成結(jié)構(gòu)、隸屬函數(shù)等知識(shí)。
⑸ 開(kāi)發(fā)人員和專(zhuān)家接口:開(kāi)發(fā)人員和專(zhuān)家通過(guò)這個(gè)接口對(duì)知識(shí)庫(kù)中的知識(shí)進(jìn)行定義和維護(hù)。
⑹ 數(shù)據(jù)倉(cāng)庫(kù):主要存儲(chǔ)涉及物流管理的各種數(shù)據(jù)。
該系統(tǒng)將原材料、采購(gòu)、運(yùn)輸、配送、儲(chǔ)存、包裝、定單處理、庫(kù)存控制等環(huán)節(jié)聯(lián)合起來(lái),真正實(shí)現(xiàn)貨物從生產(chǎn)流水線到客戶(hù)這一完整暢通的流通過(guò)程,為用戶(hù)提供高質(zhì)量的服務(wù)。
3.3 基于數(shù)據(jù)挖掘的物流信息系統(tǒng)的特點(diǎn)
與傳統(tǒng)的物流管理信息系統(tǒng)相比,基于數(shù)據(jù)挖掘的物流信息系統(tǒng)具有以下特點(diǎn)。
⑴ 傳統(tǒng)的物流管理系統(tǒng)一般按功能分為許多功能模塊,信息的共享范圍與物流信息管理,特別是與供應(yīng)鏈管理要求的信息高透明度和快速反應(yīng)相距甚遠(yuǎn)。而基于數(shù)據(jù)挖掘技術(shù)的物流管理信息系統(tǒng),采用數(shù)據(jù)倉(cāng)庫(kù)技術(shù)來(lái)組織管理數(shù)據(jù),能完整一致地刻畫(huà)各個(gè)分析對(duì)象所涉及的企業(yè)的各項(xiàng)數(shù)據(jù),從而將企業(yè)各部門(mén)及上游制造商、下游零售等信息聯(lián)結(jié)在一起,最大限度地實(shí)現(xiàn)信息共享。
⑵ 一般的數(shù)據(jù)庫(kù)為了提高系統(tǒng)的效率,往往盡可能少地保留歷史信息。而數(shù)據(jù)倉(cāng)庫(kù)具有一個(gè)重要的特征,就是一般具有長(zhǎng)時(shí)間的歷史數(shù)據(jù)存儲(chǔ)。存儲(chǔ)長(zhǎng)時(shí)間歷史數(shù)據(jù)的目的就是進(jìn)行數(shù)據(jù)長(zhǎng)期趨勢(shì)的分析,預(yù)測(cè)未來(lái)一段時(shí)間內(nèi)的庫(kù)存量變化,實(shí)現(xiàn)前瞻性調(diào)撥,增強(qiáng)適應(yīng)突發(fā)因素的能力,為決策者的長(zhǎng)期決策行為提供有力的數(shù)據(jù)支持。
⑶ 在傳統(tǒng)的系統(tǒng)中,模型庫(kù)和知識(shí)庫(kù)往往被獨(dú)立地設(shè)計(jì)和實(shí)現(xiàn),缺乏內(nèi)在的統(tǒng)一性。知識(shí)模型來(lái)源于專(zhuān)家,更新困難。基于數(shù)據(jù)挖掘的系統(tǒng),分離了知識(shí)發(fā)現(xiàn)者和知識(shí)使用者這兩類(lèi)角色,決策人員無(wú)需對(duì)決策系統(tǒng)有深刻的理解,也不需要深入學(xué)習(xí)數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)挖掘等相關(guān)知識(shí)。而專(zhuān)業(yè)人員則可以通過(guò)TCPIP協(xié)議隨時(shí)訪問(wèn)有關(guān)的服務(wù)器,對(duì)系統(tǒng)進(jìn)行管理、維護(hù)、知識(shí)庫(kù)擴(kuò)展等。
4.結(jié)束語(yǔ)
隨著物流信息化水平的提高,物流戰(zhàn)略已從內(nèi)部一體化向外部一體化轉(zhuǎn)變供應(yīng)鏈管理已成為競(jìng)爭(zhēng)戰(zhàn)略中非常重要的組成部分。數(shù)據(jù)挖掘方法有效地促進(jìn)企業(yè)的業(yè)務(wù)處理過(guò)程重組,改善并強(qiáng)化對(duì)客戶(hù)的服務(wù),強(qiáng)化企業(yè)的資產(chǎn)/ 負(fù)債管理,促進(jìn)市場(chǎng)優(yōu)化,加速資金周轉(zhuǎn),實(shí)現(xiàn)企業(yè)規(guī)模優(yōu)化,有效地提高企業(yè)的競(jìng)爭(zhēng)力。