1 緒論

 

1.1 研究背景

隨著信息技術(shù)的發(fā)展，大數(shù)據(jù)時代的到來，以云計算、物聯(lián)網(wǎng)等技術(shù)為關(guān)鍵核心技術(shù)的政府采購電子交易模式正在顛覆傳統(tǒng)的采購模式，把政府采購人、采購代理機構(gòu)、采購管理部門、采購審批機構(gòu)、評審專家、供應(yīng)商、電子交易平臺等多個角色同時有效的聯(lián)系在一起，實現(xiàn)政府網(wǎng)上采購交易信息的互聯(lián)互通。這將在很大程度上降低采購的成本，提高采購效率，從而實現(xiàn)對政府采購的監(jiān)督達到公開透明、公正公平的目的，對政府采購來說，這是一種全新理念和改革創(chuàng)新，促使了傳統(tǒng)政府采購模式走上一次徹底的變革，也將變成未來政府采購最主要的發(fā)展趨勢。目前，我國政府采購網(wǎng)上交易模式的探索時間尚短，在網(wǎng)上采購協(xié)議商品模式順利運行的同時也呈現(xiàn)出很多缺點。隨著政府網(wǎng)上采購協(xié)議商品類別的增加以及采購方式的不斷變化，政府采購業(yè)務(wù)處理系統(tǒng)中積累了大量有價值的數(shù)據(jù)，但只有少部分被政府采購相關(guān)者用于基本統(tǒng)計分析[1]。隨著數(shù)據(jù)倉庫技術(shù)和數(shù)據(jù)挖掘技術(shù)的不斷成熟，給政府采購網(wǎng)上交易資金大數(shù)據(jù)分析帶來了機會。政府采購數(shù)據(jù)倉庫是獨立于業(yè)務(wù)處理系統(tǒng)的數(shù)據(jù)庫，無論政府采購業(yè)務(wù)處理系統(tǒng)是升級還是更替，都不影響建立的政府采購數(shù)據(jù)倉庫里存儲的數(shù)據(jù)。而政府采購資金數(shù)據(jù)挖掘能為政府網(wǎng)上采購的政策制定和監(jiān)督管理提供有依據(jù)的數(shù)據(jù)支持，即它是對大量采購資金相關(guān)數(shù)據(jù)進行挖掘、分析、綜合和推理，力圖發(fā)現(xiàn)各政府網(wǎng)上采購因素間的關(guān)聯(lián)性，力圖解決網(wǎng)上采購相關(guān)實際應(yīng)用問題。本研究是站在重慶市政府采購管理部門的角度，基于協(xié)議供貨商品對省（市）及各下屬區(qū)縣的政府采購網(wǎng)上交易資金數(shù)據(jù)進行挖掘與分析，基于數(shù)據(jù)倉庫和數(shù)據(jù)挖掘技術(shù)，在政府采購協(xié)議商品網(wǎng)上交易模式的應(yīng)用需求基礎(chǔ)上，建立政府采購數(shù)據(jù)倉庫和從屬數(shù)據(jù)集市，進而對網(wǎng)上采購協(xié)議商品的交易資金數(shù)據(jù)進行挖掘與分析。

..........

 

1.2 研究意義

大數(shù)據(jù)時代，政府網(wǎng)上采購已成為必然趨勢。隨著采購規(guī)模壯大，上級監(jiān)管部門也需要加強政府網(wǎng)上采購合理化和規(guī)范化管理，但政府采購相關(guān)者很多，針對全方位監(jiān)督，當(dāng)前信息化水平遠遠不夠，需要增大各方監(jiān)管力度。本研究集中對重慶市政府采購網(wǎng)上交易資金的歷史數(shù)據(jù)轉(zhuǎn)換成有價值的采購知識，多角度指導(dǎo)政府網(wǎng)上采購相關(guān)策略，并分析該決策如何為政府采購管理部門加大采購資金監(jiān)管工作力度并幫助采購人提供采購便利?，F(xiàn)今政府采購監(jiān)管部門主要通過政府采購業(yè)務(wù)處理系統(tǒng)來實現(xiàn)統(tǒng)計分析并以此為監(jiān)督參考，一旦政府采購業(yè)務(wù)系統(tǒng)發(fā)生變化，歷史數(shù)據(jù)將無法再利用，統(tǒng)計分析也將不能持續(xù)。此外，某些區(qū)縣使用的政府采購管理系統(tǒng)與省市級使用的系統(tǒng)不同，監(jiān)管部門不能對區(qū)縣政府網(wǎng)上采購的實現(xiàn)監(jiān)管。政府采購監(jiān)管部門無論是制定政策還是監(jiān)督管理都需要有效數(shù)據(jù)參考。自重慶市政府采購電子交易平臺建成以來，年采購資金交易額從 2012 年網(wǎng)上交易平臺建立的 0.4 億增長至 2017 年 12 億之多，政府采購網(wǎng)上交易日數(shù)據(jù)量也從零逐漸向幾十萬、幾百萬甚至幾千萬變化，目前日平均產(chǎn)生的采購數(shù)據(jù)大小達 800 M以上。面對如此多的政府采購數(shù)據(jù)，監(jiān)管部門只統(tǒng)計了較少數(shù)據(jù)，不知道如何實現(xiàn)網(wǎng)上交易資金數(shù)據(jù)更多的價值，將不能發(fā)現(xiàn)政府網(wǎng)上采購中存在的有用規(guī)律和問題。大數(shù)據(jù)時代，隨著網(wǎng)上采購數(shù)據(jù)的增加，政府采購相關(guān)者的需求也從基本統(tǒng)計分析轉(zhuǎn)變?yōu)檎少彺髷?shù)據(jù)分析（數(shù)據(jù)之間的關(guān)聯(lián)性等），因此傳統(tǒng)分析方法已不能滿足需要，數(shù)據(jù)倉庫技術(shù)和數(shù)據(jù)挖掘技術(shù)與之契合。政府采購數(shù)據(jù)倉庫的建立將實現(xiàn)政府采購數(shù)據(jù)結(jié)構(gòu)的一致性，改善監(jiān)管部門因數(shù)據(jù)結(jié)構(gòu)不同而無法獲取各區(qū)域的采購數(shù)據(jù)問題，即使各區(qū)域政府采購管理系統(tǒng)被替換，政府監(jiān)管部門也能實現(xiàn)對各區(qū)域的采購監(jiān)管。數(shù)據(jù)挖掘技術(shù)應(yīng)用于政府采購數(shù)據(jù)不僅能區(qū)別于傳統(tǒng)統(tǒng)計分析進行多維分析，還能深層次挖掘網(wǎng)上交易資金數(shù)據(jù)的價值，政府采購管理部門也可根據(jù)應(yīng)用需求去監(jiān)管政府采購相關(guān)者和采購行為本身，比如從反腐倡廉的角度利用關(guān)聯(lián)規(guī)則挖掘幫助監(jiān)管部門發(fā)現(xiàn)采購人與供應(yīng)商之間的關(guān)系，從歷史成交資金角度根據(jù)實時動態(tài)時序圖把控采購商品的價格變化等。此外，政府采購數(shù)據(jù)倉庫的建立解決了數(shù)據(jù)挖掘的數(shù)據(jù)預(yù)處理過程，提高了挖掘工作效率。

.........

 

2 理論基礎(chǔ)和技術(shù)綜述

 

2.1 政府網(wǎng)上采購協(xié)議商品的相關(guān)理論

2.1.1 政府網(wǎng)上采購協(xié)議商品概述

根據(jù)中華人民共和國頒布的《政府采購法》，政府采購的定義是指各個級別的國家機關(guān)單位、事業(yè)單位以及團體組織，使用財政性資金采購的依法制定集中采購目錄范圍內(nèi)或者采購限額標(biāo)準(zhǔn)范圍以上的工程、貨物和服務(wù)行為[18]。政府采購網(wǎng)上交易模式近年隨著信息化水平不斷發(fā)展和采購模式不斷變化而誕生，目前還沒有標(biāo)準(zhǔn)一致的定義。中國政府就政府采購電子化的含義指出，它是將政府采購基礎(chǔ)設(shè)施融合信息技術(shù)產(chǎn)生的在線管理、執(zhí)行與報告等過程的應(yīng)用[19]。專著《政府采購電子化理論探索與實踐》一書中闡明政府采購電子化是指政府部門采用順應(yīng)時代的信息技術(shù)，確認(rèn)各個部門采購工程、貨物和服務(wù)的一種政府采購形式，其沖出時間與空間的障礙，增強政府采購信息的透明度，幫助政府采購相關(guān)活動尋找捷徑[20]。政府網(wǎng)上采購的主體主要包括采購人、供應(yīng)商和廠商、采購代理機構(gòu)、政府采購的監(jiān)督管理部門、平臺代理機構(gòu)和第三方價格管理等，其中，采購人、采購代理機構(gòu)、供應(yīng)商與廠商在政府采購網(wǎng)上交易活動中享有相應(yīng)的權(quán)利并承擔(dān)其義務(wù)，即政府采購當(dāng)事人。政府網(wǎng)上采購協(xié)議商品主要是完成采購人與供應(yīng)商網(wǎng)上交流并最終完成采購交易的過程。

.........

 

2.2 數(shù)據(jù)倉庫技術(shù)

數(shù)據(jù)倉庫的概念是在 20 世紀(jì) 80 年代由“數(shù)據(jù)倉庫之父”William. H. Inmon在“Building The Data Warehouse”（《建立數(shù)據(jù)倉庫》）一書中首次提出的，并被廣泛接受。他解釋的政府采購數(shù)據(jù)倉庫是一個面向應(yīng)用主題的、相較穩(wěn)定的、可以集成的、反映歷史數(shù)據(jù)變化的數(shù)據(jù)集，集中用于支持應(yīng)用管理決策[22]。數(shù)據(jù)倉庫主要是將政府網(wǎng)上采購長期積累的海量采購數(shù)據(jù)，進行系統(tǒng)的分析整理，然后利用各分析方法進行復(fù)雜數(shù)據(jù)分析，幫助政府采購相關(guān)者從大量的采購信息中，快速有效地分析出有價值的采購知識，從而有利于相關(guān)政府采購決策者擬定并快速回應(yīng)外在環(huán)境的變動[23]。

.........

 

3 搭建政府采購數(shù)據(jù)倉庫......21

3.1 搭建政府采購數(shù)據(jù)倉庫的目的...........21

3.2 政府采購網(wǎng)上交易資金數(shù)據(jù)來源.......22

3.3 政府采購網(wǎng)上交易資金數(shù)據(jù)結(jié)構(gòu)分析.......22

3.4 政府采購數(shù)據(jù)倉庫的主題確定...........22

3.5 政府采購數(shù)據(jù)倉庫模型設(shè)計.......24

3.6 清洗、轉(zhuǎn)換和加載過程.......35

3.7 創(chuàng)建從屬數(shù)據(jù)集市.......37

4 政府網(wǎng)上采購交易資金數(shù)據(jù)挖掘分析......41

4.1 基于協(xié)議商品的政府網(wǎng)上采購需求分析...........41

4.2 政府網(wǎng)上采購交易資金挖掘概述.......45

4.3 基于文本挖掘的政府采購文本分析...........47

4.4 基于關(guān)聯(lián)規(guī)則算法的政府采購行為分析...........53

4.5 基于時間序列算法的網(wǎng)上交易資金預(yù)測分析...........62

4.6 本章小結(jié).......69

5 結(jié)論與研究展望..........71

 

4 政府網(wǎng)上采購交易資金數(shù)據(jù)挖掘分析

 

數(shù)據(jù)挖掘方法眾多，不同應(yīng)用對應(yīng)不同方法。本節(jié)結(jié)合政府網(wǎng)上采購需求，從政府網(wǎng)上采購的四個階段系統(tǒng)概述網(wǎng)上交易資金數(shù)據(jù)挖掘方法和分析維度，但由于數(shù)據(jù)有限性和保密性，本節(jié)僅采用文本挖掘、關(guān)聯(lián)規(guī)則挖掘和時間序列算法這三種具體方法分別闡述文本信息、采購行為和交易規(guī)模的挖掘流程。

 

4.1 基于協(xié)議商品的政府網(wǎng)上采購需求分析

本節(jié)基于政府網(wǎng)上直接采購協(xié)議商品和詢價采購商品的交易流程及對政府網(wǎng)上采購現(xiàn)狀的調(diào)查分析，提出將對政府網(wǎng)上采購交易資金進行數(shù)據(jù)挖掘的分析需求。

 

4.1.1 政府網(wǎng)上采購協(xié)議商品的業(yè)務(wù)流程

政府采購電子交易平臺涉及到的主要角色包括采購人、供應(yīng)商以及財政監(jiān)督管理部門，通過該平臺完成商品的在線查找、網(wǎng)上訂單、網(wǎng)上合同，同時數(shù)據(jù)來源與合同結(jié)果、政府采購業(yè)務(wù)系統(tǒng)（網(wǎng)上申報系統(tǒng)）進行有效對接，實現(xiàn)政府采購數(shù)據(jù)信息共享。在整個政府網(wǎng)上采購協(xié)議商品業(yè)務(wù)流程中，首先政府采購人通過需求提交網(wǎng)上采購申請并由主管部門匯總審核采購申請，然后由財政業(yè)務(wù)科室審核申請的網(wǎng)上采購財政資金，再由政府采購科確定申請的采購方式和采購組織形式，最后由政府采購科根據(jù)政府采購人申請的具體網(wǎng)上采購內(nèi)容下達網(wǎng)上采購計劃，并由國庫科據(jù)此網(wǎng)上采購資金申請生成網(wǎng)上采購用款計劃，待采購合同生成審核成功之后劃撥財政網(wǎng)上采購資金。政府網(wǎng)上采購協(xié)議商品的業(yè)務(wù)流程如圖 4.1 所示。由于政府采購網(wǎng)上交易模式分為直接采購和詢價采購，直接采購業(yè)務(wù)流程直接執(zhí)行采購計劃即可，而詢價采購業(yè)務(wù)流程需要進行詢價信息發(fā)布、審核、開標(biāo)、供應(yīng)商報價、中標(biāo)信息發(fā)布和生成訂單等采購步驟，相對比較復(fù)雜。政府網(wǎng)上詢價采購業(yè)務(wù)流程如圖 4.2 所示。

.......

 

結(jié)論

 

本研究根據(jù)數(shù)據(jù)倉庫、數(shù)據(jù)挖掘技術(shù)的理論方法與實踐操作相結(jié)合，初步完成了數(shù)據(jù)挖掘技術(shù)在政府采購網(wǎng)上交易模式的應(yīng)用探索。本文主要開展了以下工作：（1）根據(jù)數(shù)據(jù)倉庫的設(shè)計方法，設(shè)計了政府采購數(shù)據(jù)倉庫的概念模型、邏輯模型、物理模型，建立了政府采購數(shù)據(jù)倉庫；（2）基于搭建的政府采購數(shù)據(jù)倉庫，根據(jù)應(yīng)用分析建立了從屬數(shù)據(jù)集市；（3）分析了政府網(wǎng)上采購業(yè)務(wù)流程，根據(jù)網(wǎng)上交易流程中存在的實際應(yīng)用問題，提出了政府網(wǎng)上采購資金數(shù)據(jù)挖掘的分析需求；（4）基于政府采購數(shù)據(jù)倉庫，應(yīng)用文本挖掘、關(guān)聯(lián)規(guī)則挖掘和時間序列算法分別對政府采購文本數(shù)據(jù)、采購行為和資金交易規(guī)模進行了挖掘分析，并提出應(yīng)用和相關(guān)建議。本研究僅對數(shù)據(jù)挖掘在政府采購網(wǎng)上交易模式中做了應(yīng)用初探，對政府網(wǎng)上的分析需求還不夠深入，還需要后期深入調(diào)研，進一步提出更有價值的采購需求。對于數(shù)據(jù)挖掘方面的研究，還要付出更多的努力，以完成對數(shù)據(jù)挖掘分析的深入研究，在這方面，還需不斷的實踐和努力。

..........

參考文獻（略）