(最佳)建立數(shù)據(jù)整合分析(GDIA)系統(tǒng)的探索與應(yīng)用

摘 要

前言步入21世紀以來,企業(yè)信息化技術(shù)日新月異,網(wǎng)絡(luò)通信手段更趨發(fā)達,各行各業(yè)紛紛加快企業(yè)信息化建設(shè)的步伐,燃氣行業(yè)也緊隨著全球信息化的潮流,信息化產(chǎn)品和技術(shù)應(yīng)用覆蓋燃氣銷售

前言
步入21世紀以來,企業(yè)信息化技術(shù)日新月異,網(wǎng)絡(luò)通信手段更趨發(fā)達,各行各業(yè)紛紛加快企業(yè)信息化建設(shè)的步伐,燃氣行業(yè)也緊隨著全球信息化的潮流,信息化產(chǎn)品和技術(shù)應(yīng)用覆蓋燃氣銷售、計量、安全、服務(wù)、業(yè)務(wù)、輸配、工程、管理等各個領(lǐng)域,各個應(yīng)用系統(tǒng)已成為燃氣企業(yè)日常運營過程中不可或缺的重要支撐。
1 燃氣市北公司信息化建設(shè)概況
上海燃氣市北銷售有限公司成立于2000年10月26日,隸屬于上海燃氣集團,是專業(yè)從事燃氣發(fā)展、銷售服務(wù)、輸配管理的國有獨資企業(yè)。公司現(xiàn)有燃氣用戶205萬,6000多km的高中低壓燃氣管網(wǎng)及附屬設(shè)備,年銷售燃氣20億元。公司主要設(shè)計劃財務(wù)、銷售服務(wù)、市場、物資、信息、輸配管理等18個部門,以及分布于上海市北6個行政區(qū)的20余個服務(wù)站點。
公司設(shè)有唯一中心機房,憑借有線通VPN為骨干的公司城域網(wǎng),運用各大應(yīng)用系統(tǒng)支撐著公司的業(yè)務(wù)發(fā)展、工程管理、銷售賬務(wù)、輸配等企業(yè)日常行作。在銷售服務(wù)與輸配管理領(lǐng)域內(nèi)分布建立起的軟件系統(tǒng)主要有:
(1) 《客戶信息管理系統(tǒng)》,是使用部門、使用員工最多,貫穿公司民用業(yè)務(wù)、賬務(wù)、安檢、在線表務(wù)、安檢、用戶分類、氣價體系、發(fā)票管理等業(yè)務(wù)流程的綜合性信息管理系統(tǒng),承擔公司主營業(yè)務(wù)的日常運營和操作管理。
(2) 《IC卡燃氣表充值管理系統(tǒng)》,承擔了近23萬用戶的IC卡日常的預付費充值及相關(guān)管理操作,系統(tǒng)實現(xiàn)了讀寫設(shè)備與協(xié)議的兼容以及銀行聯(lián)網(wǎng)實時充值,并利用遠傳抄表數(shù)據(jù)與《客戶信息管理系統(tǒng)》關(guān)聯(lián),實現(xiàn)了用戶實際用量與預付金額間的比對控制與管理。
(3)《業(yè)務(wù)與工程管理信息系統(tǒng)》,該系統(tǒng)通過工作流引擎負擔市場、工程管理、施工、輸配、銷售服務(wù)等部及各網(wǎng)點30多種不同的住宅配套、排管工人員數(shù)量控制在一個更為合理的域值。此外,可考慮建立淘汰退出機制。通過對員工的績效考評,與那些無法勝任、懶散且不能融入正常管理軌道的員工解除勞動合同,既能減少企業(yè)的人力成本,提高員工的工作效率,反過來,對員工也是一種激勵,使他們能夠更好地、更塌實地工作。程、市場發(fā)展等業(yè)務(wù)處理,實現(xiàn)了工作流程規(guī)范化、管理過程中信息動態(tài)展現(xiàn)與報表字段自由配置功能。
(4) 《SCADA系統(tǒng)》,實現(xiàn)對包括儲配站、各類調(diào)壓站、大型用戶、區(qū)域計量站的運行狀態(tài)監(jiān)測與報警查詢,是輸配管理部、銷售服務(wù)部、計劃財務(wù)部等相關(guān)部門保障供應(yīng)、分析、預測的重要系統(tǒng)依托。
(5) 《物流管理系統(tǒng)》,該系統(tǒng)涵蓋了公司全部物資采購供應(yīng)管理流程,2009年引入了辦事處二級倉庫管理的流程,通過與《客戶信息管理系統(tǒng)》的數(shù)據(jù)交互,實現(xiàn)了對燃氣表生命周期的全過程管理。
(6) 《GIS系統(tǒng)》,對公司各級調(diào)壓站、管網(wǎng)相關(guān)設(shè)備及用戶空間信息、屬性數(shù)據(jù)、拓撲關(guān)系實現(xiàn)一體化管理,支撐著公司輸配部門管網(wǎng)規(guī)劃、配套施工、急搶修、天然氣轉(zhuǎn)換等日常工作。
(7) 報修、投訴等系統(tǒng)。監(jiān)督處理燃氣客戶來電報修、表務(wù)賬務(wù)、投訴等信息,記錄受理、處理、銷根全過程狀態(tài)及信息,在服務(wù)管理中起著重要作用。
(8) 還有OA辦公自動化、短信息群發(fā)、用友財務(wù)、人力資源等其他軟件系統(tǒng)。
以上系統(tǒng)長期以來雖然一直有效地保障著公司銷售、服務(wù)、管理、運營等各項工作,積累了大量而又相對獨立的用戶、銷售、賬務(wù)、設(shè)備、管網(wǎng)等公司關(guān)心的數(shù)據(jù)信息,但隨著管理要求的不斷深入與細化,無論是決策層還是管理層,對數(shù)據(jù)進行深層次分析挖掘和提高信息綜合應(yīng)用水平的需求日益提高,這些系統(tǒng)數(shù)據(jù)間沒有建立起有效的關(guān)聯(lián)關(guān)系,多系統(tǒng)數(shù)據(jù)孤島的問題日益顯現(xiàn)。
為了解決數(shù)據(jù)分散獨立的現(xiàn)狀,公司于2009年初正式啟動“GDIA系統(tǒng)項目”,旨在探究有效的技術(shù)方法和手段,在各系統(tǒng)間建立起數(shù)據(jù)紐帶與交互機制,將各個數(shù)據(jù)庫中公司關(guān)心卻沒能有效組織的數(shù)據(jù)信息整合展現(xiàn)到統(tǒng)一直觀的GDIA系統(tǒng)平臺中來,GDIA系統(tǒng)作為信息數(shù)據(jù)整合的試基石,在燃氣市北公司整個信息化進程中起著承前啟后的深遠作用。
2 GDIA系統(tǒng)技術(shù)介紹
2.1 系統(tǒng)概述
GDIA平臺是一套以GIS為基礎(chǔ),通過標準化接口整合各類與地理空間有關(guān)的業(yè)務(wù)數(shù)據(jù),采用web化模式與標準化BI(商業(yè)智能)模板進行數(shù)據(jù)展示和分析的通用平臺,該平臺具有“集成化、web化、智能化、通用化”特點。
2.2 系統(tǒng)架構(gòu)
GDIA平臺主要由系統(tǒng)配置管理、GIS展示部分、商業(yè)智能處理部分與整合接口四部分組成。其中GIS數(shù)據(jù)導入接口部分支持主力GIS平臺數(shù)據(jù)格式與CAD數(shù)據(jù)格式等,業(yè)務(wù)數(shù)據(jù)接口支持Web Service、XML等格式。總體結(jié)構(gòu)如圖1所示:
 
2.3 數(shù)據(jù)倉庫與數(shù)據(jù)同步
數(shù)據(jù)倉庫(Data warehouse)是指從多個數(shù)據(jù)源收集的信息,以一種一致的存儲方式保存所得到的數(shù)據(jù)集合。數(shù)據(jù)倉庫創(chuàng)始人之一W.H.Inmon的定義為:“數(shù)據(jù)倉庫是一個面向主題的、集成的、穩(wěn)定的、包含歷史數(shù)據(jù)的數(shù)據(jù)集合,它用于支持管理中的決策制定過程”。在構(gòu)造數(shù)據(jù)倉庫時,要經(jīng)過數(shù)據(jù)的清洗、數(shù)據(jù)的抽取轉(zhuǎn)換、數(shù)據(jù)集成和數(shù)據(jù)加載等過程。面向不同的需求,對數(shù)據(jù)進行清洗以保證數(shù)據(jù)的正確性,然后對數(shù)據(jù)進行抽取,轉(zhuǎn)換成數(shù)據(jù)倉庫所需形式,并實現(xiàn)加載到數(shù)據(jù)倉庫。
GDIA系統(tǒng)數(shù)據(jù)主要來源于《客戶信息管理系統(tǒng)》、《業(yè)務(wù)與工程管理信息系統(tǒng)》、《SCADA系統(tǒng)》、《物流管理系統(tǒng)》、《IC卡燃氣表充值管理系統(tǒng)》,通過中間接口將這些系統(tǒng)內(nèi)的數(shù)據(jù)按照字段規(guī)則導入GDIA數(shù)據(jù)倉庫之中,并根據(jù)不同系統(tǒng)數(shù)據(jù)的關(guān)心程度建立不同周期的同步機制。示意圖見圖2。
 
3 GDIA系統(tǒng)的主要功能
GDIA系統(tǒng)不同于公司原有應(yīng)用功能較單一軟件系統(tǒng),它通過數(shù)據(jù)的整合、關(guān)聯(lián)、分析,主要實現(xiàn)了用戶基本分析、區(qū)域計量與產(chǎn)銷差分析、業(yè)務(wù)發(fā)展與燃氣銷售關(guān)系分析、燃氣表務(wù)管理、IC卡燃氣表應(yīng)用分析、BI多維展現(xiàn)等功能。下面舉例說明與以往軟件系統(tǒng)數(shù)據(jù)分析不同的幾項功能:
3.1 表務(wù)跟蹤分析
通過代表表具唯一身份的條碼將《客戶信息管理系統(tǒng)》的新裝、調(diào)表、校表、拆表、銷售數(shù)據(jù)與《物流管理系統(tǒng)》的表具采購入庫、領(lǐng)用出庫、退庫等信息進行關(guān)聯(lián)整合,使得公司從物資管理部門至基層辦事處把燃氣表具入庫、領(lǐng)用出庫、安裝、在線、調(diào)表、使用、報廢等情況嚴格地串聯(lián)管理起來,將原來簡單的數(shù)量、型號管理提升為單個表具的身份管理及定位管理,用系統(tǒng)數(shù)據(jù)替代了原先的手工臺帳,讓管理者詳盡地了解各辦事處倉庫的燃氣表入庫、出庫與上線安裝情況。
如圖3管理者按條碼查詢單個表具時,系統(tǒng)將表具的出產(chǎn)地、型號、生產(chǎn)日期、表能量、出入庫、領(lǐng)用安裝信息,用戶的歷史調(diào)表記錄、調(diào)表原因信息等多系統(tǒng)數(shù)據(jù)展現(xiàn)在同一界面上,通過各個環(huán)節(jié)操作日期與用戶調(diào)表記錄的分析,管理者可直觀從中發(fā)現(xiàn)表具管理過程中的問題與不足,以及用戶氣行為的情況。
 

3.2 業(yè)務(wù)發(fā)展分析
關(guān)聯(lián)《業(yè)務(wù)與工程信息管理系統(tǒng)》中的計劃用氣量與《客戶信息管理系統(tǒng)》的抄見量以及《SCADA系統(tǒng)》的遠傳遙測量進行對比分析,如圖4顯示,通過折線圖、柱狀圖不同顏色展現(xiàn)時間段內(nèi)計劃用氣量、抄見量、遠傳數(shù)據(jù)曲線,實現(xiàn)了設(shè)計、年度月度計劃、實際用量的實時展現(xiàn),形成遙測流量與實際抄見量之間的相互補充與相互監(jiān)督,為管理部門對考核抄見量的準確性、監(jiān)測SCADA流量儀的穩(wěn)定性及設(shè)計表能量的科學性提供數(shù)據(jù)支撐與技術(shù)手段。
5則顯示了按住宅配套項目編號查詢對比通氣計劃數(shù)與安裝戶數(shù)的差異,計算各住宅配套項目燃氣安裝比例,并根據(jù)項目發(fā)單日期的長短分析安裝比例高低,分析導致安裝比例低的原因,發(fā)現(xiàn)潛在用戶的違規(guī)用氣行為。
 
3.3 區(qū)域計量產(chǎn)銷差分析
GIS地理圖層上標定區(qū)域流量計,通過GDIA系統(tǒng)將兩數(shù)據(jù)源的數(shù)據(jù)進行整合,將《SCACA系統(tǒng)》流量計測點數(shù)與《客戶信息管理系統(tǒng)》中該區(qū)域用戶賬本信息配對綁定,清晰的反映抄表月份區(qū)域內(nèi)購入與實際銷售量的差異,高效地獲取區(qū)域產(chǎn)銷差的準確數(shù)據(jù),擺脫以往手工摘錄事后拼揍的統(tǒng)計方式,為職能部門與管理者提供區(qū)域產(chǎn)銷差分析基礎(chǔ)數(shù)據(jù)(見圖6)。
 
3.4 BI數(shù)據(jù)分析工具
傳統(tǒng)的報表系統(tǒng)技術(shù)上已經(jīng)相當成熟,大家熟悉的Excel、水晶報表、Reporting Service等都已經(jīng)被廣泛使用,但這些都只是低端的BI應(yīng)用,往往存在著數(shù)據(jù)多信息少,難以交互分析、了解各種組合的問題。
GDIA系統(tǒng)發(fā)揮了BI技術(shù)的數(shù)據(jù)挖掘與下鉆能力,將著重關(guān)心的抄見率與欠費指標按用氣性質(zhì)、年月、類別、辦別等多維度層層分解,通過分解樹或折線圖的形式加以展現(xiàn)。以圖7抄見率所示抄見率按不同用戶性質(zhì)的簡號,不同顏色分類描繪每個月的抄見率指數(shù),管理者可自行顯示或隱藏每條曲線,對不同的用戶性質(zhì)進行對比分析,改變了傳統(tǒng)報表的單一與死板,增加了管理者對這類指標的考核展示的自主性與靈活性。
 
傳統(tǒng)的報表多以行列分布,很難實現(xiàn)數(shù)據(jù)層層展示,GDIA系統(tǒng)利用BI技術(shù)突破了傳統(tǒng)報表的框架。如圖8欠費分解樹為例,以用戶性質(zhì)作為第一層、年份作為第二層、月份作為第三層、日期作為第四層,不僅將欠費情況分解到不同的用戶性質(zhì),直觀的展現(xiàn)出欠費用戶的結(jié)構(gòu),同時還根據(jù)不同的年份、月份、日期讓管理者清晰的了解不同用戶性質(zhì)欠費年趨勢、月趨勢、年對比、月對比,便于管理者及時調(diào)整對策,增強欠款催討管理力度。
 
3.5 IC卡表
利用客戶編號將《客戶信息管理系統(tǒng)》中安檢摘錄數(shù)(機械、液晶余量)、定期采集到的無線遠傳數(shù)據(jù)與《IC卡燃氣表充值管理系統(tǒng)》內(nèi)充值數(shù)據(jù)進行比較,了解用戶表具閥門狀況、表具當前單價、表具總金額(使用金額、剩余金額)、系統(tǒng)購買量等數(shù)據(jù),有效掌握表具的運行情況,及時發(fā)現(xiàn)表機械透支使用、表具使用總量超過購買量等異常情況,通過條件篩選列出異常用戶的列表,代替?zhèn)鹘y(tǒng)管理者人工逐戶比較費時費力的問題。同時能對無線遠傳表上的使用量及剩余量情況進行有效分析,為準確統(tǒng)計IC卡表區(qū)域產(chǎn)銷差與用氣單耗情況提供數(shù)據(jù)依據(jù)(見圖9)。
 
4 GDIA平臺在管理中的應(yīng)用
4.1 多維度實現(xiàn)用戶銷售分析
GDIA通過抽取用戶各類數(shù)據(jù),整合了以冊本為單位的民用銷售數(shù)據(jù)和每個非民用銷售數(shù)據(jù),提供了多維度、不同層面的數(shù)據(jù)分析和評估。
其中對不同類別用戶以燃氣表主題、燃氣銷售量、欠費信息、注銷信息、回收率、抄見率等銷售屬性為參數(shù)進行整合分析和關(guān)聯(lián)比較,使原先各類孤立的、不易分解比較的銷售數(shù)據(jù)在統(tǒng)一平臺得以展現(xiàn)并實現(xiàn)綜合分析和研究。
再者,GDIA系統(tǒng)對各類分析結(jié)果運用不同顏色呈現(xiàn)在地理坐標上,使得該系統(tǒng)使用者能夠直觀清晰地從用戶屬地、用氣性質(zhì)、用戶狀態(tài)、表具類型等多個角度了解到各類用戶的銷售情況,從而實現(xiàn)單一用戶或一類用戶的基本信息以及應(yīng)收賬款的分析。
4.2 方便大用戶管理分析
GDIA系統(tǒng)實現(xiàn)了GIS大客戶定位,并整合大用戶SCADA數(shù)據(jù),實現(xiàn)大客戶基本信息、用氣信息的展示,實現(xiàn)銷售同比環(huán)比分析、同類型多用戶比較分析、合同計劃與實際用量的分析等多方面的功能。大用戶管理的相關(guān)數(shù)據(jù)在一個平臺以圖表的形式展現(xiàn),使得各類數(shù)據(jù)分析更直觀和簡潔,使應(yīng)用者可以方便的了解大用戶的生產(chǎn)用氣狀況和計量狀況,確保大用戶銷售計量準確,遙測流量與實際抄見量之間的相互補充與相互監(jiān)督,也使管理者實時監(jiān)控大用戶的計劃用氣和實際用氣情況,及時掌握情況,及時分析和處理出現(xiàn)的相關(guān)問題。
4.3 協(xié)助市場發(fā)展分析,制定發(fā)展策略
GDIA整合業(yè)務(wù)發(fā)展信息、SCADA數(shù)據(jù)以及用戶抄表數(shù)據(jù),綜合分析市場發(fā)展的計劃銷售量、實際實現(xiàn)銷售量和SCADA數(shù)據(jù),來評估市場發(fā)展過程中銷售計量預測的準確性、合理性。通過分析,能夠掌握用戶實際用氣情況、燃具負荷與設(shè)計的差異,及時發(fā)現(xiàn)計量表配置的問題,減少工程設(shè)計與實際差異導致的計量問題,同時也能為業(yè)務(wù)部門市場發(fā)展工作提供參考依據(jù)。
另外,通過整合住宅項目業(yè)務(wù)數(shù)據(jù)和客戶系統(tǒng)的民用戶發(fā)展數(shù)據(jù),將每一個住宅發(fā)展項目的通氣安裝比例呈現(xiàn)在平臺應(yīng)用者面前,準確了解和掌握民用戶發(fā)展的動態(tài)狀況和空間,同時可根據(jù)樓市發(fā)展狀態(tài),為預測住宅項目發(fā)展周期和新發(fā)展民用戶銷售增量提供參考數(shù)據(jù)。
4.4 全新的數(shù)據(jù)挖掘工具
GDIA系統(tǒng)對數(shù)據(jù)挖據(jù)及BI展現(xiàn)作了有意義的嘗試。BI展現(xiàn)技術(shù)可按使用者的不同管理思路和需要,進行多維度的自由分解展現(xiàn),系統(tǒng)實現(xiàn)了抄見率、賬款回收等指標的深層挖掘和分解下鉆,為管理者提供了全新的分析角度,起到了抄表銷售管理和賬務(wù)管理的輔助決策工具的作用。該功能的實現(xiàn)也對使用者提出了很高要求,使用者不僅要熟練掌握各類業(yè)務(wù)流程及熟悉系統(tǒng)數(shù)據(jù)結(jié)構(gòu),同時需要具備相當廣度與深度的管理分析能力。
4.5 其他管理成效
GDIA系統(tǒng)建立的過程中,特別是在初次數(shù)據(jù)導入整合后在GIS平臺上分色展現(xiàn)時,我們及時發(fā)現(xiàn)了應(yīng)用系統(tǒng)中的部分數(shù)據(jù)缺失和錯誤,也發(fā)現(xiàn)了一些數(shù)據(jù)輸入的滯后導致數(shù)據(jù)整合后同界面展現(xiàn)時出現(xiàn)信息不對稱不連貫的現(xiàn)象,這是在日常業(yè)務(wù)操作中,數(shù)據(jù)信息輸入的及時準確不受管理者重視所導致,同時也反映出系統(tǒng)軟件在部分管理控制功能上的缺失。因此,我們先后對部分業(yè)務(wù)操作流程做了調(diào)整,對數(shù)據(jù)輸入時限也做了要求,同時對部分系統(tǒng)功能模塊做了完善,從技術(shù)保障上減少信息錯誤,使公司部分業(yè)務(wù)管理流程更精細、嚴謹,有效。
5 GDIA系統(tǒng)建立的意見與發(fā)展
5.1 GDIA系統(tǒng)成功建立的意見
GDIA系統(tǒng)的開發(fā)應(yīng)用彌補了燃氣行業(yè)數(shù)據(jù)整合(ERP)領(lǐng)域的空白,跨出了企業(yè)信息化建設(shè)中重要一步,為企業(yè)系統(tǒng)集成工作提供了新的思路、新的途徑,解決燃氣企業(yè)在信息化建設(shè)中形成的數(shù)據(jù)分散、數(shù)據(jù)孤立、數(shù)據(jù)不一的問題。同時GDIA系統(tǒng)開發(fā)過程,亦是企業(yè)信息化系統(tǒng)數(shù)據(jù)梳理的過程,發(fā)現(xiàn)解決了日常不易發(fā)現(xiàn)的錯誤數(shù)據(jù),規(guī)范了數(shù)據(jù)字段的類型定義,為信息化建設(shè)的進一步推進積累經(jīng)驗和提供指導。
5.2 GDIA系統(tǒng)今后的發(fā)展
GDIA作為一個新興的系統(tǒng)與技術(shù),在其完善與開發(fā)上將進一步擴大各應(yīng)用系統(tǒng)的整合數(shù)據(jù)范圍和數(shù)據(jù)周期,針對各個業(yè)務(wù)信息系統(tǒng)特點,抽取必要的歷史數(shù)據(jù)并保證新增數(shù)據(jù)可以持續(xù)整合到該平臺,提高數(shù)據(jù)分析的深度和廣度,擴大每個業(yè)務(wù)系統(tǒng)的數(shù)據(jù)整合范圍,為決策、支持、管理提供數(shù)基礎(chǔ)與依據(jù)。逐步建立量化指標即制定企業(yè)的KPI(Key Performance Indication,關(guān)鍵性能指標),對KPI進行計算并以KPI狀態(tài)(達標、良好、有問題、嚴重問題)的形式進行展現(xiàn),為監(jiān)控企業(yè)運營狀態(tài)、科學決策提供直觀的依據(jù)。
同時可考慮建立應(yīng)用的分級機制,將整個整合與分析平臺的應(yīng)用層面劃分為公司決策層與業(yè)務(wù)主管層,并根據(jù)不同權(quán)限使不同層面使用人員可以訪問不同的數(shù)據(jù)范圍。針對公司決策者建立整合面廣、直觀、關(guān)聯(lián)性強的分析展示主題,針對某一單一業(yè)務(wù)領(lǐng)域的業(yè)務(wù)主管,建立粒度小、條件豐富、組合靈活的分析主題,以進一步滿足企業(yè)各類需要。
 
(本文作者:厲戌吟 俞霆 上海燃氣市北銷售有限公司 200021)