[摘 要]近年來，大量企業(yè)加入開發(fā)數(shù)據(jù)質量管理系統(tǒng)的隊伍中，希望通過該系統(tǒng)實時監(jiān)控并評估數(shù)據(jù)質量，使數(shù)據(jù)得到充分利用。文章以此為背景，以管理系統(tǒng)為研究對象，對系統(tǒng)的核心功能——指標監(jiān)控功能進行了分析，闡述了系統(tǒng)的運行原理及工作流程，探討了指標監(jiān)控的原則和技術，內容涉及前端框架、測試框架及移動平臺等方面，旨在為企業(yè)通過建立系統(tǒng)化的監(jiān)控框架、實現(xiàn)實時監(jiān)測和持續(xù)改進提供參考。

[關鍵詞]數(shù)據(jù)信息；質量管理系統(tǒng)；分析工具；指標監(jiān)控

中圖分類號：TM7 文獻標識碼：A 文章編號：1674-1722（2024）24-0068-03

隨著數(shù)字化轉型的加速，數(shù)據(jù)已經成為企業(yè)決策和運營的核心資產，數(shù)據(jù)管理的重要性日益凸顯。從某種程度上說，只有高質量的數(shù)據(jù)才能支持深入分析和智能決策，因此，實時監(jiān)控數(shù)據(jù)質量指標很有必要，這樣做不僅能提高企業(yè)的數(shù)據(jù)治理水平，而且能增強數(shù)據(jù)的可用性、可靠性和價值。日常工作中，企業(yè)可以通過建立系統(tǒng)化的監(jiān)控框架，實現(xiàn)實時監(jiān)測和持續(xù)改進，確保數(shù)據(jù)資產的高效利用，為業(yè)務增長、創(chuàng)新奠基。

一、數(shù)據(jù)質量管理系統(tǒng)的原理

數(shù)據(jù)質量管理系統(tǒng)的應用旨在確保數(shù)據(jù)在生命周期內始終保持高標準，為制定決策提供支持。系統(tǒng)在不同環(huán)節(jié)的運行原理不同。在評估環(huán)節(jié)，系統(tǒng)通過定義涵蓋數(shù)據(jù)準確性、完整性在內的K Q I s，識別當前數(shù)據(jù)質量的狀態(tài)、改進的方向。在監(jiān)控環(huán)節(jié)，系統(tǒng)可依托內置的自動化工具和算法，實時跟蹤質量指標的變化，利用數(shù)據(jù)可視化技術，為管理人員提供直觀且清晰的監(jiān)控界面，幫助其快速發(fā)現(xiàn)異常。同時，系統(tǒng)還能夠自動生成報告，告知管理人員潛在的問題，及時觸發(fā)預警機制，防止管理人員制定影響業(yè)務流程的決策錯誤。在數(shù)據(jù)優(yōu)化環(huán)節(jié)，系統(tǒng)整合了包括數(shù)據(jù)清理、數(shù)據(jù)標準化和數(shù)據(jù)匹配在內的多項技術手段，使管理人員可以在識別問題后迅速采取措施加以解決，通過PDCA循環(huán)等持續(xù)改進機制，不斷提升人員管理能力、企業(yè)管理水平，確保數(shù)據(jù)有效且可靠?？紤]到數(shù)據(jù)質量管理系統(tǒng)儲存數(shù)據(jù)體量極大，有關人員應嘗試應用正態(tài)分布對業(yè)務數(shù)據(jù)進行詳細的解釋說明，避免離散數(shù)據(jù)質量受到影響。正態(tài)分布是概率分布的分支，其內容涉及數(shù)據(jù)、物理兩方面，如果隨機變量對應數(shù)據(jù)期望值、標準方差取值為1，則表示系統(tǒng)正態(tài)分布的數(shù)據(jù)位置和幅度均由期望值決定，此時，正態(tài)分布所處范圍為標準范圍。

二、數(shù)據(jù)質量管理系統(tǒng)工作流程

數(shù)據(jù)質量管理是一項系統(tǒng)性工作，涵蓋了搜尋、登記和維護數(shù)據(jù)資源等多個方面。在實際工作中，需要先注冊并搜尋數(shù)據(jù)，再評估經過搜尋獲得的、尚未正式投入使用的數(shù)據(jù)，去除無效和冗余數(shù)據(jù)，識別潛在的數(shù)據(jù)問題并制定相應的監(jiān)測機制，根據(jù)實際情況，確定具體的監(jiān)控指標、頻率和方法，持續(xù)追蹤數(shù)據(jù)的質量狀態(tài)，根據(jù)管理人員發(fā)布的指令，實時查詢并且下載問題數(shù)據(jù)，在保證數(shù)據(jù)完整且準確的前提下，增強數(shù)據(jù)的一致性和及時性，防止劣質數(shù)據(jù)引入及擴散，導致數(shù)據(jù)失效[ 1 ]。真正做到充分利用現(xiàn)有數(shù)據(jù)，為管理人員制定各項決策提供有力支持，推動業(yè)務的優(yōu)化和創(chuàng)新。

三、數(shù)據(jù)質量管理系統(tǒng)指標監(jiān)控原則及技術

（一）監(jiān)控原則

1.指標選擇

合理選擇質量指標是確保監(jiān)控有效的關鍵。指標應具備合理性、可行性和全面性，其中，合理性指的是管理指標應與業(yè)務目標、數(shù)據(jù)使用的實際需求密切相關。以客戶數(shù)據(jù)為例，對此類數(shù)據(jù)而言，準確性和一致性是優(yōu)先考慮的指標，原因在于客戶信息的錯誤可能直接影響業(yè)務決策和客戶關系管理。可行性要求采集和計算指標所需的數(shù)據(jù)易于獲取，監(jiān)控成本可控，計算方法清晰簡單，管理人員能夠在日常工作中對其加以運用。全面性強調指標在覆蓋數(shù)據(jù)質量維度時應“不偏不倚”，能夠如實反映各類相關數(shù)據(jù)的質量狀況。有關人員在選擇監(jiān)控指標時，應嚴格遵循上述原則，確保所選指標真正驅動數(shù)據(jù)管理工作的持續(xù)改進，為后續(xù)的分析和決策提供堅實基礎。

2.實時監(jiān)控

實時監(jiān)控原則強調的重點是對質量指標的動態(tài)追蹤和即時反饋。實時監(jiān)控的實施依賴于高效的數(shù)據(jù)處理和分析能力，管理人員可以通過對關鍵數(shù)據(jù)流的實時監(jiān)控，及時發(fā)現(xiàn)數(shù)據(jù)缺失、格式錯誤或不一致等異常情況，第一時間處理質量問題，防止其快速擴散而導致無法挽回的嚴重后果。實時監(jiān)控還能夠增強數(shù)據(jù)治理的主動性，在工作中，管理人員可以基于當前的質量狀態(tài)迅速做出調整數(shù)據(jù)處理流程、修正問題數(shù)據(jù)等反應，通過及時且高效的數(shù)據(jù)治理，為數(shù)據(jù)的充分利用夯實基礎。此外，實時監(jiān)控還要求技術支持系統(tǒng)的架構具備良好的擴展性，以適應數(shù)據(jù)量和用戶需求的不斷變化?？偠灾?，企業(yè)建立具備實時反饋功能的監(jiān)控機制很有必要，此舉能夠有效提升數(shù)據(jù)管理的響應速度和準確性，實現(xiàn)數(shù)據(jù)驅動決策的精確化與及時化。

3.持續(xù)改進

持續(xù)改進原則要求有關人員在監(jiān)控質量指標的基礎上，基于PDCA模式持續(xù)評估和優(yōu)化管理流程，確保數(shù)據(jù)管理取得理想效果。在P（計劃）階段，有關人員需基于監(jiān)控結果分析當前數(shù)據(jù)質量存在的問題，制定相應的改進目標。在D（執(zhí)行）階段，有關人員需要調整數(shù)據(jù)收集、存儲和清洗的流程，以提高數(shù)據(jù)質量。在C（檢查）階段，有關人員可以通過評估實施后的效果，判斷檢測指標是否取得了預期的改進成效。在A（行動）階段，若檢查發(fā)現(xiàn)改進不充分，有關人員需要對策略進行再次調整，形成閉環(huán)的改進機制[ 2 ]。實踐表明，持續(xù)的改進能夠提升數(shù)據(jù)質量水平，正因如此，持續(xù)改進現(xiàn)已成為確保管理系統(tǒng)長效運營的根本保障，可以幫助企業(yè)在數(shù)據(jù)驅動的環(huán)境中保持極強的競爭實力，并適應快速變化的市場環(huán)境。

（二）技術要點

在本項目中，有關人員聚焦eLink平臺、RPA機器人，將eLink作為監(jiān)控主體，通過整合管理內容，做到規(guī)范且安全地調用各類應用。在開發(fā)RPA的過程中，則創(chuàng)造性地引入了多線程模式，確保RPA可以嚴格按照指令完成工作，及時發(fā)現(xiàn)并處理潛在問題。

1.前端框架

系統(tǒng)前端框架是整合了Electron、Vue的跨平臺框架。Electron是典型的開源框架，允許開發(fā)者使用Web構建桌面應用，由于該框架以Node.js和Chromium為基礎，因此，Web開發(fā)者可以利用其熟悉的技術棧，在較短的時間內完成開發(fā)桌面應用的任務。Vue則是漸進的JavaScript框架，專注于構建用戶界面，近年來，憑借輕量、高效和易于上手而受到青睞。結合Electron、Vue，有助于有關人員快速構建具有豐富交互和高性能的應用程序。其中，Electron的作用是提供對本地文件系統(tǒng)和操作系統(tǒng)功能的訪問，增強應用的功能性，Vue的組件化設計則使得項目結構更加清晰且易于維護，將二者組合能夠大幅降低有關人員構建可移植的桌面應用的難度，滿足現(xiàn)代開發(fā)對快速迭代和良好用戶體驗的需求[ 3 ]。

本項目選用前端框架主要分為Chromiun、Node. js和API三部分。Chromiun作為以Chrome為載體的編程語言，在項目中主要負責測試系統(tǒng)新引入功能的可靠性、實效性，在保證前端框架充分發(fā)揮作用的前提下，降低開發(fā)瀏覽器界面的難度，為后續(xù)設計工作做準備。Node.js的作用與Java相近，用其代替Java與Chromiun結合，可以解決Java沖擊服務端的問題，強化操作系統(tǒng)既有的API功能，為日后管理人員操作GUI提供便利。而使用API的目的則是避免系統(tǒng)GUI和前端框架不匹配，導致系統(tǒng)無法正常運行，簡單來說，就是在不改變既有框架的前提下，根據(jù)應用程序的特征為其設置API接口，同時調整操作系統(tǒng)具備的功能，確保開發(fā)界面、調用系統(tǒng)始終處于分離開發(fā)的狀態(tài)[ 4 ]。

通過分析系統(tǒng)應用效果能夠發(fā)現(xiàn)，該前端框架相較于傳統(tǒng)框架有兩大優(yōu)勢。一是Vue支持刷新局部頁面，在跳轉頁面或是刷新頁面時，通常需要先整合頁面數(shù)據(jù)，此項操作有助于新數(shù)據(jù)融入既有數(shù)據(jù)，提升訪問瀏覽器的速度，優(yōu)化使用體驗，降低工作強度并提高工作質效。二是在基于該前端框架升級瀏覽器時，需要有關人員先轉化現(xiàn)有應用程序，這一過程不僅能夠為數(shù)據(jù)庫帶來更豐富的資源，而且能夠消除編程語言存在的局限性，使數(shù)據(jù)庫充分發(fā)揮作用。

2.自動化測試框架

測試框架的作用主要是通過自動化手段，實時監(jiān)控與評估質量指標，提高數(shù)據(jù)處理效率和準確性。該框架的原理是通過編寫自動測試腳本，定期檢查數(shù)據(jù)的準確性、完整性等關鍵質量指標，通過將測試程序集成到數(shù)據(jù)處理流程中，確保在數(shù)據(jù)生成和更新的每個環(huán)節(jié)都能自動完成質量檢測，及時發(fā)現(xiàn)潛在問題。該測試框架的核心優(yōu)勢在于其具有高效性和可重復性，能夠減少人工檢查所需的時間、人力成本。此外，該框架還支持不同數(shù)據(jù)源的集成，能夠處理大規(guī)模數(shù)據(jù)集，確保監(jiān)控覆蓋全面。事實證明，在系統(tǒng)中安裝自動測試框架，能夠提高質量管理的響應速度，為數(shù)據(jù)治理提供可靠的數(shù)據(jù)基礎，有助于保障決策的科學性與精準性。

在現(xiàn)有框架中，Selenium框架與該系統(tǒng)提出要求的契合程度最高。Selenium框架的本質是整合了包括WebDriiver、Selenium IDE在內的多項測試工具的應用程序，將其與管理系統(tǒng)結合，能夠實現(xiàn)對系統(tǒng)功能的自動測試，完成自動編寫腳本語言的操作。另外，該框架對運行載體的限制極少，Web、C h r o m e等主流瀏覽器均可。以C h r o m e為例，如果決定將C h r o m e作為運行Selenium框架的載體，則可以通過該框架自帶的WebDriver對系統(tǒng)功能進行自動測試。事實證明，該系統(tǒng)既能夠有效控制不同瀏覽器的頁面，高效完成搜集數(shù)據(jù)的工作，還可以根據(jù)網頁的需要，為其提供恰當?shù)暮瘮?shù)形式，通過實時更新網頁內容，使網頁從靜態(tài)網頁轉變成更具有實用價值的動態(tài)網頁。

3.移動平臺

系統(tǒng)的移動平臺選用由互動開發(fā)平臺衍生出的eLink通信平臺，該平臺具備豐富的通信功能，此外，還設有大量標準端口，可以直接對接各類業(yè)務系統(tǒng)，在為處理業(yè)務提供便利的同時，為系統(tǒng)安全性提供保證。要想最大化實現(xiàn)該平臺的使用價值，有關人員應保證開發(fā)平臺支持以下操作。

首先，任務追蹤。管理人員可以根據(jù)具體的質量指標設置監(jiān)控任務，實時跟蹤其執(zhí)行狀態(tài)，及時識別任務進展和潛在問題，做到快速響應。

其次，集成不同數(shù)據(jù)源。通過從不同系統(tǒng)中自動收集各類監(jiān)控指標有關數(shù)據(jù)，實現(xiàn)數(shù)據(jù)的集中化管理。

再次，可視化。搭載可視化界面的目的是使監(jiān)控數(shù)據(jù)一目了然，便于管理人員通過圖表和儀表板直觀地分析數(shù)據(jù)質量狀況。

最后，自動化通知。當監(jiān)控指標觸發(fā)預設警報時，系統(tǒng)將自動將該情況告知管理人員，確保管理人員能夠及時采取糾正措施。

上述功能的結合，使eLink成為能夠助力管理系統(tǒng)高效實施與優(yōu)化的強有力的移動平臺。本項目中，有關人員聚焦于數(shù)據(jù)安全，通過整合多項技術，形成了可以為數(shù)據(jù)信息安全提供保障的安保體系，具體措施包括：用雙層登錄驗證代替原有單層驗證，在登錄界面、瀏覽器之間搭建鏈接通路，提高系統(tǒng)的安全系數(shù)；通過密碼保護數(shù)據(jù)庫內部儲存的數(shù)據(jù)，將數(shù)據(jù)泄露或被竊取的可能性降至最低[ 5 ]。

4.RPA機器人

RPA是通過機器人模擬人類在數(shù)字系統(tǒng)中的交互規(guī)律，自動執(zhí)行內容重復且規(guī)則性高的任務的技術，將RPA與現(xiàn)有系統(tǒng)無縫集成，可以高效完成包括數(shù)據(jù)輸入、文件處理、報告生成在內的多項任務，提高工作效率和準確性。具體來說，RPA的主要優(yōu)勢在于其能夠減輕員工的工作負擔，讓員工專注于更具創(chuàng)造性和戰(zhàn)略性的工作。RPA還能降低人為錯誤的風險，提高業(yè)務流程的合規(guī)性與一致性。本項目中，為充分發(fā)揮RPA在自動化方面的優(yōu)點，有關人員決定對其進行分層設計，其中，軟件架構被拆分成兩層，應用層負責搜集、管理業(yè)務數(shù)據(jù)，數(shù)據(jù)層則負責訪問并且儲存數(shù)據(jù)，二者獨立運行，需要基于通信機制轉換或是共享數(shù)據(jù)。這樣設計有效避免了應用層、數(shù)據(jù)層互相干擾，對提高系統(tǒng)運行質量具有重大意義。

四、結語

文章在深入研究數(shù)據(jù)質量管理系統(tǒng)的基礎上提出，為使系統(tǒng)內置指標監(jiān)控模塊長時間高效且穩(wěn)定的運行，要基于Python對接數(shù)據(jù)接口，提高數(shù)據(jù)整合的自動化程度，確保系統(tǒng)及時且準確地告知管理人員指標監(jiān)控結論，通過分析問題數(shù)據(jù)并整合分析結果，使管理人員全面了解數(shù)據(jù)情況和整改進度，由此，解決數(shù)據(jù)無法得到充分利用的問題。未來，應進一步完善eLink平臺、RPA機器人的研發(fā)方案，根據(jù)工作需要引入先進技術，增強系統(tǒng)管理數(shù)據(jù)信息的功能，使管理數(shù)據(jù)信息的質效最大限度接近理想水平。

參考文獻：

[1]王實，路健，李燦岑，等.面向智能電網的配電自動化數(shù)據(jù)質量管理與決策支持系統(tǒng)設計[J].科技風，2024（31）：4-6+13.

[2]劉永生.基于數(shù)據(jù)中臺的數(shù)字化檢驗檢測實驗室質量管理系統(tǒng)建設的探討[J].中國檢驗檢測，2024（04）：115-117.

[3]曹薇，金迪芳，劉煒，等.基于實驗室信息管理系統(tǒng)的高級數(shù)據(jù)分析在成品油質量管理中的應用[J].石油商技，2024（02）：68-74.

[4]余黃杰.實驗室質量管理優(yōu)化策略的制定與實施[J].中國質量監(jiān)管，2024（03）：104-105.

[5]麥家健.交通企業(yè)數(shù)字化轉型中的數(shù)據(jù)質量管理系統(tǒng)研究與設計[J].軟件，2024（01）：66-69.