智能礦山數(shù)據(jù)質(zhì)量管理研究及實(shí)踐

韓培強(qiáng)，胡而已，葉 蘭，馮智愚，張衛(wèi)偉

(1.陜煤集團(tuán)神木張家峁礦業(yè)有限公司，陜西省榆林市，719300；2.應(yīng)急管理部信息研究院，北京市朝陽區(qū)，100029；3.應(yīng)急管理部大數(shù)據(jù)中心，北京市東城區(qū)，100013)

0 引言

數(shù)據(jù)是21世紀(jì)的重要生產(chǎn)要素，是基礎(chǔ)性和戰(zhàn)略性資源，也是重要的生產(chǎn)力[1]。以“數(shù)據(jù)驅(qū)動(dòng)型決策”模式運(yùn)營(yíng)的企業(yè)，通過形成體系完整、質(zhì)量可控的數(shù)據(jù)鏈，推動(dòng)生產(chǎn)制造各環(huán)節(jié)高效協(xié)同，其生產(chǎn)力可以普遍提高5%～10%。數(shù)據(jù)質(zhì)量是影響數(shù)據(jù)開發(fā)利用效率和數(shù)據(jù)要素價(jià)值轉(zhuǎn)化的關(guān)鍵因素之一[2]，而多源數(shù)據(jù)質(zhì)量參差不齊往往會(huì)給智能化礦山建設(shè)場(chǎng)景應(yīng)用造成困難，同時(shí)也給礦山智能化建設(shè)“從數(shù)字化到智能化再到智慧化”的成效造成損失。數(shù)據(jù)質(zhì)量對(duì)企業(yè)的直接影響主要包括經(jīng)濟(jì)損失和運(yùn)營(yíng)風(fēng)險(xiǎn)等。數(shù)據(jù)質(zhì)量不僅決定信息化建設(shè)的成敗，更是影響企業(yè)業(yè)務(wù)協(xié)同、管理創(chuàng)新、決策支持的核心要素。對(duì)于數(shù)據(jù)質(zhì)量的管理，實(shí)行“事前預(yù)防、事中控制、事后補(bǔ)救”的數(shù)據(jù)質(zhì)量管理策略，持續(xù)提升企業(yè)數(shù)據(jù)質(zhì)量水平。隨著大數(shù)據(jù)的發(fā)展，企業(yè)數(shù)據(jù)使用需求與日俱增，數(shù)據(jù)質(zhì)量問題亟需解決。

隨著煤礦智能化建設(shè)[3-5]的推進(jìn)，制約數(shù)據(jù)融合、系統(tǒng)聯(lián)動(dòng)、業(yè)務(wù)協(xié)同等發(fā)展的數(shù)據(jù)治理問題受到廣泛關(guān)注[6-7]。自智能化煤礦數(shù)據(jù)治理問題被提出以來，學(xué)者們?cè)谥悄芑旱V數(shù)據(jù)治理的概念界定、技術(shù)架構(gòu)及關(guān)鍵技術(shù)方面展開了理論研究和實(shí)踐探索[8-9]。智能化煤礦數(shù)據(jù)治理的概念內(nèi)涵和技術(shù)架構(gòu)正逐步形成共識(shí)，關(guān)鍵技術(shù)的突破方興未艾，但理論研究和實(shí)踐探索亟需完善的方法論加以指導(dǎo)。

通過對(duì)發(fā)展歷程和基礎(chǔ)理論的研究[10-16]，界定了數(shù)據(jù)質(zhì)量以及數(shù)據(jù)質(zhì)量量化管理的概念，豐富本研究領(lǐng)域的理論基礎(chǔ)，在明確概念的基礎(chǔ)上，總結(jié)歸納智能化礦山建設(shè)過程中可能面對(duì)的問題以及面向數(shù)據(jù)質(zhì)量管理全過程的策略和技術(shù)。以實(shí)際智能化礦山數(shù)據(jù)質(zhì)量管理為例，從數(shù)據(jù)質(zhì)量管理的頂層設(shè)計(jì)、數(shù)據(jù)質(zhì)量管理活動(dòng)的開展、數(shù)據(jù)質(zhì)量管理評(píng)估度量等環(huán)節(jié)，介紹完整的智能化礦山數(shù)據(jù)質(zhì)量管理流程，為礦山企業(yè)智能化轉(zhuǎn)型提供典型案例，具有一定的借鑒意義。

1 數(shù)據(jù)質(zhì)量

1.1 數(shù)據(jù)質(zhì)量概述

在DIKW金字塔模型中，數(shù)據(jù)源于底層，數(shù)據(jù)之上是數(shù)據(jù)經(jīng)過加工之后形成的信息，如圖1所示。結(jié)合具體場(chǎng)景應(yīng)用的系統(tǒng)化的信息產(chǎn)生知識(shí)，應(yīng)用已知有實(shí)用價(jià)值的知識(shí)對(duì)未來進(jìn)行預(yù)測(cè)表現(xiàn)為智慧。數(shù)據(jù)質(zhì)量差將會(huì)直接或者間接的導(dǎo)致信息質(zhì)量差、決策質(zhì)量降低、業(yè)務(wù)結(jié)果不理想等結(jié)果。數(shù)據(jù)質(zhì)量的高低程度在一定意義上是可評(píng)估、可測(cè)量的。

圖1 DIKW金字塔模型

過往很多學(xué)者對(duì)數(shù)據(jù)質(zhì)量有定義。REDMAN T C[17]給出數(shù)據(jù)質(zhì)量的定義為“如果數(shù)據(jù)符合其在操作、決策和規(guī)劃中的預(yù)期用途，則其具有高質(zhì)量；如果數(shù)據(jù)沒有缺陷并且具有期望的特征，則適合使用?！?OLSON J[18]也給出了一個(gè)關(guān)于數(shù)據(jù)質(zhì)量的定義“如果數(shù)據(jù)滿足其預(yù)期用途的要求，那么數(shù)據(jù)具有質(zhì)量”。ISO8000數(shù)據(jù)質(zhì)量系列國際標(biāo)準(zhǔn)[19]指出數(shù)據(jù)質(zhì)量是數(shù)據(jù)治理的重要組成部分，它可以確保組織的數(shù)據(jù)適用于目的。它指的是數(shù)據(jù)集的整體效用，以及它為其他用途輕松處理和分析的能力。

總而言之，數(shù)據(jù)質(zhì)量是指數(shù)據(jù)滿足人們的隱性或顯性期望的程度。且高質(zhì)量數(shù)據(jù)需要滿足以下3點(diǎn)：數(shù)據(jù)適合預(yù)期的使用目的；數(shù)據(jù)正確地表達(dá)所描述事物和現(xiàn)象的真實(shí)構(gòu)造；數(shù)據(jù)符合某個(gè)標(biāo)準(zhǔn)或達(dá)到人們期望的水平。

1.2 數(shù)據(jù)質(zhì)量維度

數(shù)據(jù)質(zhì)量維度是測(cè)量或評(píng)估數(shù)據(jù)質(zhì)量的基礎(chǔ)，是量化數(shù)據(jù)質(zhì)量的標(biāo)準(zhǔn)。數(shù)據(jù)質(zhì)量的提高可以通過改進(jìn)數(shù)據(jù)質(zhì)量維度來實(shí)現(xiàn)。不同的數(shù)據(jù)集，數(shù)據(jù)質(zhì)量維度可能不同，但一般都包含數(shù)據(jù)的一致性、完整性、唯一性、準(zhǔn)確性、有效性和及時(shí)性，如圖2所示。為了確保數(shù)據(jù)質(zhì)量，可以根據(jù)自身業(yè)務(wù)場(chǎng)景和需求制定相應(yīng)的數(shù)據(jù)質(zhì)量維度，對(duì)于特定的關(guān)鍵數(shù)據(jù)而言，并非所有的維度都適用，例如智能化設(shè)備出廠日期就只能評(píng)估有效性和完整性。

圖2 數(shù)據(jù)質(zhì)量維度

1.3 數(shù)據(jù)質(zhì)量測(cè)量

數(shù)據(jù)質(zhì)量測(cè)量是指為了達(dá)到某一預(yù)期，按照一定的標(biāo)準(zhǔn)從數(shù)據(jù)質(zhì)量維度進(jìn)行衡量，以確定數(shù)據(jù)達(dá)到預(yù)期的程度。通過測(cè)量，可以比較不同對(duì)象之間的時(shí)間、空間差距，從而做出決策。有效的測(cè)量是決定是否能夠達(dá)到預(yù)期程度的決定性因素，有效測(cè)量的特點(diǎn)包括：有目的、可重復(fù)、可解釋。

1.4 數(shù)據(jù)質(zhì)量管理

數(shù)據(jù)質(zhì)量管理就是指對(duì)數(shù)據(jù)從計(jì)劃、獲取、存儲(chǔ)、共享、維護(hù)、應(yīng)用到消亡等階段可能引發(fā)的各種數(shù)據(jù)質(zhì)量問題，進(jìn)行識(shí)別、測(cè)量、監(jiān)控、預(yù)警等一系列管理活動(dòng)，其終極目標(biāo)是通過可靠的數(shù)據(jù)提升數(shù)據(jù)在使用中的價(jià)值，提升數(shù)據(jù)的完整性、準(zhǔn)確性和真實(shí)性，并最終為企業(yè)贏得經(jīng)濟(jì)效益提供堅(jiān)實(shí)可靠的數(shù)據(jù)基礎(chǔ)。

本研究中簡(jiǎn)單地將數(shù)據(jù)質(zhì)量管理理解為一種業(yè)務(wù)原則，需要將合適的人員、流程和技術(shù)進(jìn)行有機(jī)整合，改進(jìn)數(shù)據(jù)質(zhì)量各維度的數(shù)據(jù)問題，提高數(shù)據(jù)質(zhì)量。但企業(yè)數(shù)據(jù)治理的實(shí)質(zhì)在于如何提升各個(gè)關(guān)鍵領(lǐng)域和關(guān)鍵活動(dòng)的數(shù)據(jù)質(zhì)量，從而獲得更大的業(yè)務(wù)成果或經(jīng)濟(jì)利益。

數(shù)據(jù)質(zhì)量管理是數(shù)據(jù)治理的重要組成部分，通常用在數(shù)據(jù)模型設(shè)計(jì)、數(shù)據(jù)資產(chǎn)管理、主數(shù)據(jù)管理、數(shù)據(jù)倉庫等解決方案中。數(shù)據(jù)質(zhì)量管理可以是反應(yīng)性的被動(dòng)管理，也可以是預(yù)防性的主動(dòng)管理。目前很多公司將數(shù)據(jù)質(zhì)量管理的技術(shù)與企業(yè)管理的流程相結(jié)合，從而提升數(shù)據(jù)質(zhì)量管理的主動(dòng)能力。

數(shù)據(jù)質(zhì)量管理從技術(shù)上、業(yè)務(wù)上和管理上解決數(shù)據(jù)質(zhì)量問題。數(shù)據(jù)質(zhì)量問題及表現(xiàn)形式見表1。

表1 數(shù)據(jù)質(zhì)量問題及表現(xiàn)形式

2 數(shù)據(jù)質(zhì)量管理策略和技術(shù)

數(shù)據(jù)質(zhì)量管理包含嚴(yán)格設(shè)置數(shù)據(jù)標(biāo)準(zhǔn)，采用正確的技術(shù)、投入合理的資源來管理數(shù)據(jù)質(zhì)量。數(shù)據(jù)質(zhì)量管理策略和技術(shù)的應(yīng)用可以作用于數(shù)據(jù)質(zhì)量管理的事前、事中、事后3個(gè)階段，如圖3所示。

圖3 數(shù)據(jù)質(zhì)量管理

數(shù)據(jù)質(zhì)量管理應(yīng)秉持預(yù)防為主的理念，加強(qiáng)數(shù)據(jù)質(zhì)量管理過程中事前預(yù)防、事中控制、事后補(bǔ)救的各種策略和措施，以實(shí)現(xiàn)企業(yè)數(shù)據(jù)質(zhì)量的持續(xù)提升。

2.1 事前預(yù)防

事前預(yù)防即防患于未然是數(shù)據(jù)質(zhì)量管理的上上之策。數(shù)據(jù)質(zhì)量管理的事前預(yù)防從組織機(jī)制建設(shè)、標(biāo)準(zhǔn)規(guī)范、制度流程3個(gè)方面入手。

2.1.1 加強(qiáng)組織建設(shè)

企業(yè)需要建立組織機(jī)制，提升數(shù)據(jù)質(zhì)量在員工認(rèn)知中的重要程度。組織在實(shí)施數(shù)據(jù)質(zhì)量管理時(shí)，應(yīng)考慮管理層面制度、技術(shù)層面評(píng)價(jià)體系、協(xié)同層面信息傳遞等多方面因素，在適應(yīng)現(xiàn)有數(shù)據(jù)管理政策、現(xiàn)實(shí)約束的情況下開展工作，提前做好風(fēng)險(xiǎn)評(píng)估、制定應(yīng)對(duì)措施。

2.1.2 落實(shí)數(shù)據(jù)標(biāo)準(zhǔn)

數(shù)據(jù)標(biāo)準(zhǔn)的有效執(zhí)行和落地是數(shù)據(jù)質(zhì)量管理的必要條件。數(shù)據(jù)標(biāo)準(zhǔn)包括數(shù)據(jù)模型標(biāo)準(zhǔn)、主數(shù)據(jù)和參考數(shù)據(jù)標(biāo)準(zhǔn)、指標(biāo)數(shù)據(jù)標(biāo)準(zhǔn)等。

(1)數(shù)據(jù)模型標(biāo)準(zhǔn)對(duì)數(shù)據(jù)模型中的業(yè)務(wù)定義、業(yè)務(wù)規(guī)則、數(shù)據(jù)關(guān)系、數(shù)據(jù)質(zhì)量規(guī)則等進(jìn)行統(tǒng)一定義，通過元數(shù)據(jù)管理工具對(duì)這些標(biāo)準(zhǔn)和規(guī)則進(jìn)行統(tǒng)一管理。在數(shù)據(jù)質(zhì)量管理過程中，可以將這些標(biāo)準(zhǔn)映射到具體業(yè)務(wù)流程中，并將數(shù)據(jù)標(biāo)準(zhǔn)作為數(shù)據(jù)質(zhì)量評(píng)估的依據(jù)，實(shí)現(xiàn)數(shù)據(jù)質(zhì)量的稽查核驗(yàn)，使得數(shù)據(jù)的質(zhì)量校驗(yàn)有據(jù)可依、有法可循。

(2)主數(shù)據(jù)和參考數(shù)據(jù)標(biāo)準(zhǔn)包含主數(shù)據(jù)和參考數(shù)據(jù)的分類標(biāo)準(zhǔn)、編碼標(biāo)準(zhǔn)、模型標(biāo)準(zhǔn)，它們是主數(shù)據(jù)和參考數(shù)據(jù)在各部門、各業(yè)務(wù)系統(tǒng)之間進(jìn)行共享的保障。

(3)指標(biāo)數(shù)據(jù)是在業(yè)務(wù)數(shù)據(jù)的基礎(chǔ)上按照一定業(yè)務(wù)規(guī)則加工匯總的數(shù)據(jù)。指標(biāo)數(shù)據(jù)標(biāo)準(zhǔn)統(tǒng)一了分析指標(biāo)的統(tǒng)計(jì)口徑、統(tǒng)計(jì)維度、計(jì)算方法的基礎(chǔ)，不僅是各業(yè)務(wù)部門共識(shí)的基礎(chǔ)，也是數(shù)據(jù)倉庫、BI項(xiàng)目的主要建設(shè)內(nèi)容，為數(shù)據(jù)倉庫的數(shù)據(jù)質(zhì)量稽查提供依據(jù)。

2.1.3 制度流程保障

數(shù)據(jù)質(zhì)量管理是一個(gè)閉環(huán)管理流程，包括業(yè)務(wù)需求定義、數(shù)據(jù)質(zhì)量測(cè)量、根本原因分析、實(shí)施改進(jìn)方案、控制數(shù)據(jù)質(zhì)量。

在數(shù)據(jù)質(zhì)量管理制度流程保障方面，需要加大對(duì)數(shù)據(jù)質(zhì)量團(tuán)隊(duì)的賦權(quán)，并通過團(tuán)隊(duì)承諾、制度流程、問責(zé)機(jī)制等方式形成數(shù)據(jù)質(zhì)量管理共識(shí)。項(xiàng)目立項(xiàng)前，應(yīng)當(dāng)明確項(xiàng)目質(zhì)量控制考核指標(biāo)KPI，包括數(shù)據(jù)質(zhì)量控制要求和技術(shù)手段。明確目標(biāo)期望、達(dá)成數(shù)據(jù)質(zhì)量管理共識(shí)后，可依據(jù)通用型數(shù)據(jù)質(zhì)量控制框架，結(jié)合智能礦山建設(shè)需要、項(xiàng)目管理和團(tuán)隊(duì)管理特點(diǎn)，設(shè)計(jì)相應(yīng)數(shù)據(jù)質(zhì)量管理框架和流程。在項(xiàng)目立項(xiàng)時(shí)制定數(shù)據(jù)質(zhì)量管理計(jì)劃，參考質(zhì)量管理經(jīng)典方法中“定義-測(cè)量-分析-改進(jìn)-控制”流程改善工具、PDCA“計(jì)劃-執(zhí)行-檢查-處理”數(shù)據(jù)質(zhì)量改進(jìn)問題解決模型等，明確各步驟中工作開展方式、目的及產(chǎn)出。項(xiàng)目設(shè)計(jì)中也應(yīng)制定數(shù)據(jù)質(zhì)量評(píng)價(jià)規(guī)則、庫表設(shè)計(jì)規(guī)范、各環(huán)節(jié)數(shù)據(jù)質(zhì)量檢查問題清單。

數(shù)據(jù)質(zhì)量管理制度的作用在于約束各方加強(qiáng)數(shù)據(jù)質(zhì)量意識(shí)，督促各方在日常工作中重視數(shù)據(jù)質(zhì)量，在發(fā)現(xiàn)問題時(shí)能夠追根溯源、主動(dòng)解決。

2.2 事中控制

數(shù)據(jù)質(zhì)量管理的事中控制是指在數(shù)據(jù)維護(hù)和使用過程中監(jiān)控和管理數(shù)據(jù)質(zhì)量。通過建立數(shù)據(jù)質(zhì)量的流程化控制體系，對(duì)數(shù)據(jù)的創(chuàng)建、變更、采集、清洗、轉(zhuǎn)換、裝載、分析等各個(gè)環(huán)節(jié)的數(shù)據(jù)質(zhì)量進(jìn)行控制，如圖4所示。

智能化煤礦項(xiàng)目建設(shè)中要充分考慮各數(shù)據(jù)流轉(zhuǎn)環(huán)節(jié)和智能化煤礦建設(shè)場(chǎng)景共性需要后，針對(duì)數(shù)據(jù)采集，可通過數(shù)據(jù)采集系統(tǒng)替代人工收集及審核，并將審核經(jīng)驗(yàn)規(guī)則化，配置在數(shù)據(jù)采集系統(tǒng)中。數(shù)據(jù)開發(fā)利用采用數(shù)據(jù)自動(dòng)審核與人工巡查加工結(jié)果和經(jīng)驗(yàn)判斷的方式相結(jié)合，在數(shù)據(jù)中臺(tái)配置數(shù)據(jù)質(zhì)量自動(dòng)化巡檢任務(wù)，并根據(jù)發(fā)現(xiàn)的問題影響分級(jí)提示數(shù)據(jù)清洗人員，針對(duì)敏感數(shù)據(jù)，也可考慮采用隱私計(jì)算場(chǎng)景下的數(shù)據(jù)質(zhì)量治理框架等評(píng)估并督促數(shù)據(jù)質(zhì)量提升。

2.2.1 加強(qiáng)數(shù)據(jù)源頭的控制

從數(shù)據(jù)的源頭控制好數(shù)據(jù)質(zhì)量，讓數(shù)據(jù)“規(guī)范化輸入、標(biāo)準(zhǔn)化輸出”是解決企業(yè)數(shù)據(jù)質(zhì)量問題的關(guān)鍵所在。企業(yè)可以考慮從數(shù)據(jù)自動(dòng)化采集、維護(hù)好數(shù)據(jù)字典、自動(dòng)化數(shù)據(jù)校驗(yàn)、人工干預(yù)審核等幾個(gè)方面做好源頭數(shù)據(jù)質(zhì)量的管理。

2.2.2 加強(qiáng)流轉(zhuǎn)過程的控制

數(shù)據(jù)質(zhì)量問題不止發(fā)生在源頭，如果以最終用戶為終點(diǎn)，那么數(shù)據(jù)采集、存儲(chǔ)、傳輸、處理、分析中的每一個(gè)環(huán)節(jié)都有可能出現(xiàn)數(shù)據(jù)質(zhì)量問題。所以，要對(duì)數(shù)據(jù)全生命周期中的各個(gè)過程都做好數(shù)據(jù)質(zhì)量的全面預(yù)防。

2.2.3 事中控制的相關(guān)策略

事中控制的相關(guān)策略主要包括：質(zhì)量規(guī)則的持續(xù)更新、數(shù)據(jù)質(zhì)量的持續(xù)監(jiān)控、先進(jìn)技術(shù)使用、數(shù)據(jù)質(zhì)量預(yù)警機(jī)制和數(shù)據(jù)質(zhì)量報(bào)告。

2.3 事后補(bǔ)救

只要是人為干預(yù)的過程，總會(huì)存在數(shù)據(jù)質(zhì)量問題，即使拋開人為因素，數(shù)據(jù)質(zhì)量問題也無法避免。為了盡可能減少數(shù)據(jù)質(zhì)量問題，減輕數(shù)據(jù)質(zhì)量問題對(duì)業(yè)務(wù)的影響，需要及時(shí)發(fā)現(xiàn)問題并采取相應(yīng)的補(bǔ)救措施。

2.3.1 定期質(zhì)量監(jiān)控

定期質(zhì)量監(jiān)控也叫定期數(shù)據(jù)測(cè)量，是對(duì)某些非關(guān)鍵性數(shù)據(jù)和不適合持續(xù)測(cè)量的數(shù)據(jù)定期重新評(píng)估，為數(shù)據(jù)所處狀態(tài)符合預(yù)期提供一定程度的保證。定期監(jiān)控?cái)?shù)據(jù)的狀況，為數(shù)據(jù)在某種程度上符合預(yù)期提供保障，發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題及問題的變化，從而制定有效的改進(jìn)措施。

2.3.2 數(shù)據(jù)問題補(bǔ)救

質(zhì)量控制無法做到100%的數(shù)據(jù)問題防治，企業(yè)需要定期進(jìn)行主動(dòng)的數(shù)據(jù)清理和補(bǔ)救措施，以糾正現(xiàn)有的數(shù)據(jù)問題。數(shù)據(jù)問題的補(bǔ)救措施主要有清理重復(fù)數(shù)據(jù)、清理派生數(shù)據(jù)、缺失值處理和異常值處理。

2.3.3 持續(xù)改進(jìn)優(yōu)化

數(shù)據(jù)質(zhì)量管理是個(gè)持續(xù)的良性循環(huán)，不斷進(jìn)行測(cè)量、分析、探查和改進(jìn)可全面改善企業(yè)的信息質(zhì)量。通過對(duì)數(shù)據(jù)質(zhì)量管理策略的不斷優(yōu)化和改進(jìn)，從對(duì)數(shù)據(jù)問題甚至緊急的數(shù)據(jù)故障只能被動(dòng)做出反應(yīng)，過渡到主動(dòng)預(yù)防和控制數(shù)據(jù)缺陷的發(fā)生。

經(jīng)過數(shù)據(jù)質(zhì)量測(cè)量、數(shù)據(jù)問題根因分析以及數(shù)據(jù)質(zhì)量問題修復(fù)，可評(píng)估數(shù)據(jù)模型設(shè)計(jì)是否合理，是否還有優(yōu)化和提升的空間，數(shù)據(jù)的新增、變更、采集、存儲(chǔ)、傳輸、處理、分析各個(gè)過程是否規(guī)范，預(yù)置的質(zhì)量規(guī)則和閾值是否合理。如果模型和流程存在不合理的地方或可優(yōu)化的空間，那么就實(shí)施數(shù)據(jù)質(zhì)量管理優(yōu)化。

3 智能礦山數(shù)據(jù)質(zhì)量管理實(shí)踐

3.1 數(shù)據(jù)質(zhì)量管理總體要求

3.1.1 數(shù)據(jù)質(zhì)量框架

數(shù)據(jù)質(zhì)量管理框架如圖5所示，以ISO8000質(zhì)量標(biāo)準(zhǔn)體系為依據(jù)，某礦山公司設(shè)計(jì)了PDCA(計(jì)劃、執(zhí)行、檢查、處理)持續(xù)改進(jìn)的數(shù)據(jù)質(zhì)量管理框架，形成以領(lǐng)導(dǎo)力、持續(xù)改進(jìn)、能力保障的數(shù)據(jù)質(zhì)量管理框架。

圖5 數(shù)據(jù)質(zhì)量管理框架

數(shù)據(jù)質(zhì)量管理應(yīng)以數(shù)據(jù)清潔為目標(biāo)，以業(yè)務(wù)需求為驅(qū)動(dòng)，通過PDCA的持續(xù)改進(jìn)循環(huán)，提升數(shù)據(jù)質(zhì)量，達(dá)到數(shù)據(jù)質(zhì)量結(jié)果滿意。領(lǐng)導(dǎo)力模塊應(yīng)通過制定政策、規(guī)范來構(gòu)建數(shù)據(jù)質(zhì)量管理機(jī)制，對(duì)數(shù)據(jù)質(zhì)量的工作起牽引作用。能力保障模塊應(yīng)構(gòu)建完整的數(shù)據(jù)組織、流程和工具，以起到支撐作用。

數(shù)據(jù)質(zhì)量政策應(yīng)有不同的層次，數(shù)據(jù)質(zhì)量的管控應(yīng)兼顧宏觀方面的指導(dǎo)原則以及微觀層面的具體操作要求，引導(dǎo)正確的業(yè)務(wù)行為，提升企業(yè)成員的數(shù)據(jù)質(zhì)量意識(shí)。數(shù)據(jù)質(zhì)量管理應(yīng)是動(dòng)態(tài)、持續(xù)的循環(huán)過程以滿足不斷變化的業(yè)務(wù)需求。通過技術(shù)工具將數(shù)據(jù)質(zhì)量自動(dòng)融入日常業(yè)務(wù)，不斷提升數(shù)據(jù)質(zhì)量管理組織的管理水平、改善數(shù)據(jù)質(zhì)量工具平臺(tái)，使企業(yè)數(shù)據(jù)質(zhì)量持續(xù)提高。

3.1.2 數(shù)據(jù)質(zhì)量基本要求

智能礦山數(shù)據(jù)質(zhì)量包含智能礦山數(shù)據(jù)完整性、數(shù)據(jù)及時(shí)性、數(shù)據(jù)準(zhǔn)確性、數(shù)據(jù)一致性、數(shù)據(jù)唯一性、數(shù)據(jù)有效性6個(gè)方面的基本要求。

3.1.3 數(shù)據(jù)質(zhì)量管理開展原則

智能礦山數(shù)據(jù)質(zhì)量管理工作應(yīng)遵循以下原則開展：智能化業(yè)務(wù)過程受控、數(shù)據(jù)標(biāo)準(zhǔn)管理、領(lǐng)導(dǎo)員工共同參與、逐步推進(jìn)、過程持續(xù)改善。

3.2 數(shù)據(jù)質(zhì)量管理活動(dòng)

數(shù)據(jù)質(zhì)量管理活動(dòng)是需求驅(qū)動(dòng)活動(dòng)，智能化礦山數(shù)據(jù)質(zhì)量建設(shè)過程中數(shù)據(jù)質(zhì)量管理團(tuán)隊(duì)通過業(yè)務(wù)調(diào)研、影響分析、模型敏感性分析等方式，對(duì)數(shù)據(jù)進(jìn)行數(shù)據(jù)質(zhì)量稽核控制、數(shù)據(jù)質(zhì)量評(píng)估度量及數(shù)據(jù)質(zhì)量持續(xù)改進(jìn)3個(gè)方面進(jìn)行數(shù)據(jù)全流程持續(xù)監(jiān)控。

3.2.1 數(shù)據(jù)質(zhì)量稽核控制

基于重要性和成本效應(yīng)原則識(shí)別出需要進(jìn)行質(zhì)量控制的數(shù)據(jù)，分階段有序地將數(shù)據(jù)質(zhì)量控制規(guī)則落地。依據(jù)數(shù)據(jù)在數(shù)據(jù)庫落地時(shí)的質(zhì)量特性及數(shù)據(jù)質(zhì)量規(guī)則類型，確定數(shù)據(jù)質(zhì)量控制規(guī)則。

3.2.2 數(shù)據(jù)質(zhì)量評(píng)估度量

數(shù)據(jù)質(zhì)量評(píng)估度量旨在規(guī)范礦山各級(jí)單位的流程，確保度量結(jié)果可信。數(shù)據(jù)質(zhì)量度量應(yīng)從“設(shè)計(jì)質(zhì)量”和“執(zhí)行質(zhì)量”兩個(gè)方面開展，評(píng)估數(shù)據(jù)質(zhì)量綜合水平，揭示數(shù)據(jù)質(zhì)量問題。執(zhí)行質(zhì)量度量宜考慮6個(gè)數(shù)據(jù)質(zhì)量維度，從客戶關(guān)注重要性、法律財(cái)務(wù)風(fēng)險(xiǎn)性、業(yè)務(wù)流程戰(zhàn)略性三要素評(píng)估數(shù)據(jù)內(nèi)容的清潔度，業(yè)務(wù)領(lǐng)域可根據(jù)階段性的管理重點(diǎn)和訴求調(diào)整評(píng)估的要素。數(shù)據(jù)質(zhì)量度量過程包括：制定數(shù)據(jù)質(zhì)量目標(biāo)、確定數(shù)據(jù)質(zhì)量度量范圍、設(shè)計(jì)數(shù)據(jù)質(zhì)量度量指標(biāo)、確定執(zhí)行數(shù)據(jù)質(zhì)量衡量標(biāo)準(zhǔn)、實(shí)施數(shù)據(jù)質(zhì)量度量、發(fā)布數(shù)據(jù)質(zhì)量度量報(bào)告。

3.2.3 數(shù)據(jù)質(zhì)量改進(jìn)

礦山企業(yè)數(shù)據(jù)質(zhì)量改進(jìn)專項(xiàng)工作包括信息系統(tǒng)改進(jìn)和專項(xiàng)工作落實(shí)。礦山企業(yè)數(shù)據(jù)質(zhì)量改進(jìn)日常工作包括制定改進(jìn)措施、跟蹤改進(jìn)情況、刷新目標(biāo)基線。

4 結(jié)論

智能礦山數(shù)據(jù)質(zhì)量管理是礦山管理的關(guān)鍵領(lǐng)域之一，其目的是提高煤礦數(shù)據(jù)的準(zhǔn)確性、一致性和完整性，為管理決策提供可靠的數(shù)據(jù)支持。通過智能化技術(shù)和方法的應(yīng)用，可以有效管理和優(yōu)化礦山生產(chǎn)數(shù)據(jù)，提高生產(chǎn)效率、優(yōu)化資源利用、提升安全管理水平，并為決策者提供科學(xué)準(zhǔn)確的數(shù)據(jù)支持。未來，智能礦山數(shù)據(jù)質(zhì)量管理將繼續(xù)發(fā)展和完善，呈現(xiàn)以下幾個(gè)發(fā)展趨勢(shì)。

(1)數(shù)據(jù)智能化管理。隨著人工智能和大數(shù)據(jù)技術(shù)的不斷發(fā)展，智能化礦山數(shù)據(jù)質(zhì)量管理將更多地利用自動(dòng)化和智能化的手段，實(shí)現(xiàn)煤礦數(shù)據(jù)的自動(dòng)采集、處理和分析，提高數(shù)據(jù)質(zhì)量管理的效率和準(zhǔn)確性。

(2)多源數(shù)據(jù)融合。智能礦山數(shù)據(jù)質(zhì)量管理將更多地關(guān)注多源數(shù)據(jù)的融合和管理，包括傳感器數(shù)據(jù)、人工采集數(shù)據(jù)、市場(chǎng)數(shù)據(jù)等，通過整合不同來源的數(shù)據(jù)，形成更全面、準(zhǔn)確的數(shù)據(jù)基礎(chǔ)，增強(qiáng)決策支持能力。

(3)數(shù)據(jù)安全和隱私保護(hù)。隨著數(shù)據(jù)的大規(guī)模采集和使用，數(shù)據(jù)安全和隱私保護(hù)將成為智能礦山數(shù)據(jù)質(zhì)量管理的重要問題。未來的研究將注重?cái)?shù)據(jù)安全和隱私保護(hù)的技術(shù)與方法，確保煤礦數(shù)據(jù)的安全性和合規(guī)性。

(4)跨平臺(tái)、跨系統(tǒng)的數(shù)據(jù)管理。煤礦往往涉及多個(gè)系統(tǒng)和平臺(tái)，未來的智能礦山數(shù)據(jù)質(zhì)量管理將致力于實(shí)現(xiàn)數(shù)據(jù)的無縫集成和流動(dòng)，通過數(shù)據(jù)標(biāo)準(zhǔn)化和互操作性的提升，實(shí)現(xiàn)數(shù)據(jù)在不同系統(tǒng)和平臺(tái)間的共享和利用。

總體而言，智能礦山數(shù)據(jù)質(zhì)量管理的發(fā)展將進(jìn)一步推動(dòng)煤礦行業(yè)向數(shù)字化、智能化轉(zhuǎn)型，提高煤礦的生產(chǎn)效率、安全管理水平和決策支持能力，為煤礦行業(yè)的可持續(xù)發(fā)展提供有力支撐。