• 
    

    
    

      99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

      數(shù)據(jù)中臺(tái)的通用體系架構(gòu)研究

      2021-01-07 00:23:17呂軍郭健羅旭
      科技創(chuàng)新導(dǎo)報(bào) 2021年22期
      關(guān)鍵詞:體系架構(gòu)大數(shù)據(jù)平臺(tái)數(shù)據(jù)治理

      呂軍 郭健 羅旭

      摘要:進(jìn)入信息時(shí)代,隨著數(shù)據(jù)產(chǎn)業(yè)的蓬勃發(fā)展,數(shù)字化建設(shè)如火如荼?!皵?shù)字中國(guó)”“互聯(lián)網(wǎng)+”等國(guó)家戰(zhàn)略項(xiàng)目已在資源、可持續(xù)發(fā)展、環(huán)境以及行政辦公等領(lǐng)域取得了良好的效果。數(shù)據(jù)是資產(chǎn)、資源,但如何把數(shù)據(jù)資產(chǎn)、數(shù)據(jù)資源轉(zhuǎn)化為社會(huì)收益和企業(yè)利潤(rùn),還需要多方探索。當(dāng)前,機(jī)構(gòu)和企業(yè)不再建設(shè)從源數(shù)據(jù)采集到分析應(yīng)用的煙囪式系統(tǒng),更傾向于數(shù)據(jù)集中采集、存儲(chǔ),并應(yīng)用分層建設(shè)。這種方式一方面有利于應(yīng)用系統(tǒng)的快速部署,另一方面也保證了數(shù)據(jù)的集中管理與運(yùn)營(yíng),體現(xiàn)數(shù)據(jù)的資產(chǎn)、資源屬性。數(shù)據(jù)中臺(tái)的出現(xiàn)彌補(bǔ)了數(shù)據(jù)開(kāi)發(fā)和應(yīng)用開(kāi)發(fā)之間由于開(kāi)發(fā)速度不匹配而出現(xiàn)的響應(yīng)力不足等問(wèn)題。本文主要對(duì)數(shù)據(jù)中臺(tái)的通用體系架構(gòu)進(jìn)行了簡(jiǎn)單的探討,以供相關(guān)人員參考。

      關(guān)鍵詞:大數(shù)據(jù)平臺(tái) 數(shù)據(jù)中臺(tái) 數(shù)據(jù)治理 體系架構(gòu)

      Research on General Architecture of Data Center

      LV Jun? GUO Jian? LUO Xu

      (Sichuan Bangchen Information Technology Co., Ltd., Mianyang City,

      Sichuan Province, 621000 China)

      Abstract: In the information age, with the vigorous development of data industry, digital construction is in full swing. National strategic projects such as "Digital China" and "internet +" have achieved good results in the fields of resources, sustainable development, environment and administration. Data are assets and resources, but how to transform data assets and data resources into social benefits and corporate profits needs to be explored in many ways. At present, organizations and enterprises no longer build chimney systems from source data collection to analysis and application, but prefer centralized data collection, storage and hierarchical application construction. On the one hand, this method facilitates rapid deployment of application systems. On the other hand, it ensures centralized management and operation of data and reflects the asset and resource attributes of data. The emergence of data center makes up for the lack of response between data development and application development due to the mismatch of development speed. This paper mainly discusses the general architecture of data center for reference.

      Key Words: Big data platform; Data center; Data governance; System architecture

      大數(shù)據(jù)蓬勃發(fā)展的背景下,各行各業(yè)越來(lái)越重視大數(shù)據(jù)給企業(yè)帶來(lái)的業(yè)務(wù)革新動(dòng)力,希望借助數(shù)據(jù)驅(qū)動(dòng)業(yè)務(wù)新發(fā)展。企業(yè)在此背景下積極探索數(shù)據(jù)管理和數(shù)據(jù)應(yīng)用,完成了以“一體化數(shù)據(jù)中心、一體化數(shù)據(jù)管理、一體化數(shù)據(jù)分析”三個(gè)一體化為核心的數(shù)據(jù)中心建設(shè),為各業(yè)務(wù)部門(mén)提供高質(zhì)量的數(shù)據(jù)以及豐富的數(shù)據(jù)分析手段,為各級(jí)人員管理決策提供了有效支撐。[1]

      但我們也應(yīng)當(dāng)看到,目前的數(shù)據(jù)中心,無(wú)論是專(zhuān)題、報(bào)表或取數(shù),還是煙囪式數(shù)據(jù)生產(chǎn)模式或者是項(xiàng)目制建設(shè)方式,如果當(dāng)初模型的擴(kuò)展性設(shè)計(jì)的不好,或者時(shí)間太緊,或者出于系統(tǒng)穩(wěn)定的考慮,致使數(shù)據(jù)模型擴(kuò)展性較差。久而久之,數(shù)據(jù)得不到沉淀和持續(xù)發(fā)展,從而造成模型不能真正成為可重用的組件,無(wú)法支撐數(shù)據(jù)分析的快速響應(yīng)和創(chuàng)新。

      在這種情況下,通常的做法是另起爐灶,構(gòu)建一套新的模型來(lái)滿(mǎn)足當(dāng)前的需求,這又導(dǎo)致了一個(gè)新“煙囪”的產(chǎn)生,長(zhǎng)此以往,數(shù)據(jù)中心將演變?yōu)橐粋€(gè)個(gè)的數(shù)據(jù)孤島,不再具有對(duì)外提供統(tǒng)一數(shù)據(jù)服務(wù)的能力。因此,亟需建立企業(yè)的數(shù)據(jù)中臺(tái),構(gòu)建中臺(tái)的運(yùn)營(yíng)體系,真正做到打通數(shù)據(jù)孤島并且以統(tǒng)一的標(biāo)準(zhǔn)進(jìn)行建設(shè),以達(dá)到技術(shù)降本、應(yīng)用提效、業(yè)務(wù)賦能的目標(biāo)。

      1、數(shù)據(jù)中臺(tái)概念

      數(shù)據(jù)中臺(tái)的概念由互聯(lián)網(wǎng)企業(yè)阿里巴巴提出,是指通過(guò)數(shù)據(jù)技術(shù)對(duì)海量的數(shù)據(jù)進(jìn)行采集、計(jì)算、存儲(chǔ)和加工,并統(tǒng)一標(biāo)準(zhǔn)和口徑。數(shù)據(jù)中臺(tái)完成數(shù)據(jù)統(tǒng)一后會(huì)形成標(biāo)準(zhǔn)數(shù)據(jù),然后再對(duì)數(shù)據(jù)進(jìn)行存儲(chǔ),進(jìn)而形成數(shù)據(jù)資產(chǎn),為用戶(hù)提供高效的優(yōu)質(zhì)服務(wù)。這些服務(wù)跟油田的業(yè)務(wù)有較強(qiáng)的關(guān)聯(lián)性,是油田獨(dú)有的且能復(fù)用的,它是業(yè)務(wù)和數(shù)據(jù)的沉淀,可以降低重復(fù)建設(shè)、減少煙囪式協(xié)作的成本。數(shù)據(jù)中臺(tái)對(duì)一個(gè)企業(yè)起著至關(guān)重要的作用,可以讓數(shù)據(jù)在數(shù)據(jù)平臺(tái)和業(yè)務(wù)系統(tǒng)之間形成了一個(gè)良性的閉環(huán)。說(shuō)到數(shù)據(jù)中臺(tái),不得不提到“前臺(tái)”和“后臺(tái)”兩個(gè)概念。前臺(tái)是由各個(gè)應(yīng)用組成的前端系統(tǒng)平臺(tái),與最終用戶(hù)直接進(jìn)行信息交互。例如,企業(yè)搭建的電子商務(wù)網(wǎng)站、門(mén)戶(hù)網(wǎng)站等都屬于前臺(tái)。后臺(tái)是由各個(gè)業(yè)務(wù)管理系統(tǒng)組成的后端平臺(tái)。每個(gè)后臺(tái)業(yè)務(wù)系統(tǒng)管理了企業(yè)的一塊業(yè)務(wù),例如用戶(hù)管理系統(tǒng)、生產(chǎn)管理系統(tǒng)等。后臺(tái)往往并不能很好地支撐前臺(tái)快速創(chuàng)新響應(yīng)用戶(hù)的需求,而中臺(tái)要解決的才是前臺(tái)的創(chuàng)新問(wèn)題。[2]

      2、數(shù)據(jù)中臺(tái)應(yīng)用價(jià)值

      數(shù)據(jù)中臺(tái)建設(shè)帶來(lái)的效益及意義主要體現(xiàn)在全面實(shí)現(xiàn)企業(yè)級(jí)數(shù)據(jù)的數(shù)據(jù)標(biāo)準(zhǔn)化、數(shù)據(jù)價(jià)值化和數(shù)據(jù)服務(wù)化。

      2.1 數(shù)據(jù)標(biāo)準(zhǔn)化

      數(shù)據(jù)中臺(tái)應(yīng)解決新的數(shù)據(jù)結(jié)構(gòu)下企業(yè)整體數(shù)據(jù)標(biāo)準(zhǔn)化問(wèn)題,改變過(guò)去傳統(tǒng)的數(shù)據(jù)關(guān)聯(lián)為目標(biāo)的傳統(tǒng)架構(gòu)設(shè)計(jì)理念,構(gòu)建新的行業(yè)數(shù)據(jù)模型,對(duì)用于大數(shù)據(jù)分析的數(shù)據(jù)具有良好的模型擴(kuò)展能力,結(jié)合企業(yè)數(shù)據(jù)建設(shè)新的數(shù)據(jù)主題域和標(biāo)準(zhǔn)體系,建設(shè)企業(yè)全域數(shù)據(jù)指標(biāo)體系。

      2.2 數(shù)據(jù)價(jià)值化

      數(shù)據(jù)分析平臺(tái)首先應(yīng)建立主題關(guān)聯(lián)模型,將分散到各系統(tǒng),各數(shù)據(jù)域的同一主題數(shù)據(jù)進(jìn)行算法分析和關(guān)聯(lián),形成基于業(yè)務(wù)域自然對(duì)象的主題模型。并基于該模型設(shè)計(jì)規(guī)劃企業(yè)業(yè)務(wù)指標(biāo)體系,使業(yè)務(wù)人員直接通過(guò)標(biāo)簽來(lái)進(jìn)行業(yè)務(wù)分析和知識(shí)挖掘。標(biāo)簽體系中應(yīng)融合業(yè)務(wù)場(chǎng)景需求,通過(guò)關(guān)聯(lián)、預(yù)測(cè)和挖掘算法模型,實(shí)現(xiàn)對(duì)業(yè)務(wù)場(chǎng)景的實(shí)際指導(dǎo),真正體現(xiàn)業(yè)務(wù)價(jià)值。

      2.3 數(shù)據(jù)服務(wù)化

      數(shù)據(jù)分析平臺(tái)應(yīng)實(shí)現(xiàn)數(shù)據(jù)智能在線化與服務(wù)化。通過(guò)數(shù)據(jù)標(biāo)準(zhǔn)化與價(jià)值化建設(shè),需要將主題分析、挖掘結(jié)果以服務(wù)化接口方式共享出去,實(shí)現(xiàn)與應(yīng)用前臺(tái)的高效交互,將分析成果直接應(yīng)用于業(yè)務(wù)流程,實(shí)現(xiàn)數(shù)據(jù)驅(qū)動(dòng)運(yùn)營(yíng)。另一方面,通過(guò)基于數(shù)據(jù)中臺(tái)理念與技術(shù)的數(shù)據(jù)服務(wù)化可以有效降低對(duì)同一主題對(duì)象的應(yīng)用開(kāi)發(fā)成本,實(shí)現(xiàn)上層數(shù)據(jù)分析應(yīng)用快速開(kāi)發(fā),節(jié)省時(shí)間成本和人力成本,減少重復(fù)工作,保證數(shù)據(jù)分析的準(zhǔn)確性和一致性。

      3、數(shù)據(jù)中臺(tái)系統(tǒng)定位

      數(shù)據(jù)中臺(tái)(Data Central-Platform)可以用來(lái)進(jìn)行數(shù)據(jù)治理,利用數(shù)據(jù)中臺(tái)實(shí)現(xiàn)業(yè)務(wù)數(shù)據(jù)的流轉(zhuǎn)、數(shù)據(jù)流向的梳理、數(shù)據(jù)質(zhì)量的清洗以及數(shù)據(jù)提供的能力。根據(jù)數(shù)據(jù)治理協(xié)會(huì)(Data Governance Institute,DGI)的定義,數(shù)據(jù)治理指的是對(duì)數(shù)據(jù)相關(guān)事宜的決策制定與權(quán)力控制。數(shù)據(jù)治理的目標(biāo)是提高數(shù)據(jù)的質(zhì)量(準(zhǔn)確性、及時(shí)性、完整性、唯一性、一致性、有效性),確保數(shù)據(jù)的安全性(保密性、完整性及可用性),實(shí)現(xiàn)數(shù)據(jù)資源在各組織機(jī)構(gòu)部門(mén)的共享,推進(jìn)數(shù)據(jù)資源的整合、服務(wù)和共享,從而提升企事業(yè)單位信息化水平,充分發(fā)揮數(shù)據(jù)資產(chǎn)作用。技術(shù)上,數(shù)據(jù)中臺(tái)是一種大數(shù)據(jù)架構(gòu),用來(lái)完成數(shù)據(jù)治理,進(jìn)而支撐線上應(yīng)用系統(tǒng)建設(shè),挖掘數(shù)據(jù)隱含價(jià)值。

      本文認(rèn)為數(shù)據(jù)中臺(tái)是一個(gè)物理存在的系統(tǒng),是企業(yè)或機(jī)構(gòu)需要建設(shè)的位于數(shù)據(jù)源與數(shù)據(jù)應(yīng)用系統(tǒng)之間的一個(gè)中間平臺(tái)。數(shù)據(jù)中臺(tái)鏈接數(shù)據(jù)后臺(tái)和數(shù)據(jù)前后,將無(wú)質(zhì)量的后臺(tái)數(shù)據(jù)匯集在一起,形成大數(shù)據(jù),通過(guò)數(shù)據(jù)治理梳理出有效的數(shù)據(jù)。數(shù)據(jù)中臺(tái)是數(shù)據(jù)三層結(jié)構(gòu)中的中間層,主要負(fù)責(zé)數(shù)據(jù)匯集、數(shù)據(jù)治理和提供數(shù)據(jù)能力,為應(yīng)用服務(wù)提供個(gè)性化數(shù)據(jù)服務(wù)。這里的數(shù)據(jù)中臺(tái)并非指大數(shù)據(jù)平臺(tái),而是指通過(guò)數(shù)據(jù)技術(shù)對(duì)海量的數(shù)據(jù)進(jìn)行采集、計(jì)算、存儲(chǔ)和加工,并統(tǒng)一標(biāo)準(zhǔn)和口徑。數(shù)據(jù)中臺(tái)完成數(shù)據(jù)統(tǒng)一后會(huì)形成標(biāo)準(zhǔn)數(shù)據(jù),然后再對(duì)數(shù)據(jù)進(jìn)行存儲(chǔ),進(jìn)而形成大數(shù)據(jù)資產(chǎn)層,為用戶(hù)提供高效的優(yōu)質(zhì) 服務(wù)。

      數(shù)據(jù)中臺(tái)是眾多數(shù)據(jù)應(yīng)用系統(tǒng)中可集中建設(shè)與維護(hù)的一個(gè)共享數(shù)據(jù)平臺(tái),是數(shù)據(jù)生產(chǎn)系統(tǒng)中的一環(huán)。數(shù)據(jù)中臺(tái)一定具有大數(shù)據(jù)平臺(tái)的功能,但大數(shù)據(jù)平臺(tái)不需要具備數(shù)據(jù)中臺(tái)的功能。數(shù)據(jù)治理是數(shù)據(jù)中臺(tái)及大數(shù)據(jù)平臺(tái)不可或缺的核心功能,數(shù)據(jù)中臺(tái)需要專(zhuān)門(mén)的數(shù)據(jù)治理子系統(tǒng)。

      4、數(shù)據(jù)中臺(tái)通用體系架構(gòu)

      4.1 數(shù)據(jù)存儲(chǔ)框架

      數(shù)據(jù)中臺(tái)的核心是數(shù)據(jù),數(shù)據(jù)通過(guò)采集系統(tǒng)獲取,然后數(shù)據(jù)經(jīng)過(guò)處理框架加工,并接受數(shù)據(jù)治理框架的管理,同時(shí)也要接受數(shù)據(jù)安全管理框架的管理,最后開(kāi)放的價(jià)值數(shù)據(jù)將通過(guò)數(shù)據(jù)運(yùn)營(yíng)框架對(duì)外提供數(shù)據(jù)服務(wù)。數(shù)據(jù)中臺(tái)的數(shù)據(jù)架構(gòu)應(yīng)該獨(dú)立規(guī)劃,并采用合理的技術(shù)架構(gòu)對(duì)不同類(lèi)型的數(shù)據(jù)進(jìn)行存儲(chǔ)。

      數(shù)據(jù)存儲(chǔ)框架中,無(wú)論數(shù)據(jù)采用對(duì)象存儲(chǔ)、塊存儲(chǔ)還是數(shù)據(jù)庫(kù)存儲(chǔ)技術(shù),各種中臺(tái)數(shù)據(jù)可按照上圖所示分類(lèi)管理。對(duì)于不同數(shù)據(jù)的存儲(chǔ)技術(shù)本文不再討論。源數(shù)據(jù)主要由采集框架進(jìn)行管理,數(shù)據(jù)治理框架按照數(shù)據(jù)特征把數(shù)據(jù)簡(jiǎn)單分為結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)兩大類(lèi),而規(guī)范化分域數(shù)據(jù)則是數(shù)據(jù)治理框架對(duì)全量數(shù)據(jù)的規(guī)范化分域整理。寬表數(shù)據(jù)是數(shù)據(jù)關(guān)聯(lián)的結(jié)果,利用寬表數(shù)據(jù)可以對(duì)人、事、地、物、組等對(duì)象進(jìn)行完整的數(shù)據(jù)畫(huà)像,同時(shí)寬表數(shù)據(jù)也可以作為上層模型數(shù)據(jù)的中間層數(shù)據(jù)。元數(shù)據(jù)和標(biāo)簽數(shù)據(jù)都是對(duì)數(shù)據(jù)的描述,其中元數(shù)據(jù)用來(lái)對(duì)數(shù)據(jù)的客觀屬性進(jìn)行表示,標(biāo)簽數(shù)據(jù)更傾向于管理者對(duì)數(shù)據(jù)的主觀表述及等級(jí)劃分,比如質(zhì)量等級(jí)標(biāo)簽、安全標(biāo)簽、屬性標(biāo)簽等。主數(shù)據(jù)需要在各系統(tǒng)間頻繁更新、交換,且需要獨(dú)立的存儲(chǔ)空間進(jìn)行維護(hù)管理。[3]

      4.2 數(shù)據(jù)采集框架

      數(shù)據(jù)中臺(tái)的采集框架應(yīng)對(duì)納入數(shù)據(jù)中臺(tái)的各種源數(shù)據(jù)進(jìn)行統(tǒng)一采集管理。數(shù)據(jù)采集框架中應(yīng)提供多種數(shù)據(jù)采集方式,如文件傳輸協(xié)議(File Transfer Protocol,F(xiàn)TP)采集、數(shù)據(jù)庫(kù)采集、接口應(yīng)用程序(Application Programming Interface,API)接入采集、流式采集及網(wǎng)絡(luò)爬蟲(chóng)采集。同時(shí)采集框架應(yīng)按照數(shù)據(jù)采集規(guī)范對(duì)源數(shù)據(jù)進(jìn)行預(yù)處理,從而去除明顯不需要的數(shù)據(jù)及多余數(shù)據(jù),并對(duì)采集過(guò)程進(jìn)行管理。雖然數(shù)據(jù)中臺(tái)的體系架構(gòu)沒(méi)有統(tǒng)一模板,但各企業(yè)數(shù)據(jù)采集框架基本一致。

      4.3 數(shù)據(jù)處理框架

      數(shù)據(jù)處理是每個(gè)數(shù)據(jù)應(yīng)用的基本環(huán)節(jié)之一,經(jīng)典的數(shù)據(jù)抽取、轉(zhuǎn)換和加載(Extract Transform Load,ETL)處理流程在數(shù)據(jù)采集預(yù)處理、數(shù)據(jù)整合、數(shù)據(jù)建模等多個(gè)地方均要使用。單獨(dú)建設(shè)數(shù)據(jù)處理框架有利于數(shù)據(jù)處理工具組件的集中開(kāi)發(fā)與管理,也有利于數(shù)據(jù)中臺(tái)數(shù)據(jù)處理任務(wù)的協(xié)調(diào)與調(diào)度。數(shù)據(jù)處理框架專(zhuān)門(mén)負(fù)責(zé)數(shù)據(jù)處理相關(guān)的任務(wù),包括批處理、流處理、人工智能(Artificial Intelligence,AI)分析、數(shù)據(jù)清洗、數(shù)據(jù)交換及查詢(xún),此外數(shù)據(jù)處理的相關(guān)工具組件可在處理框架中配置。任務(wù)調(diào)度模塊在數(shù)據(jù)處理框架中處于居中指揮的作用,并對(duì)運(yùn)行的數(shù)據(jù)處理任務(wù)進(jìn)行監(jiān)控及異常處理等操作。[4]

      4.4 數(shù)據(jù)治理框架

      廣義的數(shù)據(jù)治理不僅包含提升數(shù)據(jù)價(jià)值的內(nèi)容,如數(shù)據(jù)管理、數(shù)據(jù)目錄、數(shù)據(jù)質(zhì)量等,也包含數(shù)據(jù)安全管理及數(shù)據(jù)共享服務(wù)。數(shù)據(jù)安全管理與數(shù)據(jù)價(jià)值提升是一個(gè)矛盾體,如果由一個(gè)廠商或開(kāi)發(fā)團(tuán)隊(duì)進(jìn)行數(shù)據(jù)安全管理及數(shù)據(jù)價(jià)值提升相關(guān)軟件的開(kāi)發(fā),則開(kāi)發(fā)者的操作難免有所偏向,而且矛盾不容易公開(kāi),少了沖突也就少了優(yōu)質(zhì)的解決方案。另外,數(shù)據(jù)共享與數(shù)據(jù)治理的其他內(nèi)容也存在相同的問(wèn)題。數(shù)據(jù)治理框架包含數(shù)據(jù)目錄、數(shù)據(jù)管理、模型管理和數(shù)據(jù)質(zhì)量 4 個(gè)模塊。數(shù)據(jù)地圖、數(shù)據(jù)資產(chǎn)目錄、知識(shí)圖譜及數(shù)據(jù)血緣的主要作用是展示數(shù)據(jù)的屬性及相互關(guān)系,因此都納入數(shù)據(jù)目錄模塊。數(shù)據(jù)模型能提高數(shù)據(jù)中臺(tái)對(duì)外部應(yīng)用需求的反應(yīng)能力,固化的中間模型數(shù)據(jù)需要專(zhuān)門(mén)管理。模型管理包括模型目錄、模型血緣及模型地圖等。數(shù)據(jù)管理又可以細(xì)分為元數(shù)據(jù)管理、主數(shù)據(jù)管理、標(biāo)簽數(shù)據(jù)管理及源數(shù)據(jù)管理。數(shù)據(jù)質(zhì)量管理模塊按照制定的數(shù)據(jù)標(biāo)準(zhǔn)及數(shù)據(jù)稽核規(guī)則對(duì)數(shù)據(jù)中臺(tái)中的數(shù)據(jù)進(jìn)行質(zhì) 量管理。

      4.5 數(shù)據(jù)安全框架

      數(shù)據(jù)已經(jīng)成為數(shù)據(jù)資產(chǎn),數(shù)據(jù)安全框架是數(shù)據(jù)中臺(tái)必不可少的組成部分。數(shù)據(jù)安全疊加在數(shù)據(jù)中臺(tái)其他功能框架之上,數(shù)據(jù)采集、處理、交換、共享等每個(gè)環(huán)節(jié)均必須實(shí)施安全控制策略。安全框架可以分為日志管理、用戶(hù)認(rèn)證、權(quán)限管理及加解密等幾個(gè)功能模塊。此外,安全全門(mén)戶(hù)也可以對(duì)外提供安全能力封裝,展示數(shù)據(jù)中臺(tái)的安全態(tài)勢(shì)及安全視圖。[5]

      4.6 數(shù)據(jù)運(yùn)營(yíng)框架

      數(shù)據(jù)中臺(tái)的核心功能是綜合眾多數(shù)據(jù)應(yīng)用的數(shù)據(jù)處理及數(shù)據(jù)治理功能,集中建設(shè)、集中管理、減少冗余、增加復(fù)用。數(shù)據(jù)中臺(tái)的最終目的還是為其他應(yīng)用或開(kāi)發(fā)者提供數(shù)據(jù)服務(wù),而對(duì)外數(shù)據(jù)服務(wù)功能將直接面向不確定的外部對(duì)象。因此單獨(dú)建設(shè)數(shù)據(jù)運(yùn)營(yíng),一方面有利于針對(duì)外部用戶(hù)提供針對(duì)性功能;另一方面,數(shù)據(jù)運(yùn)營(yíng)模塊作為用戶(hù)與數(shù)據(jù)中臺(tái)核心數(shù)據(jù)服務(wù)之間的中間層,可以有效隔離外部用戶(hù)直接控制、接觸核心數(shù)據(jù)及應(yīng)用,可保護(hù)數(shù)據(jù)中臺(tái)的安全性及內(nèi)部功能的穩(wěn)定性。綜合以上因素,數(shù)據(jù)運(yùn)營(yíng)應(yīng)配置運(yùn)營(yíng)門(mén)戶(hù)、能力開(kāi)放、數(shù)據(jù)開(kāi)放及運(yùn)營(yíng)監(jiān)控等功能。

      (1)運(yùn)營(yíng)門(mén)戶(hù):對(duì)數(shù)據(jù)中臺(tái)管理者提供管理門(mén)戶(hù),對(duì)開(kāi)發(fā)者提供開(kāi)發(fā)者門(mén)戶(hù)。對(duì)內(nèi)部應(yīng)用提供內(nèi)部應(yīng)用門(mén)戶(hù),對(duì)外部應(yīng)用提供外部應(yīng)用門(mén)戶(hù)。運(yùn)營(yíng)門(mén)戶(hù)針對(duì)不同的用戶(hù)提供不同的通道并開(kāi)放不同的數(shù)據(jù)中臺(tái)能力。

      (2)能力開(kāi)放:把數(shù)據(jù)中臺(tái)的數(shù)據(jù)處理能力、數(shù)據(jù)分析能力等經(jīng)過(guò)適當(dāng)?shù)姆庋b后對(duì)用戶(hù)提供服務(wù),可以是微服務(wù),也可以是 API 接口,或者直接提供二次開(kāi)發(fā)能力。[6]

      (3)數(shù)據(jù)開(kāi)放:通過(guò)數(shù)據(jù)目錄,數(shù)據(jù) / 模型展示(可視化、數(shù)據(jù)視圖等)為其他數(shù)據(jù)應(yīng)用系統(tǒng)提供數(shù)據(jù)服務(wù)。

      (4)運(yùn)營(yíng)監(jiān)控:對(duì)數(shù)據(jù)中臺(tái)的總體運(yùn)營(yíng)情況進(jìn)行監(jiān)控管理,包括硬件環(huán)境、軟件環(huán)境,并且確定監(jiān)控指標(biāo),按需求提供運(yùn)營(yíng)日?qǐng)?bào),處理告警 信息。

      5、數(shù)據(jù)中臺(tái)架構(gòu)建設(shè)運(yùn)營(yíng)策略

      數(shù)據(jù)中臺(tái)的建設(shè)以“一切數(shù)據(jù)業(yè)務(wù)化,一切業(yè)務(wù)數(shù)據(jù)化”為終極目標(biāo),數(shù)據(jù)中臺(tái)的建立不是一蹴而就的,每個(gè)企業(yè)都應(yīng)該基于實(shí)際打造獨(dú)有的中臺(tái)能力,在這個(gè)過(guò)程中,需要遵循運(yùn)營(yíng)思維,主要包括:

      第一,企業(yè)的組織架構(gòu)及機(jī)制需要順勢(shì)而變,比如以前負(fù)責(zé)數(shù)據(jù)的部門(mén)或團(tuán)隊(duì)往往缺乏話語(yǔ)權(quán),面對(duì)業(yè)務(wù)需求往往是被動(dòng)的接受的角色,這讓一切數(shù)據(jù)中臺(tái)的想法化為泡影,需要為數(shù)據(jù)中臺(tái)團(tuán)隊(duì)授權(quán)。

      第二,要改變工作方式,現(xiàn)在很多企業(yè)的數(shù)據(jù)團(tuán)隊(duì)的主要工作內(nèi)容就是項(xiàng)目管理、需求管理等等,當(dāng)一個(gè)項(xiàng)目完成后又投入到下一個(gè)項(xiàng)目,做好一個(gè)需求后又開(kāi)始負(fù)責(zé)下一個(gè)需求,這樣的工作確實(shí)非常鍛煉人的組織、協(xié)調(diào)能力,但這樣能力的提升與工作時(shí)間的長(zhǎng)短并不是呈線性增長(zhǎng)的,雖然增加了項(xiàng)目和需求管理經(jīng)驗(yàn),但并不能在某一個(gè)專(zhuān)業(yè)領(lǐng)域得到知識(shí)和經(jīng)驗(yàn)的沉淀,隨著時(shí)間的流逝,越來(lái)越多的人會(huì)失去最初的工作積極性和創(chuàng)造性,事實(shí)上,數(shù)據(jù)分析人員只有深入的研究業(yè)務(wù)、數(shù)據(jù)和模型,端到端的去實(shí)踐,打造出數(shù)據(jù)中臺(tái),才是最大的價(jià)值創(chuàng)造,才能使得持續(xù)創(chuàng)新成為可能。

      第三,數(shù)據(jù)中臺(tái)的團(tuán)隊(duì)要從傳統(tǒng)的支撐角色逐步向運(yùn)營(yíng)角色轉(zhuǎn)變,不僅在數(shù)據(jù)上,在業(yè)務(wù)上也要努力趕超業(yè)務(wù)人員,中臺(tái)人員要逐步建立起對(duì)于業(yè)務(wù)的話語(yǔ)權(quán),不僅僅是接受需求的角色,更要能提出合理的建議,能為業(yè)務(wù)帶來(lái)新的增長(zhǎng)點(diǎn)。

      6結(jié)語(yǔ)

      總而言之,建設(shè)數(shù)據(jù)中臺(tái),實(shí)現(xiàn)企業(yè)或機(jī)構(gòu)數(shù)據(jù)資產(chǎn)的高效管理和數(shù)據(jù)價(jià)值最大化,為機(jī)構(gòu)帶來(lái)了數(shù)據(jù)平臺(tái)化的運(yùn)營(yíng)機(jī)制,有望解決應(yīng)用開(kāi)發(fā)與數(shù)據(jù)開(kāi)發(fā)速度不匹配的問(wèn)題。利用數(shù)據(jù)中臺(tái),可以將機(jī)構(gòu)的核心技術(shù)或團(tuán)隊(duì)凝聚在一起,建設(shè)機(jī)構(gòu)內(nèi)強(qiáng)大的數(shù)據(jù)開(kāi)發(fā)、運(yùn)營(yíng)等團(tuán)隊(duì),提升機(jī)構(gòu)的團(tuán)隊(duì)的硬實(shí)力和軟實(shí)力。雖然一個(gè)良好的架構(gòu)對(duì)一個(gè)信息系統(tǒng)的后期擴(kuò)容及運(yùn)維有重要作用,但總體架構(gòu)設(shè)計(jì)只是數(shù)據(jù)中臺(tái)建設(shè)的第一步,每一個(gè)功能模塊還有很大的細(xì)化空間,如不同類(lèi)型數(shù)據(jù)的存儲(chǔ)技術(shù)選型、數(shù)據(jù)安全合規(guī)審計(jì)技術(shù)、數(shù)據(jù)模型設(shè)計(jì)等。在具體項(xiàng)目中,數(shù)據(jù)共享與安全保護(hù)的平衡點(diǎn)、新技術(shù)的引用等,都需要進(jìn)一步細(xì)化研究。

      參考文獻(xiàn):

      [1]劉曉.阿里巴巴:數(shù)據(jù)技術(shù)驅(qū)動(dòng)媒體深度融合轉(zhuǎn)型[J].國(guó)際品牌觀察,2021(24):44-49.

      [2]金亦武,張篤展.銀行業(yè)數(shù)字化中臺(tái)建設(shè)構(gòu)想[J].中國(guó)市場(chǎng),2021(24):180-181.

      [3]吳建杰.基于數(shù)據(jù)“中臺(tái)”模式的鋼鐵企業(yè)信息系統(tǒng)數(shù)據(jù)整合探索與實(shí)踐[J].天津冶金,2021(4):38-40.

      [4]李小慶.銀行智能中臺(tái)創(chuàng)新研究和實(shí)踐[J].金融科技時(shí)代,2021,29(8):22-26.

      [5]陳志. 搭建中臺(tái)? 挖掘數(shù)據(jù)? 提升監(jiān)管水平[N]. 東方煙草報(bào),2021-7-22(003).

      [6]楊敏, 何海濤, 張永強(qiáng). 基于數(shù)據(jù)中臺(tái)的校園數(shù)據(jù)體系設(shè)計(jì)與建設(shè)[J]. 深圳大學(xué)學(xué)報(bào)(理工版), 2020,37(S1).

      作者簡(jiǎn)介:呂軍(1976.12—)男,漢族,四川綿陽(yáng),本科,工程師,軟件工程

      通訊作者簡(jiǎn)介:郭健(1986.03—)男,漢族,四川綿陽(yáng),碩士,中級(jí)工程師,軟件工程。1073544789@qq.com

      猜你喜歡
      體系架構(gòu)大數(shù)據(jù)平臺(tái)數(shù)據(jù)治理
      基于本體的企業(yè)運(yùn)營(yíng)數(shù)據(jù)治理
      云端數(shù)據(jù)治理初探
      基于大數(shù)據(jù)的智能停車(chē)場(chǎng)管理系統(tǒng)設(shè)計(jì)
      淺談電力大數(shù)據(jù)平臺(tái)關(guān)鍵技術(shù)研究與應(yīng)用
      基于國(guó)產(chǎn)軟硬件的行業(yè)大數(shù)據(jù)體系架構(gòu)研究
      基于大數(shù)據(jù)分析的智慧倉(cāng)儲(chǔ)運(yùn)營(yíng)支撐平臺(tái)設(shè)計(jì)
      襪業(yè)行業(yè)大數(shù)據(jù)平臺(tái)的應(yīng)用研究
      大數(shù)據(jù)治理模型與治理成熟度評(píng)估研究
      關(guān)于應(yīng)急移動(dòng)通信體系架構(gòu)及組網(wǎng)技術(shù)分析
      智慧健康物聯(lián)網(wǎng)體系架構(gòu)研究
      西畴县| 彰化县| 东乌珠穆沁旗| 庄河市| 阳曲县| 温州市| 祁门县| 准格尔旗| 盘锦市| 柳州市| 颍上县| 安图县| 黄大仙区| 扎囊县| 鹤峰县| 桐庐县| 关岭| 海丰县| 石楼县| 巴南区| 进贤县| 贡觉县| 孙吴县| 辽阳市| 嘉兴市| 绍兴市| 宾川县| 象山县| 磐安县| 金山区| 永福县| 黑山县| 库伦旗| 利辛县| 宁明县| 常德市| 晋宁县| 博野县| 浦江县| 黄大仙区| 柳河县|