熊贏新 劉華南 章青 彭一軒
[摘 要]中國政府非常重視政務(wù)信息化、政府大數(shù)據(jù)的創(chuàng)新發(fā)展,但國內(nèi)目前構(gòu)建長效機(jī)制挖掘政府?dāng)?shù)據(jù)價(jià)值的成功案例并不多。本文以湖北省宏觀經(jīng)濟(jì)大數(shù)據(jù)倉庫項(xiàng)目為例,首先分析了政府大數(shù)據(jù)的應(yīng)用價(jià)值與發(fā)展現(xiàn)狀,以及數(shù)據(jù)資源管理等方面的困境;其次介紹了湖北省宏觀經(jīng)濟(jì)大數(shù)據(jù)倉庫項(xiàng)目多元化、融合性的硬環(huán)境設(shè)計(jì)理念與建設(shè)概況;最后闡述了如何運(yùn)用互聯(lián)網(wǎng)思維構(gòu)建政府大數(shù)據(jù)價(jià)值挖掘長效機(jī)制的軟環(huán)境。該項(xiàng)目的實(shí)踐探索對構(gòu)建政府大數(shù)據(jù)“存、管、算、用”價(jià)值挖掘鏈條具有一定的指導(dǎo)意義。
[關(guān)鍵詞]政務(wù)信息化;政府大數(shù)據(jù);大數(shù)據(jù)技術(shù)
doi:10.3969/j.issn.1673 - 0194.2019.20.066
[中圖分類號]D63[文獻(xiàn)標(biāo)識碼]A[文章編號]1673-0194(2019)20-0-05
0 ? ? 引 言
隨著互聯(lián)網(wǎng)及信息技術(shù)的發(fā)展,政府及社會各種信息平臺也相繼建立并逐步完善,基于各種數(shù)據(jù)平臺的集成與融合共享,人工智能、區(qū)塊鏈和大數(shù)據(jù)技術(shù)的各種應(yīng)用也日益廣泛。中國政府高度重視政府大數(shù)據(jù)的應(yīng)用發(fā)展,相關(guān)部門近幾年先后印發(fā)了多個(gè)關(guān)于大數(shù)據(jù)發(fā)展、政務(wù)信息化的實(shí)施方案和文件,例如國發(fā)[2015]50號、國辦發(fā)[2015]51號、發(fā)改辦高技[2016]42號、國辦發(fā)[2017]39號、發(fā)改高技[2017]1449號和國發(fā)[2018]27號等。2016年,李克強(qiáng)總理在貴州全國數(shù)博會上提出政府要積極參與大數(shù)據(jù)“鉆石礦”的價(jià)值挖掘,推動政府信息共享。中國共產(chǎn)黨第十九此代表大會報(bào)告中,習(xí)近平總書記強(qiáng)調(diào),推動大數(shù)據(jù)與實(shí)體經(jīng)濟(jì)深度融合,培育新增長點(diǎn)、形成新動能。在互聯(lián)網(wǎng)、大數(shù)據(jù)時(shí)代,及時(shí)、準(zhǔn)確、全面的信息及分析技術(shù)能夠賦予人千里眼、順風(fēng)耳和最強(qiáng)大腦。通過構(gòu)建政府大數(shù)據(jù)平臺,對來源于政府、網(wǎng)絡(luò)和社會的各類信息進(jìn)行科學(xué)匯總與綜合分析,能夠在輔助政務(wù)管理,支撐區(qū)域經(jīng)濟(jì)平穩(wěn)增效與轉(zhuǎn)型升級,促進(jìn)社會文化發(fā)展等方面發(fā)揮重要作用。
國內(nèi)電子政務(wù)等各類管理信息化建設(shè)在近年來得到快速發(fā)展和普及,積累了大量真實(shí)、權(quán)威、系統(tǒng)性的各類信息數(shù)據(jù)。然而在構(gòu)建長效機(jī)制,合理挖掘這些數(shù)據(jù)價(jià)值的成功案例并不多?;诖耍疚慕Y(jié)合湖北省宏觀經(jīng)濟(jì)大數(shù)據(jù)倉庫項(xiàng)目建設(shè)與運(yùn)營工作,闡述了如何通過硬環(huán)境與軟環(huán)境建設(shè),構(gòu)建政府大數(shù)據(jù)資源管理與價(jià)值挖掘長效機(jī)制的整體思路以及在政務(wù)管理、決策分析等多方面的應(yīng)用展望。
1 ? ? 我國政府大數(shù)據(jù)應(yīng)用現(xiàn)狀與主要困境
全社會的網(wǎng)絡(luò)化、數(shù)字化發(fā)展,極大地豐富了政府大數(shù)據(jù)的內(nèi)涵,在社會管理中如何挖掘數(shù)據(jù)價(jià)值服務(wù)成為政府部門面臨的新課題。
1.1 ? 政府大數(shù)據(jù)的應(yīng)用價(jià)值與發(fā)展現(xiàn)狀
1.1.1 ? 政府大數(shù)據(jù)的內(nèi)容、特點(diǎn)及價(jià)值
隨著計(jì)算機(jī)、互聯(lián)網(wǎng)等信息技術(shù)的發(fā)展與管理信息化的普及,從電子商務(wù)到電子政務(wù),從管理信息化到數(shù)字化運(yùn)營,政府、企事業(yè)單位、社會組織和個(gè)人等各類社會主體的多種信息都快速地轉(zhuǎn)化為信息數(shù)據(jù),在各類信息系統(tǒng)中快速積累,形成了內(nèi)涵豐富的政府大數(shù)據(jù)。政府大數(shù)據(jù)數(shù)量龐大、種類繁多,包含了很多高真實(shí)性、權(quán)威性、專業(yè)性的信息,是各級政府?dāng)U展觸覺點(diǎn)、提高敏銳度,提升決策水平與執(zhí)政能力的重要工具和依托。
政府大數(shù)據(jù)是產(chǎn)、學(xué)、研各類機(jī)構(gòu)開展專業(yè)分析的主要數(shù)據(jù)來源和依據(jù)。目前,中外許多國家和地區(qū)非常重視政府?dāng)?shù)據(jù)的社會化開放與共享,統(tǒng)計(jì)年鑒、氣象數(shù)據(jù)、行業(yè)數(shù)據(jù)等原屬內(nèi)部掌握的專業(yè)信息已被廣泛應(yīng)用,為社會各類主體的專業(yè)研究提供數(shù)據(jù)支撐,取得了良好經(jīng)濟(jì)效益和社會效益。
1.1.2 ? 我國政府大數(shù)據(jù)應(yīng)用與發(fā)展現(xiàn)狀
我國近幾年推動的“互聯(lián)網(wǎng)+政務(wù)”,加速了電子政務(wù)、數(shù)字化政府等政府大數(shù)據(jù)典型業(yè)態(tài)發(fā)展。以政務(wù)信息化為主的政府大數(shù)據(jù)主要是以行政管轄權(quán)為邊界,以國家部委、省級、重點(diǎn)城市為主體進(jìn)行總體規(guī)劃、布局。一些省市的政府大數(shù)據(jù)已經(jīng)逐步應(yīng)用到公共安全、應(yīng)急救災(zāi)、精準(zhǔn)扶貧、市場與環(huán)境監(jiān)管以及經(jīng)濟(jì)環(huán)境預(yù)測分析等多個(gè)領(lǐng)域。其中,貴州省政府在大數(shù)據(jù)分析應(yīng)用方面起步較早,在2014年初步建成融合電子政務(wù)云、工業(yè)云、環(huán)保云、智慧交通云、旅游云、食品安全云和電子商務(wù)云的“云上貴州平臺”,通過各種平臺解決了社會治理問題,提升了政府的服務(wù)能力,產(chǎn)生了較好的示范效應(yīng)。
總體來說,雖然這些地方性的“云平臺”、數(shù)據(jù)中心在建設(shè)與應(yīng)用方面已經(jīng)取得了很大發(fā)展,但基礎(chǔ)信息數(shù)據(jù)庫受管理邊界的限制呈現(xiàn)條塊化,限制了政府大數(shù)據(jù)的推廣應(yīng)用。為提高政府大數(shù)據(jù)價(jià)值挖掘能力,目前,我國多個(gè)國家部委不斷推行“數(shù)據(jù)大集中”。縱向來說,國家、省、市分級垂直管理的部門正通過建立高度集中的數(shù)據(jù)中心,為更高效的政府大數(shù)據(jù)價(jià)值挖掘提供支撐。橫向來說,國家相關(guān)部門也發(fā)文(國發(fā)[2018]27號等)推動跨部門、跨系統(tǒng)的信息數(shù)據(jù)集中與融合,并積極倡導(dǎo)各級政府向社會提供數(shù)據(jù)信息公共服務(wù),促進(jìn)信息技術(shù)等相關(guān)產(chǎn)業(yè)發(fā)展。
1.2 ? 數(shù)據(jù)資源管理與價(jià)值挖掘的主要困境
政府大數(shù)據(jù)的推廣應(yīng)用在數(shù)據(jù)管理、分析技術(shù)、系統(tǒng)運(yùn)營與價(jià)值挖掘等方面仍存在一些困境與局限。
1.2.1 ? 數(shù)據(jù)資源融合與管理的局限
目前,政府?dāng)?shù)據(jù)主要來源于政府部門和企事業(yè)單位的業(yè)務(wù)管理信息系統(tǒng)。這些信息系統(tǒng)在初始建設(shè)時(shí)主要定位于滿足自身個(gè)性化的管理需求,經(jīng)過功能擴(kuò)展、版本升級而沿用至今,各自積累了大量的信息數(shù)據(jù)。但從政府大數(shù)據(jù)應(yīng)用的視角來說,這些獨(dú)立的信息化系統(tǒng)存在許多弊端,例如同類系統(tǒng)重復(fù)建設(shè),信息系統(tǒng)結(jié)構(gòu)、數(shù)據(jù)處理技術(shù)差異較大,信息數(shù)據(jù)標(biāo)準(zhǔn)不統(tǒng)一;數(shù)據(jù)存儲、分析與應(yīng)用各自獨(dú)立,信息資源開發(fā)與應(yīng)用缺少協(xié)同、共享機(jī)制,缺少數(shù)據(jù)來源和獲取途徑;數(shù)據(jù)存儲、管理與使用存在多種安全隱患,相關(guān)制度法規(guī)不健全,這些因素制約了政府大數(shù)據(jù)倉庫、云平臺的整體化建設(shè)與運(yùn)營。
1.2.2 ? 數(shù)據(jù)處理與分析技術(shù)的局限
雖然近年來國內(nèi)外許多軟件企業(yè)在大數(shù)據(jù)分析技術(shù)與應(yīng)用方面取得了很大進(jìn)展,但以職能部門、商業(yè)主體為邊界的條塊化數(shù)據(jù)難以融合共享,使數(shù)據(jù)價(jià)值挖掘的許多需求在技術(shù)上很難滿足,主要體現(xiàn)在以下幾方面:面對條塊化的基礎(chǔ)數(shù)據(jù)壁壘,缺乏技術(shù)手段直接、高效地獲得原始數(shù)據(jù),可用數(shù)據(jù)的完整性與有效性難以保證;海量數(shù)據(jù)的多維分析、計(jì)算能力不足,大數(shù)據(jù)分析的業(yè)務(wù)需求應(yīng)用與技術(shù)創(chuàng)新難以形成相互促進(jìn)的良性循環(huán);數(shù)據(jù)安全與授權(quán)使用問題未得到解決。這些問題限制了政府大數(shù)據(jù)系統(tǒng)應(yīng)用與服務(wù)領(lǐng)域的擴(kuò)展。
1.2.3 ? 系統(tǒng)運(yùn)營與價(jià)值挖掘的局限
源于多主體、條塊化的政府大數(shù)據(jù)存在數(shù)據(jù)融合共享的壁壘,導(dǎo)致政府?dāng)?shù)據(jù)資源難以得到有效利用;缺少系統(tǒng)化的維護(hù)、運(yùn)營和應(yīng)用,數(shù)據(jù)匯聚、存取管理、分析計(jì)算與應(yīng)用幾個(gè)環(huán)節(jié)不能協(xié)同發(fā)展;配套制度不完善,政府部門和各類社會主體缺少動力來主動挖掘數(shù)據(jù)價(jià)值。因此,政府大數(shù)據(jù)的運(yùn)營管理與價(jià)值挖掘面臨共享難、共建難、共贏更難的困局,一些政務(wù)管理、決策分析的應(yīng)用場景仍停留在概念階段。
2 ? ? 湖北宏觀經(jīng)濟(jì)大數(shù)據(jù)倉庫的規(guī)劃與建設(shè)
湖北省宏觀經(jīng)濟(jì)大數(shù)據(jù)倉庫項(xiàng)目在建設(shè)前期就全面考慮了持續(xù)優(yōu)化、有效運(yùn)營問題,規(guī)劃建設(shè)專業(yè)化、多元化、融合性的數(shù)據(jù)平臺,構(gòu)建政府大數(shù)據(jù)價(jià)值挖掘的長效機(jī)制。
2.1 ? 項(xiàng)目背景與建設(shè)必要性
2.1.1 ? 政策指引及發(fā)展方向
隨著國家相關(guān)部門相繼發(fā)文,政務(wù)信息化、大數(shù)據(jù)不斷發(fā)展,再該背景下,湖北省政府相繼部署了建設(shè)智慧湖北、運(yùn)用大數(shù)據(jù)加強(qiáng)對市場主體服務(wù)的監(jiān)管、全省政務(wù)信息資源共享等各項(xiàng)工作,發(fā)布了全省大數(shù)據(jù)發(fā)展行動計(jì)劃。此外,湖北省宏觀經(jīng)濟(jì)大數(shù)據(jù)倉庫項(xiàng)目獲得批準(zhǔn),數(shù)據(jù)倉庫的整體設(shè)計(jì)參照了國家相關(guān)部門對同類信息化項(xiàng)目的建設(shè)規(guī)范與設(shè)計(jì)規(guī)范。湖北省政府大數(shù)據(jù)主要服務(wù)于以下幾方面:一是按照國家政務(wù)信息資源共享要求上報(bào)數(shù)據(jù),為國家級統(tǒng)一電子政務(wù)平臺提供支撐;二是推動本省政務(wù)數(shù)字化建設(shè),為社會治理、決策分析提供支撐;三是面向社會有選擇地開放數(shù)據(jù),建設(shè)智慧湖北,促進(jìn)相關(guān)產(chǎn)業(yè)發(fā)展與轉(zhuǎn)型升級,促進(jìn)區(qū)域經(jīng)濟(jì)、社會、文化的健康發(fā)展。
2.1.2 ? 項(xiàng)目定位與建設(shè)必要性
按照國家積極推動“數(shù)據(jù)大集中”,深入挖掘大數(shù)據(jù)價(jià)值,以促進(jìn)實(shí)體經(jīng)濟(jì)發(fā)展為指導(dǎo)精神,湖北省宏觀經(jīng)濟(jì)大數(shù)據(jù)倉庫項(xiàng)目應(yīng)運(yùn)而生。湖北省宏觀經(jīng)濟(jì)大數(shù)據(jù)倉庫能夠進(jìn)一步完善政府大數(shù)據(jù)價(jià)值挖掘的專業(yè)化服務(wù)鏈條,有力推動全省大數(shù)據(jù)建設(shè)及相關(guān)產(chǎn)業(yè)發(fā)展,其中,建設(shè)的必要性體現(xiàn)在以下幾個(gè)方面。一是數(shù)據(jù)匯聚與交換融合,能夠?qū)崿F(xiàn)對全省現(xiàn)有信息服務(wù)平臺的無縫對接,推動政府?dāng)?shù)據(jù)、網(wǎng)絡(luò)數(shù)據(jù)和社會數(shù)據(jù)匯聚融合,形成政府部門間信息共享、數(shù)據(jù)資源交換的通道和平臺。二是數(shù)據(jù)存取與使用管理,快速擴(kuò)展數(shù)據(jù)存儲空間。三是分析計(jì)算與綜合應(yīng)用,在省電子政務(wù)內(nèi)外與外網(wǎng)環(huán)境都可部署數(shù)據(jù)計(jì)算、存儲和展現(xiàn)能力,為政府及各類社會主體提供數(shù)據(jù)支撐服務(wù)。
2.2 ? 建設(shè)目標(biāo)與功能規(guī)劃
2.2.1 ? 建設(shè)目標(biāo)與總體架構(gòu)
根據(jù)項(xiàng)目定位,湖北省宏觀經(jīng)濟(jì)大數(shù)據(jù)倉庫需要從整體規(guī)劃開始,綜合考慮政府大數(shù)據(jù)在資源管理、分析技術(shù)、系統(tǒng)運(yùn)營與價(jià)值挖掘等方面的局限性,以數(shù)據(jù)分析應(yīng)用需求為導(dǎo)向,構(gòu)建一個(gè)注重實(shí)效、注重用戶,具有良好可持續(xù)性與可擴(kuò)展性的支撐服務(wù)平臺。項(xiàng)目總體目標(biāo)是建設(shè)一個(gè)大數(shù)據(jù)倉庫,通過“數(shù)據(jù)管理、數(shù)據(jù)存儲、數(shù)據(jù)計(jì)算和數(shù)據(jù)應(yīng)用”四大核心功能,為現(xiàn)有各大平臺信息交互、資源共享、價(jià)值挖掘提供重要支撐。
大數(shù)據(jù)倉庫的總體架構(gòu)由宏觀經(jīng)濟(jì)數(shù)據(jù)主題、大數(shù)據(jù)倉庫硬件環(huán)境、大數(shù)據(jù)倉庫支撐軟件、標(biāo)準(zhǔn)規(guī)范與管理制度4部分構(gòu)成。項(xiàng)目建立了數(shù)據(jù)主題和若干子數(shù)據(jù)主題及數(shù)據(jù)模型。其中,宏觀經(jīng)濟(jì)數(shù)據(jù)主題是數(shù)據(jù)存儲分類的基本標(biāo)準(zhǔn),也是數(shù)據(jù)管理、數(shù)據(jù)計(jì)算、數(shù)據(jù)交換、數(shù)據(jù)安全和數(shù)據(jù)應(yīng)用的基礎(chǔ)支撐。大數(shù)據(jù)倉庫硬件環(huán)境作為基礎(chǔ)設(shè)施層,包含服務(wù)器集群、網(wǎng)路系統(tǒng)和其他硬件設(shè)施等硬件。大數(shù)據(jù)倉庫支撐軟件層,按照功能劃分為存儲計(jì)算層,應(yīng)用支撐層和業(yè)務(wù)交換層。大數(shù)據(jù)倉庫建設(shè)總體架構(gòu)見圖1。
2.2.2 ? 數(shù)據(jù)架構(gòu)與核心功能
湖北省宏觀經(jīng)濟(jì)大數(shù)據(jù)倉庫的數(shù)據(jù)架構(gòu)主要體現(xiàn)以下幾方面。
(1)在政府大數(shù)據(jù)資源管理方面。湖北省宏觀經(jīng)濟(jì)大數(shù)據(jù)倉庫匯聚政府?dāng)?shù)據(jù)、互聯(lián)網(wǎng)數(shù)據(jù)和社會數(shù)據(jù),根據(jù)不同條件和不同場景,通過倉庫數(shù)據(jù)接入層實(shí)現(xiàn)數(shù)據(jù)歸集。針對異構(gòu)系統(tǒng)數(shù)據(jù)、數(shù)據(jù)包、填報(bào)文件等不同類型不同來源,倉庫數(shù)據(jù)接入層分別采用前置系統(tǒng)通道接入、實(shí)時(shí)采集、爬蟲采集、離線上傳等方式,使各種數(shù)據(jù)進(jìn)入倉庫數(shù)據(jù)管理層進(jìn)行處理后,實(shí)現(xiàn)元數(shù)據(jù)存儲和各原始數(shù)據(jù)分區(qū)存儲。
(2)在數(shù)據(jù)處理與分析技術(shù)方面。湖北省宏觀經(jīng)濟(jì)大數(shù)據(jù)倉庫可根據(jù)指標(biāo)分析、分析報(bào)告、形勢預(yù)測等需求,通過多維分析服務(wù),從原始數(shù)據(jù)分區(qū)讀取并構(gòu)建物化立方體,建立多維分析數(shù)據(jù)庫;根據(jù)搜索需求,通過搜索服務(wù),建立索引,構(gòu)建搜索與多維分析數(shù)據(jù)庫。
(3)在系統(tǒng)運(yùn)營與價(jià)值挖掘方面。湖北省宏觀經(jīng)濟(jì)大數(shù)據(jù)倉庫結(jié)合業(yè)務(wù)功能和應(yīng)用產(chǎn)品需求,規(guī)劃構(gòu)建經(jīng)濟(jì)、環(huán)境資源、社會民生、科技教育、基礎(chǔ)建設(shè)和資訊等多領(lǐng)域、多類型的分析主題數(shù)據(jù)庫。大數(shù)據(jù)倉庫數(shù)據(jù)架構(gòu)見圖2。
湖北省宏觀經(jīng)濟(jì)大數(shù)據(jù)倉庫系統(tǒng)設(shè)計(jì)的核心功能主要包括以下幾方面。
(1)數(shù)據(jù)管理支撐。根據(jù)宏觀經(jīng)濟(jì)大數(shù)據(jù)平臺數(shù)據(jù)資源體系的應(yīng)用需求,匯聚政府、網(wǎng)絡(luò)、社會三大來源的宏觀經(jīng)濟(jì)數(shù)據(jù)資源,從數(shù)據(jù)來源、數(shù)據(jù)分類、數(shù)據(jù)質(zhì)量要求、數(shù)據(jù)共享發(fā)布權(quán)限和數(shù)據(jù)安全保障等方面實(shí)施數(shù)據(jù)資源的全方位管理,保障數(shù)據(jù)資源的統(tǒng)一、規(guī)范、安全、優(yōu)質(zhì),為宏觀經(jīng)濟(jì)大數(shù)據(jù)平臺等各大信息平臺提供高效的數(shù)據(jù)服務(wù)。具體包括大數(shù)據(jù)主題體系設(shè)計(jì),“元數(shù)據(jù)、數(shù)據(jù)目錄、數(shù)據(jù)質(zhì)量、數(shù)據(jù)共享發(fā)布和數(shù)據(jù)安全”等大數(shù)據(jù)管理子功能模塊。
(2)數(shù)據(jù)存儲支撐。搭建分布式大數(shù)據(jù)倉庫集群,依據(jù)宏觀經(jīng)濟(jì)數(shù)據(jù)主題設(shè)計(jì)相應(yīng)數(shù)據(jù)模型,對數(shù)據(jù)資源進(jìn)行存儲;新建的宏觀經(jīng)濟(jì)大數(shù)據(jù)資源專庫可實(shí)現(xiàn)與各大信息平臺的數(shù)據(jù)共享交換,支撐宏觀經(jīng)濟(jì)大數(shù)據(jù)平臺開展大數(shù)據(jù)應(yīng)用創(chuàng)新。實(shí)現(xiàn)關(guān)系型數(shù)據(jù)庫、非關(guān)系數(shù)據(jù)庫和分布式文件系統(tǒng)二次封裝開發(fā)。
(3)數(shù)據(jù)計(jì)算支撐。依據(jù)宏觀經(jīng)濟(jì)大數(shù)據(jù)應(yīng)用體系對數(shù)據(jù)挖掘進(jìn)行功能分析,基于Spark計(jì)算框架,采用分布式計(jì)算架構(gòu)開發(fā)部署查詢計(jì)算、機(jī)器學(xué)習(xí)、深度學(xué)習(xí)、流計(jì)算、圖計(jì)算和數(shù)據(jù)分析等大數(shù)據(jù)挖掘引擎,提高大數(shù)據(jù)計(jì)算處理能力,滿足宏觀經(jīng)濟(jì)大數(shù)據(jù)平臺等各大平臺的大數(shù)據(jù)處理和計(jì)算服務(wù)需求。
(4)數(shù)據(jù)應(yīng)用支撐。依據(jù)宏觀經(jīng)濟(jì)大數(shù)據(jù)平臺大數(shù)據(jù)應(yīng)用體系的開發(fā)需求,開發(fā)部署“數(shù)據(jù)服務(wù)、計(jì)算服務(wù)、算法服務(wù)、搜索服務(wù)和分析服務(wù)”五大服務(wù)接口,配置“智能搜索、數(shù)據(jù)資源分析、自助分析、多維分析、自助儀表板”等應(yīng)用組件,打造靈活易用的數(shù)據(jù)探索與價(jià)值挖掘平臺,為各大平臺開展大數(shù)據(jù)應(yīng)用提供支撐。
2.3 ? 項(xiàng)目建設(shè)的預(yù)期成效
(1)面對未來海量的政府、網(wǎng)絡(luò)與社會數(shù)據(jù),提供更加高效、經(jīng)濟(jì)、可擴(kuò)的存儲方式與空間。宏觀經(jīng)濟(jì)大數(shù)據(jù)倉庫以經(jīng)濟(jì)適用的服務(wù)器構(gòu)建分布式大數(shù)據(jù)存儲資源,設(shè)置統(tǒng)一的數(shù)據(jù)資源目錄標(biāo)準(zhǔn),為各大信息平臺提供統(tǒng)一、規(guī)范的數(shù)據(jù)交互通道和資源共享平臺。打造可擴(kuò)、彈性、適用的數(shù)據(jù)存儲支撐,避免不同平臺之間獨(dú)立建設(shè)存儲資源帶來的重復(fù)投資。采取分布式存儲,并配有流式計(jì)算和高速網(wǎng)絡(luò),確保數(shù)據(jù)存取的實(shí)時(shí)性要求。同時(shí),基于分布式、可擴(kuò)展的架構(gòu)特性,未來在應(yīng)對海量數(shù)據(jù)接入、存儲等問題時(shí),使資源投入更加經(jīng)濟(jì)。
(2)面向數(shù)據(jù)計(jì)算的應(yīng)用和需求,提供靈活、經(jīng)濟(jì)、高效、適用的分析工具與解決方案。大數(shù)據(jù)倉庫以經(jīng)濟(jì)適用的服務(wù)器構(gòu)建分布式計(jì)算節(jié)點(diǎn),可滿足數(shù)據(jù)計(jì)算場景性能需求,避免采用集中式計(jì)算架構(gòu)所帶來的高投入。同時(shí),大數(shù)據(jù)倉庫強(qiáng)大的數(shù)據(jù)計(jì)算能力可便捷地共享給其他應(yīng)用平臺和經(jīng)授權(quán)的社會用戶,實(shí)現(xiàn)多平臺計(jì)算資源的統(tǒng)一建設(shè),避免獨(dú)立建設(shè)造成的資源浪費(fèi)。在應(yīng)對未來不斷增長的計(jì)算資源方面,該數(shù)據(jù)倉庫同樣可展現(xiàn)較好的可擴(kuò)展性,后續(xù)投資成本較低。
(3)有效支撐宏觀經(jīng)濟(jì)數(shù)據(jù)匯聚、分析技術(shù)和多場景應(yīng)用的相互促進(jìn)。大數(shù)據(jù)倉庫基于豐富的宏觀經(jīng)濟(jì)數(shù)據(jù)集和先進(jìn)的大數(shù)據(jù)分析技術(shù),建立大數(shù)據(jù)倉庫應(yīng)用開發(fā)環(huán)境,為多場景應(yīng)用開發(fā)搭建了功能強(qiáng)大的系統(tǒng)性支撐。在嚴(yán)格的安全保障下,可面向湖北省各級政府部門、科研機(jī)構(gòu)乃至社會各類合規(guī)主體逐步開放,協(xié)同挖掘數(shù)據(jù)價(jià)值、創(chuàng)新數(shù)據(jù)應(yīng)用產(chǎn)品、推進(jìn)需求成果轉(zhuǎn)化,形成供給、需求、技術(shù)相互促進(jìn)的良性循環(huán),不斷擴(kuò)大共享數(shù)據(jù)規(guī)模,增加分析應(yīng)用場景,提升分析技術(shù)效率與能力,促進(jìn)各大信息平臺挖掘價(jià)值。
(4)輔助提升政府宏觀決策分析與政務(wù)管理的協(xié)同性、精準(zhǔn)性、實(shí)時(shí)性。大數(shù)據(jù)倉庫能夠在持續(xù)運(yùn)營中不斷優(yōu)化、升級,逐步建立健全數(shù)據(jù)目錄、統(tǒng)一數(shù)據(jù)標(biāo)準(zhǔn),形成基礎(chǔ)統(tǒng)一、邏輯嚴(yán)密、種類多樣的宏觀經(jīng)濟(jì)大數(shù)據(jù)體系。在倉庫內(nèi)解決數(shù)據(jù)打架、口徑混亂、粗細(xì)不匹配等問題,為宏觀經(jīng)濟(jì)決策分析提供強(qiáng)有力的數(shù)據(jù)支撐,保障宏觀決策管理的協(xié)同性和精準(zhǔn)性。
(5)有力推動湖北政府大數(shù)據(jù)價(jià)值挖掘和大數(shù)據(jù)相關(guān)產(chǎn)業(yè)的發(fā)展。大數(shù)據(jù)倉庫項(xiàng)目是湖北省開展大數(shù)據(jù)技術(shù)研究和宏觀經(jīng)濟(jì)領(lǐng)域大數(shù)據(jù)應(yīng)用創(chuàng)新的重要實(shí)踐。項(xiàng)目規(guī)劃采用業(yè)界主流的大數(shù)據(jù)技術(shù)和大數(shù)據(jù)思維,力求從多維度挖掘宏觀經(jīng)濟(jì)數(shù)據(jù)價(jià)值,支撐政府宏觀經(jīng)濟(jì)決策、輔助政務(wù)管理,促進(jìn)全省大數(shù)據(jù)等相關(guān)產(chǎn)業(yè)發(fā)展,促進(jìn)區(qū)域經(jīng)濟(jì)發(fā)展與轉(zhuǎn)型升級。
3 ? ? 資源管理與價(jià)值挖掘的長效機(jī)制構(gòu)建
構(gòu)建政府大數(shù)據(jù)資源管理及價(jià)值挖掘的長效機(jī)制,需要從硬環(huán)境和軟環(huán)境兩方面著手,有針對性地破解存在的困境。運(yùn)用互聯(lián)網(wǎng)思維,推動“養(yǎng)數(shù)據(jù)”與“用數(shù)據(jù)”的社會化參與及融合共享,打造數(shù)據(jù)匯聚與分析應(yīng)用相互促進(jìn)的軟環(huán)境。
3.1 ? 網(wǎng)絡(luò)化融合的數(shù)據(jù)倉庫運(yùn)維
政府大數(shù)據(jù)倉庫的運(yùn)維首先要制訂好資源管理與“養(yǎng)數(shù)據(jù)”規(guī)劃,有效提高數(shù)據(jù)倉庫的信息容量,加強(qiáng)數(shù)據(jù)倉庫的統(tǒng)一、安全與標(biāo)準(zhǔn)化管理。一是數(shù)據(jù)匯聚。通過搭建數(shù)據(jù)倉庫、共享平臺,推動網(wǎng)絡(luò)化信息資源共享,加速政府?dāng)?shù)據(jù)、網(wǎng)絡(luò)數(shù)據(jù)和社會數(shù)據(jù)的匯聚融合,實(shí)現(xiàn)更大范圍、多種來源的數(shù)據(jù)信息匯聚,保持?jǐn)?shù)據(jù)來源的廣泛性。二是數(shù)據(jù)存儲與管理。采用標(biāo)準(zhǔn)、統(tǒng)一、安全、規(guī)范化管理,結(jié)合統(tǒng)一規(guī)劃逐步破解各主體信息數(shù)據(jù)倉庫的條塊與壁壘等問題,推動各種數(shù)據(jù)的高效匯聚與融合。三是數(shù)據(jù)庫設(shè)計(jì)的開放性與可擴(kuò)展性。支持社會各類用戶按照統(tǒng)一格式標(biāo)準(zhǔn),快捷上傳、存儲合規(guī)的數(shù)據(jù),擴(kuò)展數(shù)據(jù)信息的深度與廣度。
湖北宏觀經(jīng)濟(jì)大數(shù)據(jù)倉庫項(xiàng)目在可研階段詳細(xì)規(guī)劃了政府?dāng)?shù)據(jù)、網(wǎng)絡(luò)數(shù)據(jù)與社會數(shù)據(jù)的網(wǎng)絡(luò)化融合問題。從規(guī)劃的數(shù)據(jù)匯聚內(nèi)容來說,政府?dāng)?shù)據(jù)主要包括國家數(shù)據(jù)、省內(nèi)數(shù)據(jù)、相關(guān)省市數(shù)據(jù)三類,項(xiàng)目前期匯聚的政府?dāng)?shù)據(jù)主要來源于相關(guān)橫向數(shù)據(jù)服務(wù)平臺或系統(tǒng);網(wǎng)絡(luò)數(shù)據(jù)主要包括國內(nèi)、外主要經(jīng)濟(jì)網(wǎng)站數(shù)據(jù),包括移動互聯(lián)信息、搜索數(shù)據(jù)、社交數(shù)據(jù)、電商數(shù)據(jù)、就業(yè)數(shù)據(jù)等內(nèi)容,主要以網(wǎng)絡(luò)爬蟲方式獲取;社會數(shù)據(jù)主要包括企業(yè)、社會機(jī)構(gòu)等各類主體的綜合性統(tǒng)計(jì)數(shù)據(jù)、重點(diǎn)企業(yè)數(shù)據(jù)、專業(yè)公司數(shù)據(jù),主要通過無償獲得、共享交換或數(shù)據(jù)交易的方式獲取。通過數(shù)據(jù)資源融合保證數(shù)據(jù)倉庫的多樣性、豐富化,從而顯著提高決策分析的準(zhǔn)確性,同時(shí)也通過數(shù)據(jù)信息社會化共享融合,推動分析應(yīng)用的快速發(fā)展。
3.2 ? 多元化參與的數(shù)據(jù)平臺應(yīng)用
政府大數(shù)據(jù)倉庫的運(yùn)維要做好“用數(shù)據(jù)”的整體規(guī)劃,結(jié)合實(shí)際拓展研究應(yīng)用場景,按照需求導(dǎo)向開發(fā)簡單易用的自助式、可視化分析工具;通過向更多的用戶提供數(shù)據(jù)分析服務(wù),鼓勵社會各界用戶積極參與數(shù)據(jù)價(jià)值挖掘,以“用”促“養(yǎng)”持續(xù)優(yōu)化數(shù)據(jù)運(yùn)維,提升大數(shù)據(jù)倉庫的服務(wù)能力,形成政府大數(shù)據(jù)價(jià)值挖掘的共享協(xié)作機(jī)制。美國政府在數(shù)據(jù)開放方面一直走在全球前列,是面向公眾的數(shù)據(jù)網(wǎng)站開放API數(shù)據(jù)接口,通過舉辦開發(fā)大賽,鼓勵社會用戶自行開發(fā)APP等各類數(shù)據(jù)應(yīng)用,積極參與數(shù)據(jù)應(yīng)用創(chuàng)新。湖北宏觀經(jīng)濟(jì)大數(shù)據(jù)倉庫項(xiàng)目重視借鑒國內(nèi)外的先進(jìn)經(jīng)驗(yàn),建立了數(shù)據(jù)計(jì)算、分析技術(shù)與應(yīng)用需求動態(tài)相適應(yīng)的開發(fā)管理機(jī)制,通過開發(fā)配置的服務(wù)接口與應(yīng)用組件,為各種分析應(yīng)用提供支撐。項(xiàng)目將分期推出多類應(yīng)用主題,通過應(yīng)用主題開發(fā),引導(dǎo)政府相關(guān)部門、各類社會主體積極參與“用數(shù)據(jù)”,帶動全社會的大數(shù)據(jù)應(yīng)用與價(jià)值挖掘。
4 ? ? 結(jié) 語
隨著互聯(lián)網(wǎng)、大數(shù)據(jù)等信息技術(shù)的快速發(fā)展,政府大數(shù)據(jù)已經(jīng)是政府提高執(zhí)政能力、服務(wù)能力、創(chuàng)新發(fā)展能力的重要手段。針對政府大數(shù)據(jù)應(yīng)用在數(shù)據(jù)資源管理、數(shù)據(jù)處理與分析、系統(tǒng)運(yùn)營與價(jià)值挖掘等方面的局限性,政府等相關(guān)部門應(yīng)做好政府大數(shù)據(jù)項(xiàng)目硬環(huán)境與軟環(huán)境建設(shè)與運(yùn)維。湖北宏觀經(jīng)濟(jì)大數(shù)據(jù)倉庫項(xiàng)目以政府部門和社會各界用戶的需求為導(dǎo)向,鼓勵多方參與和社會化互動,推動用數(shù)據(jù)與養(yǎng)數(shù)據(jù)的相互促進(jìn),有針對性地破解政府大數(shù)據(jù)應(yīng)用的困境,一些實(shí)踐經(jīng)驗(yàn)具有較好的指導(dǎo)和借鑒意義。展望未來,政府大數(shù)據(jù)倉庫可通過跨平臺的信息資源共享推動多種專業(yè)分析應(yīng)用的數(shù)據(jù)聯(lián)動與挖掘分析,為政務(wù)管理、決策分析、專題研究等工作提供支撐。為社會各界授權(quán)用戶提供數(shù)據(jù)服務(wù),支持相關(guān)行業(yè)、產(chǎn)業(yè)經(jīng)營,促進(jìn)區(qū)域經(jīng)濟(jì)脫虛向?qū)?、健康發(fā)展。
主要參考文獻(xiàn)
[1]金江軍,徐靖,王偉玲.政府大數(shù)據(jù)發(fā)展對策研究[J].中國信息界,2013(9).
[2]楚海龍.地方政府視角下數(shù)據(jù)開放的困境與發(fā)展對策研究[J].安徽文學(xué),2017(8).
[3]李宇.“互聯(lián)網(wǎng)+政務(wù)”解決社會治理問題——貴州省政府大數(shù)據(jù)應(yīng)用經(jīng)驗(yàn)的啟示[J].中國黨政干部論壇,2015(6).
[4]陸健英,鄭磊,Sharon S Dawes.美國的政府?dāng)?shù)據(jù)開放:歷史、進(jìn)展與啟示[J].電子政務(wù),2013(6).
[5]王芳,陳鋒.國家治理進(jìn)程中的政府大數(shù)據(jù)開放利用研究[J].中國行政管理,2015(11).
[6]丁輝俠,地方政府大數(shù)據(jù)治理:行動、挑戰(zhàn)與應(yīng)對[J].鄭州大學(xué)學(xué)報(bào):哲學(xué)社會科學(xué)版,2018(1).
[7]陳濤,李明陽.數(shù)據(jù)開放平臺建設(shè)策略研究——以武漢市政府?dāng)?shù)據(jù)開放平臺建設(shè)為例[J].電子政務(wù),2015(7).
[8]關(guān)浩宇.大數(shù)據(jù)背景下提升地方政府治理績效的對策研究——以廣東省佛山地區(qū)為例[J].當(dāng)代經(jīng)濟(jì),2016(34).
[9]王萌萌.地方政府治理中的大數(shù)據(jù)技術(shù)運(yùn)用研究[D].重慶:中共重慶市委黨校,2017.
[10]田晨.大數(shù)據(jù)背景下循證決策的應(yīng)用研究[D].長沙:湖南大學(xué),2016.
[11]張愛舒.大數(shù)據(jù)環(huán)境下我國政府?dāng)?shù)據(jù)開放平臺建設(shè)策略研究[D].湘潭:湘潭大學(xué),2017.
[12]劉媛媛.大數(shù)據(jù)背景下我國政府治理創(chuàng)新機(jī)遇、挑戰(zhàn)與對策研究[D].徐州:中國礦業(yè)大學(xué),2016.
[13]季希.大數(shù)據(jù)時(shí)代服務(wù)型政府建設(shè)問題研究[D].哈爾濱:哈爾濱商業(yè)大學(xué),2016.
[14]傅倩.政府大數(shù)據(jù)平臺的建設(shè)策略研究[D].南昌:南昌大學(xué),2014.
[15]王博.大數(shù)據(jù)時(shí)代網(wǎng)絡(luò)輿情與社會治理研究[D].昆明:云南財(cái)經(jīng)大學(xué),2016.
[16]楊靖雯.大數(shù)據(jù)戰(zhàn)略下邊疆政府治理的技術(shù)變革研究[D].昆明:云南師范大學(xué),2017.
[17]李威廉.大數(shù)據(jù)平臺在社會治理中的應(yīng)用問題研究[D].保定:河北大學(xué) ,2019.
[18]王林川.開放政府?dāng)?shù)據(jù)平臺績效評估指標(biāo)體系研究[D].合肥:合肥工業(yè)大學(xué),2018.