吳文遠(yuǎn)
摘要:本文分析了大數(shù)據(jù)的概念和大數(shù)據(jù)時(shí)代的特征,對(duì)大數(shù)據(jù)時(shí)代的數(shù)據(jù)分析理念進(jìn)行了探討。筆者認(rèn)為大數(shù)據(jù)時(shí)代數(shù)據(jù)分析需要結(jié)合統(tǒng)計(jì)學(xué)思想,創(chuàng)新數(shù)據(jù)分析理念,完善數(shù)據(jù)分析程序和方法,使其發(fā)揮出超越傳統(tǒng)統(tǒng)計(jì)分析不可比擬的優(yōu)勢(shì)。
關(guān)鍵詞:大數(shù)據(jù);數(shù)據(jù)分析;理念
互聯(lián)網(wǎng)信息技術(shù)已經(jīng)發(fā)展得相對(duì)成熟,并已經(jīng)漸漸深入到社會(huì)生活的各個(gè)領(lǐng)域之中,新時(shí)期人們已經(jīng)感受到數(shù)據(jù)信息的重要性和在生活之中的重要意義,可以說(shuō)社會(huì)生活的方方面面都離不開(kāi)信息技術(shù)的支持和支撐。與此同時(shí),數(shù)據(jù)分析方法和數(shù)據(jù)運(yùn)行方法都在不斷地更新和提升的過(guò)程中,大量數(shù)據(jù)已經(jīng)具備了較為先進(jìn)和即時(shí)的處理方式。事實(shí)上,當(dāng)前階段對(duì)海量數(shù)據(jù)中蘊(yùn)含的知識(shí)實(shí)現(xiàn)深入分析已經(jīng)是比較現(xiàn)實(shí)的事情。大數(shù)據(jù)時(shí)代一方面影響著熱門(mén)的日常生活,另一方面則對(duì)自然科學(xué)和人文科學(xué)的創(chuàng)新與發(fā)展具有很強(qiáng)的推動(dòng)作用。大數(shù)據(jù)分析在今后的社會(huì)發(fā)展中只會(huì)應(yīng)用越來(lái)越廣泛,數(shù)據(jù)分析技術(shù)也會(huì)日益完善和改進(jìn)。本文從大數(shù)據(jù)時(shí)代數(shù)據(jù)分析理念進(jìn)行闡述,為數(shù)據(jù)分析穩(wěn)定發(fā)展帶來(lái)更為廣闊的機(jī)會(huì)。
一、大數(shù)據(jù)和大數(shù)據(jù)時(shí)代的基本概述
(一)大數(shù)據(jù)的概述
大數(shù)據(jù)概念成型于上世紀(jì)八十年代,最早是由美國(guó)學(xué)者提出的。現(xiàn)今大數(shù)據(jù)的概念可以總結(jié)為:在信息技術(shù)和社會(huì)發(fā)展進(jìn)程影響,數(shù)據(jù)信息量異常龐大的現(xiàn)狀,還囊括超越傳統(tǒng)數(shù)據(jù)處理方法的、能夠?qū)A啃畔?shù)據(jù)有效處理的一種信息處理技術(shù)。信息化環(huán)境給大數(shù)據(jù)技術(shù)的應(yīng)用提供了更為廣闊的平臺(tái),這種廣闊性體現(xiàn)在其影響著社會(huì)生活的方方面面,在社會(huì)生產(chǎn)活動(dòng)中產(chǎn)生至關(guān)重要的影響。大數(shù)據(jù)的本質(zhì)不在于海量的數(shù)據(jù)信息資源,而在于對(duì)這些數(shù)據(jù)信息價(jià)值的哇局和處理,也就是說(shuō)大數(shù)據(jù)最重要的意義在于推動(dòng)相關(guān)產(chǎn)業(yè)的發(fā)展和進(jìn)步。大數(shù)據(jù)的特征可以概括如下:第一,數(shù)據(jù)信息量極其龐大,并且具有越來(lái)越龐大的趨勢(shì),數(shù)據(jù)非結(jié)構(gòu)化特性明顯,并且已經(jīng)在大數(shù)據(jù)之中占據(jù)八成規(guī)模;第二,數(shù)據(jù)信息的形式和種類(lèi)呈現(xiàn)出多樣化趨勢(shì);第三,數(shù)據(jù)信息具有較高的價(jià)值密度和較大的商業(yè)價(jià)值;第四,信息處理速度非???。
(二)大數(shù)據(jù)時(shí)代的概述
大數(shù)據(jù)時(shí)代建立在大量數(shù)據(jù)信息的基礎(chǔ)上,是一種新型信息時(shí)代,大數(shù)據(jù)建立在物聯(lián)網(wǎng)技術(shù)、互聯(lián)網(wǎng)技術(shù)和預(yù)期相關(guān)的信息技術(shù)的基礎(chǔ)之上,最終形成處理分析大量數(shù)據(jù)、提升數(shù)據(jù)價(jià)值的綜合處理系統(tǒng)。大數(shù)據(jù)時(shí)代最根本的目的提升數(shù)據(jù)分析效率和數(shù)據(jù)應(yīng)用價(jià)值,從而促進(jìn)眾多領(lǐng)域和行業(yè)的變革,使得各個(gè)產(chǎn)業(yè)都獲得新的發(fā)展機(jī)遇,使得人們未來(lái)生活都發(fā)生天翻地覆的變革。
二、大數(shù)據(jù)時(shí)代下數(shù)據(jù)分析理念辨析
(一)與統(tǒng)計(jì)學(xué)理論相結(jié)合
如果僅僅依靠傳統(tǒng)的統(tǒng)計(jì)抽樣技術(shù)對(duì)大數(shù)據(jù)進(jìn)行處理和分析,那么其知識(shí)密度將無(wú)法展示,數(shù)據(jù)分析也無(wú)法獲得準(zhǔn)確的結(jié)果。筆者認(rèn)為大數(shù)據(jù)分析要和統(tǒng)計(jì)學(xué)理論、統(tǒng)計(jì)學(xué)思維方式結(jié)合在一起,同時(shí)打破傳統(tǒng)統(tǒng)計(jì)分析對(duì)樣本的依賴(lài),使得統(tǒng)計(jì)學(xué)工具能夠?qū)λ械臄?shù)據(jù)進(jìn)行統(tǒng)計(jì)分析,使得研究數(shù)據(jù)能夠發(fā)揮出更高的研究?jī)r(jià)值和應(yīng)用價(jià)值。大數(shù)據(jù)能夠?qū)ΨN類(lèi)多樣的、形式混亂的數(shù)據(jù)進(jìn)行分析,對(duì)數(shù)據(jù)形式的準(zhǔn)確性要求較低,其可以利用統(tǒng)計(jì)學(xué)分析工具對(duì)數(shù)據(jù)變化的情況進(jìn)行分析,使得相關(guān)的決策具有更高的參考價(jià)值。大數(shù)據(jù)對(duì)數(shù)據(jù)精度的要求也不高,其秉承的理念和原則是:具有誤差的數(shù)據(jù)更具有規(guī)律發(fā)現(xiàn)價(jià)值,便于對(duì)分析整體進(jìn)行了解,能夠讓較為復(fù)雜的數(shù)據(jù)體現(xiàn)出更加真實(shí)的狀況。
(二)數(shù)據(jù)分析理念的應(yīng)用
大數(shù)據(jù)時(shí)代下的數(shù)據(jù)分析是對(duì)大量數(shù)據(jù)進(jìn)行歸類(lèi)、統(tǒng)計(jì)和歸納、總結(jié)的過(guò)程,它可以將具有價(jià)值的信息提煉出來(lái),數(shù)據(jù)分析提供了將處理后的數(shù)據(jù)和未經(jīng)處理的數(shù)據(jù)進(jìn)行比較的機(jī)會(huì)。大數(shù)據(jù)是運(yùn)用統(tǒng)計(jì)學(xué)思維進(jìn)行統(tǒng)計(jì)分析,這和傳統(tǒng)抽樣分析挖掘出的信息和價(jià)值有著本質(zhì)的區(qū)別。所以大數(shù)據(jù)在繼承統(tǒng)計(jì)學(xué)思維的基礎(chǔ)上摒棄了傳統(tǒng)統(tǒng)計(jì)分析的逼單,其數(shù)據(jù)收集和處理的方式可以通過(guò)更為廣泛的渠道開(kāi)展。對(duì)于大部分大數(shù)據(jù)來(lái)說(shuō),數(shù)據(jù)分析是其蘊(yùn)含的有效價(jià)值得以體現(xiàn)的重要環(huán)節(jié)。所以數(shù)據(jù)的積累和數(shù)據(jù)處理過(guò)程的細(xì)化是至關(guān)重要的。大數(shù)據(jù)下的數(shù)據(jù)具有較高的流動(dòng)性,在時(shí)間的推移下積累的數(shù)據(jù)將會(huì)越來(lái)越多,數(shù)據(jù)的精簡(jiǎn)和再生也具有重要的意義,這樣有價(jià)值的數(shù)據(jù)能夠得到增值,具有高度關(guān)聯(lián)的數(shù)據(jù)結(jié)合在一起,便于發(fā)現(xiàn)問(wèn)題和解決問(wèn)題。
(三)數(shù)據(jù)分析程序的完善和改進(jìn)
新的時(shí)期對(duì)大數(shù)據(jù)的應(yīng)用程度提出了更高的要求,傳統(tǒng)數(shù)據(jù)處理通過(guò)數(shù)據(jù)分析去解釋現(xiàn)象、預(yù)測(cè)發(fā)展趨勢(shì),大數(shù)據(jù)的實(shí)際分析之中則通過(guò)變革統(tǒng)計(jì)思想和統(tǒng)計(jì)研究方法進(jìn)行數(shù)據(jù)關(guān)系描述,力求通過(guò)多種方式進(jìn)行數(shù)據(jù)分析,在大數(shù)據(jù)分析的過(guò)程中要根據(jù)數(shù)據(jù)實(shí)際情況進(jìn)行數(shù)據(jù)處理,確保數(shù)據(jù)分析結(jié)果較高的精確度。大數(shù)據(jù)對(duì)傳統(tǒng)統(tǒng)計(jì)質(zhì)量管理環(huán)節(jié)進(jìn)行轉(zhuǎn)變,通過(guò)創(chuàng)建簡(jiǎn)單的數(shù)據(jù)分析模型來(lái)在數(shù)據(jù)分析中發(fā)揮更大的作用。大數(shù)據(jù)時(shí)代帶來(lái)的數(shù)據(jù)量越來(lái)越大,其中潛藏的價(jià)值也會(huì)越來(lái)越大。鑒于大數(shù)據(jù)和各行各業(yè)的融合愈加深入,改善數(shù)據(jù)分析程序具有至關(guān)重要的意義,同時(shí)對(duì)數(shù)據(jù)處理能力提出了更高的要求。
三、結(jié)語(yǔ)
大數(shù)據(jù)的廣泛應(yīng)用已經(jīng)勢(shì)在必行,在海量數(shù)據(jù)中擁有的信息量決定了對(duì)社會(huì)各行各業(yè)預(yù)測(cè)的準(zhǔn)確性。目前我們面臨著這樣的一種形勢(shì):大數(shù)據(jù)處理過(guò)程會(huì)隨著數(shù)據(jù)的積累而不斷增加難度,數(shù)據(jù)的不斷積累也會(huì)影響數(shù)據(jù)的處理效率。信息化時(shí)代下,數(shù)據(jù)處理技術(shù)將會(huì)不斷更新和發(fā)展,統(tǒng)計(jì)工具也會(huì)不斷改進(jìn)越升級(jí),人們處理大數(shù)據(jù)的能力將會(huì)更加完善,挖掘出的數(shù)據(jù)信息將會(huì)更加具有實(shí)用價(jià)值,大數(shù)據(jù)在提升決策準(zhǔn)確性上具有更大的支持力量。
總而言之,大數(shù)據(jù)集合了非結(jié)構(gòu)化的海量數(shù)據(jù),數(shù)據(jù)知識(shí)量激增,數(shù)據(jù)管理工作難度大幅度提升,大數(shù)據(jù)時(shí)代下數(shù)據(jù)庫(kù)技術(shù)在不斷優(yōu)化、知識(shí)挖掘能力不斷提升,人們?cè)谕诰虼髷?shù)據(jù)內(nèi)部信息的過(guò)程中積累了更加優(yōu)秀的能力,使得決策具有更高的科學(xué)性和合理性。
參考文獻(xiàn):
[1]王惠.大數(shù)據(jù)時(shí)代下數(shù)據(jù)分析理念研究[J].中國(guó)市場(chǎng),2015,22:74-85.
[2]陳俊茹.大數(shù)據(jù)時(shí)代下通信技術(shù)與數(shù)據(jù)分析理念的辨析[J].通訊世界,2015,19:16.
[3]張海健.大數(shù)據(jù)時(shí)代下數(shù)據(jù)分析理念探究[J].文理導(dǎo)航(中旬),2016,08:74.