張翼
大數(shù)據(jù)與云計(jì)算在廣電行業(yè)中的應(yīng)用
張翼
(國家廣播電視總局二九三臺(tái),河南 鄭州 450000)
2007年,中國提出了云計(jì)算概念并開始發(fā)展。云計(jì)算技術(shù)問世后受到了各個(gè)行業(yè)的廣泛關(guān)注,改變了行業(yè)發(fā)展趨勢(shì)。為了加快廣電行業(yè)的發(fā)展速度,如何高效使用云計(jì)算和大數(shù)據(jù)技術(shù)成為迫在眉睫的問題。分別敘述了云計(jì)算和大數(shù)據(jù)技術(shù)的技術(shù)原理、技術(shù)體系,探究了云計(jì)算和大數(shù)據(jù)技術(shù)應(yīng)用于廣電行業(yè)的策略。
云計(jì)算;大數(shù)據(jù)技術(shù);廣電行業(yè);應(yīng)用策略
2007年,中國首次出現(xiàn)云計(jì)算概念。云計(jì)算技術(shù)一經(jīng)問世,迅速引起了各個(gè)行業(yè)的重點(diǎn)關(guān)注。為了加快廣電行業(yè)的發(fā)展速度,如何發(fā)展云計(jì)算、如何應(yīng)用云計(jì)算,成為廣大業(yè)內(nèi)專家重點(diǎn)關(guān)注的問題。國內(nèi)云計(jì)算公司基于云計(jì)算技術(shù)相繼提出了媒體云、云存儲(chǔ)、云轉(zhuǎn)碼等云計(jì)算項(xiàng)目,但實(shí)際應(yīng)用的云計(jì)算項(xiàng)目數(shù)量嚴(yán)重不足。中國云計(jì)算項(xiàng)目沒有形成規(guī)模,也沒有形成行業(yè)生態(tài)鏈。發(fā)展云計(jì)算技術(shù),有利于廣電行業(yè)進(jìn)一步發(fā)展。云計(jì)算和大數(shù)據(jù)技術(shù)如何應(yīng)用于廣電行業(yè)成為業(yè)內(nèi)專家急需解決的問題。
《華爾街日?qǐng)?bào)》報(bào)道,大數(shù)據(jù)、智能化生產(chǎn)、無線網(wǎng)絡(luò)革命是三大技術(shù)變革,是未來繁榮的引領(lǐng)者。麥肯錫公司認(rèn)為,大數(shù)據(jù)是決定企業(yè)創(chuàng)新力、競(jìng)爭(zhēng)力、生產(chǎn)力的重要技術(shù),是任何企業(yè)都不可或缺的生產(chǎn)資料。世界經(jīng)濟(jì)論壇提出,大數(shù)據(jù)是一種新型財(cái)富,其價(jià)值可以和石油媲美。目前,大數(shù)據(jù)技術(shù)已經(jīng)廣泛應(yīng)用于經(jīng)濟(jì)發(fā)展預(yù)測(cè)等方向。例如,谷歌住房搜索可以使用大數(shù)據(jù)預(yù)測(cè)住房市場(chǎng)發(fā)展趨勢(shì),預(yù)測(cè)結(jié)果的準(zhǔn)確性高于不動(dòng)產(chǎn)經(jīng)濟(jì)學(xué)家的預(yù)測(cè)結(jié)果。數(shù)據(jù)精確性的內(nèi)容是數(shù)據(jù)可信度高、真?zhèn)涡砸妆孀R(shí)、數(shù)據(jù)來源可靠、數(shù)據(jù)源信譽(yù)高、數(shù)據(jù)內(nèi)容有效、數(shù)據(jù)可審計(jì)。大數(shù)據(jù)的內(nèi)容包含了現(xiàn)實(shí)世界的各種信息,研究大數(shù)據(jù)的本質(zhì)是收集網(wǎng)絡(luò)數(shù)據(jù)、提取數(shù)據(jù)內(nèi)容、預(yù)測(cè)現(xiàn)實(shí)時(shí)間。數(shù)據(jù)的完整性、真實(shí)性,決定了決策的科學(xué)性和準(zhǔn)確性。數(shù)據(jù)是決策的基礎(chǔ),是決策的依據(jù)。從數(shù)據(jù)源的角度來說,大部分?jǐn)?shù)據(jù)的來源是個(gè)體思想和實(shí)時(shí)記錄,代表了個(gè)體的真實(shí)意識(shí)。大數(shù)據(jù)的真實(shí)性遠(yuǎn)高于傳統(tǒng)數(shù)據(jù)。龐大的數(shù)據(jù)總量淹沒了少量的失真數(shù)據(jù)。從數(shù)據(jù)量的角度來說,大數(shù)據(jù)記錄了現(xiàn)實(shí)現(xiàn)象的全部信息,傳統(tǒng)數(shù)據(jù)僅記錄現(xiàn)實(shí)現(xiàn)象的部分信息。大數(shù)據(jù)技術(shù)成為發(fā)達(dá)國家搶占技術(shù)高地,增強(qiáng)國家競(jìng)爭(zhēng)力的重要手段。數(shù)據(jù)化取代數(shù)字化,成為未來行業(yè)的發(fā)展潮流。
云計(jì)算技術(shù)誕生于第三次技術(shù)革命,大數(shù)據(jù)為信息時(shí)代帶來了新的經(jīng)濟(jì)增長點(diǎn)。在信息時(shí)代,掌握大數(shù)據(jù)和云計(jì)算技術(shù),等于掌握了行業(yè)發(fā)展的金鑰匙。為了進(jìn)一步發(fā)展,廣電行業(yè)必須緊跟時(shí)代潮流,大力發(fā)展信息技術(shù),實(shí)現(xiàn)新技術(shù)運(yùn)用和新技術(shù)創(chuàng)新。
虛擬化技術(shù)、海量數(shù)據(jù)存儲(chǔ)技術(shù)、并行編程框架技術(shù),共同組成了云計(jì)算技術(shù)。虛擬化技術(shù)主要應(yīng)用于計(jì)算機(jī)資源調(diào)配,可以構(gòu)建動(dòng)態(tài)化框架,集中管理、調(diào)控信息資源,提高資源利用率,消除物理硬件對(duì)信息資源的影響。增強(qiáng)系統(tǒng)彈性、降低成本、改進(jìn)服務(wù)、提高資源利用率,是云計(jì)算技術(shù)的重要作用。服務(wù)器虛擬化、服務(wù)器整合,是云計(jì)算技術(shù)的兩種類型。服務(wù)器虛擬化是將一個(gè)大型服務(wù)器分割為多個(gè)小型獨(dú)立服務(wù)器,分別服務(wù)不同的用戶。服務(wù)器整合是將多個(gè)小型服務(wù)器整合為一個(gè)大型服務(wù)器,提高服務(wù)器性能,解決小型服務(wù)器無法解決的問題。這兩種技術(shù)都實(shí)現(xiàn)了服務(wù)器管理的統(tǒng)一化和資源配置最優(yōu)化,對(duì)廣電行業(yè)意義重大。
海量數(shù)據(jù)存儲(chǔ)技術(shù)是使用可開展的存儲(chǔ)結(jié)構(gòu),以數(shù)據(jù)庫和分布式文件的形式存儲(chǔ)大量數(shù)據(jù)信息。這種存儲(chǔ)技術(shù)使用多臺(tái)儲(chǔ)存器,降低每臺(tái)儲(chǔ)存器的負(fù)載,提高系統(tǒng)性能和存儲(chǔ)效率。海量數(shù)據(jù)存儲(chǔ)技術(shù)對(duì)廣電行業(yè)的意義是,優(yōu)化廣電網(wǎng)絡(luò)數(shù)據(jù)擴(kuò)展。
并行編程框架技術(shù)的研究目標(biāo)是提高資源利用率,降低用戶使用難度,增強(qiáng)編程框架的便捷性。使用并行編程框架搭建的服務(wù)器可以處理更復(fù)雜的編程任務(wù),并將過程透明化,便于用戶使用和優(yōu)化。系統(tǒng)可以自動(dòng)分配處理任務(wù),將大型任務(wù)分解成多個(gè)小型任務(wù),提高處理效率,縮短處理時(shí)間,降低處理難度。
大數(shù)據(jù)技術(shù)是一種信息獲取、信息輸出、信息組合技術(shù),可以實(shí)現(xiàn)數(shù)據(jù)高效組合和高效輸出。大數(shù)據(jù)發(fā)展迅速的原因是,大數(shù)據(jù)技術(shù)升級(jí)了數(shù)據(jù)集的規(guī)格,由TB升級(jí)至PB級(jí),數(shù)據(jù)容量更大。大數(shù)據(jù)技術(shù)擴(kuò)充了數(shù)據(jù)類別和數(shù)據(jù)來源,豐富了數(shù)據(jù)的種類和格式。日志、圖片、音頻、視頻都是大數(shù)據(jù)常見的數(shù)據(jù)格式。大數(shù)據(jù)技術(shù)收集了海量數(shù)據(jù),這些數(shù)據(jù)質(zhì)量參差不齊,導(dǎo)致大數(shù)據(jù)的價(jià)值密度較低。機(jī)器必須植入相關(guān)技術(shù),才能實(shí)現(xiàn)復(fù)雜數(shù)據(jù)處理、數(shù)據(jù)分析、數(shù)據(jù)預(yù)測(cè)等功能。
大數(shù)據(jù)是數(shù)量體量大于1 TB的數(shù)據(jù)。大數(shù)據(jù)又稱海量數(shù)據(jù)或巨量數(shù)據(jù)。國際學(xué)術(shù)界對(duì)大數(shù)據(jù)體量、小數(shù)據(jù)體量的定義存在爭(zhēng)議,沒有產(chǎn)生統(tǒng)一且規(guī)范的大數(shù)據(jù)定義。從數(shù)據(jù)容量的角度來說,2011年,麥肯錫全球研究所在《大數(shù)據(jù):創(chuàng)新、競(jìng)爭(zhēng)力和生產(chǎn)力的下一個(gè)前沿》中提到,大數(shù)據(jù)是一種數(shù)據(jù)群,其數(shù)據(jù)規(guī)模超出了傳統(tǒng)數(shù)據(jù)庫軟件工具的抓取、存儲(chǔ)、管理、分析等數(shù)據(jù)處理能力的范圍。維基百科對(duì)大數(shù)據(jù)的定義是,由科學(xué)儀器、傳感設(shè)備、互聯(lián)網(wǎng)交易、電子郵件、音頻視頻軟件、網(wǎng)絡(luò)點(diǎn)擊流等多種數(shù)據(jù)源生成的大體量數(shù)據(jù)。大規(guī)模、多元化、高復(fù)雜度、分布式是大數(shù)據(jù)的主要特點(diǎn)。國際數(shù)據(jù)公司對(duì)大數(shù)據(jù)的定義是,數(shù)據(jù)規(guī)模海量、數(shù)據(jù)流轉(zhuǎn)快速、數(shù)據(jù)體系不固定、數(shù)據(jù)類型多樣、數(shù)據(jù)價(jià)值巨大的數(shù)據(jù)。從數(shù)據(jù)內(nèi)容的角度來說,全球數(shù)據(jù)集成軟件提供商Information提出,大數(shù)據(jù)是大交易數(shù)據(jù)、大交互數(shù)據(jù)、大數(shù)據(jù)處理的總稱。網(wǎng)絡(luò)存儲(chǔ)公司NepAPP提出,大數(shù)據(jù)是由分析、寬帶、內(nèi)容三種要素組成的數(shù)據(jù)類型。從數(shù)據(jù)價(jià)值的角度來說,Gartner Group認(rèn)為,大數(shù)據(jù)是一種具有巨大信息價(jià)值的數(shù)據(jù)類型。大數(shù)據(jù)的處理方式顯著增強(qiáng)了市場(chǎng)的決策力、洞察力。中國學(xué)者鄔賀銓認(rèn)為,大數(shù)據(jù)是一種數(shù)據(jù)集,包含了事物發(fā)展的客觀規(guī)律。從數(shù)據(jù)技術(shù)的角度來說,大數(shù)據(jù)技術(shù)是大數(shù)據(jù)的核心。大數(shù)據(jù)是數(shù)據(jù)采集、數(shù)據(jù)分析、數(shù)據(jù)整合、數(shù)據(jù)控制、數(shù)據(jù)產(chǎn)業(yè)的總稱。
數(shù)據(jù)是信息的載體。信息傳遞伴隨著人類文明發(fā)展??萍歼M(jìn)步改變了信息的承載方式。信息的載體由原始的獸骨、竹片轉(zhuǎn)變?yōu)楝F(xiàn)代的碟片、U盤和云存儲(chǔ)。數(shù)據(jù)的承載方式取決于信息的載體。數(shù)據(jù)、信息、知識(shí)、智慧是四種不同的概念。數(shù)據(jù)是信息的載體,信息是數(shù)據(jù)的表現(xiàn)形式,知識(shí)是人類智力活動(dòng)的產(chǎn)物,智慧是人類用于預(yù)測(cè)未來的知識(shí)儲(chǔ)備。數(shù)據(jù)分析和技術(shù)挖掘是人類獲取知識(shí)、產(chǎn)生智慧的前提條件。數(shù)據(jù)是信息的來源,是知識(shí)的雛形,是智慧的基礎(chǔ)。智慧化是信息化的未來發(fā)展方向。大數(shù)據(jù)具有海量的數(shù)據(jù)價(jià)值。挖掘數(shù)據(jù)、分析數(shù)據(jù),是人類發(fā)展信息化和智慧化的重要途徑。大數(shù)據(jù)已經(jīng)成為現(xiàn)代信息技術(shù)的核心,是云計(jì)算、物聯(lián)網(wǎng)、移動(dòng)物聯(lián)網(wǎng)等信息技術(shù)的發(fā)展基礎(chǔ)。人類社會(huì)管理共經(jīng)歷了三個(gè)階段,包括初期階段、半成熟階段和成熟階段,不同的發(fā)展階段對(duì)應(yīng)不同的資源消耗和智慧獲取。初期階段,人類必須花費(fèi)大量的資源獲取少量的智慧成果;半成熟階段,人類逐漸平衡了資源消耗和智慧獲取的比例;成熟階段,人類可以花費(fèi)少量資源獲取大量智慧成果。大數(shù)據(jù)是人類社會(huì)管理成熟期的產(chǎn)物,是人類步入智慧管理階段的標(biāo)志。
進(jìn)入信息時(shí)代后,社會(huì)發(fā)展速度顯著加快,大數(shù)據(jù)技術(shù)日益成熟,并廣泛應(yīng)用于各個(gè)領(lǐng)域。信息時(shí)代為廣電行業(yè)帶來了新的發(fā)展機(jī)遇和挑戰(zhàn)。廣電行業(yè)可以利用大數(shù)據(jù)技術(shù)迅速完成產(chǎn)業(yè)轉(zhuǎn)型,由傳統(tǒng)網(wǎng)絡(luò)運(yùn)營商轉(zhuǎn)變?yōu)閿?shù)據(jù)運(yùn)營商,使用互聯(lián)網(wǎng)為廣大用戶提供數(shù)據(jù)網(wǎng)絡(luò)運(yùn)營服務(wù)。從數(shù)據(jù)處理的角度來說,數(shù)據(jù)收集、數(shù)據(jù)處理是大數(shù)據(jù)技術(shù)的兩大重要環(huán)節(jié)。每個(gè)環(huán)節(jié)都和網(wǎng)絡(luò)基礎(chǔ)設(shè)施息息相關(guān)。廣電行業(yè)可以通過網(wǎng)絡(luò)為網(wǎng)絡(luò)技術(shù)處設(shè)施建設(shè)和維護(hù)提供網(wǎng)絡(luò)支持。網(wǎng)絡(luò)的覆蓋范圍廣、可靠性高,可以顯著提高廣電行業(yè)的運(yùn)營效率。目前,中國廣電行業(yè)的技術(shù)設(shè)施已經(jīng)滿足大數(shù)據(jù)運(yùn)營商的發(fā)展需要,可以著重發(fā)展網(wǎng)絡(luò)建設(shè)和網(wǎng)絡(luò)維護(hù)。通過研究數(shù)據(jù)源頭可以發(fā)現(xiàn),廣電網(wǎng)絡(luò)前端可以接收電臺(tái)資源信息,網(wǎng)絡(luò)終端和各個(gè)家庭的智能終端相連。廣電網(wǎng)絡(luò)可以接收各種數(shù)據(jù),內(nèi)容豐富、總量龐大、類型多樣。
近幾年,構(gòu)建智慧型城市是大中型城市迫在眉睫的問題。如何構(gòu)建、如何管理、如何利用,是建設(shè)智慧型城市的突出問題。城市運(yùn)行管理、居民服務(wù)、信息化,都是智慧型城市的基礎(chǔ)支撐。為了保證智慧型城市全面普及,中國必須大力開展基礎(chǔ)設(shè)施建設(shè),提升信息通信質(zhì)量,擴(kuò)大通信覆蓋范圍,提高信息傳遞效率。在建立過程中,國家必須制訂相關(guān)準(zhǔn)則,避免偏離建設(shè)智慧型城市的初衷。廣電網(wǎng)絡(luò)轉(zhuǎn)型必須遵循共同原則,規(guī)劃和利用現(xiàn)有網(wǎng)絡(luò)資源,盡量減少新建網(wǎng)絡(luò)資源,降低基礎(chǔ)設(shè)施建設(shè)投入,提高資源利用率。
綜上所述,中國現(xiàn)階段社會(huì)發(fā)展離不開云計(jì)算和大數(shù)據(jù)技術(shù),將這兩種技術(shù)應(yīng)用于廣電行業(yè),可以實(shí)現(xiàn)行業(yè)轉(zhuǎn)型。廣電網(wǎng)絡(luò)可以由傳統(tǒng)網(wǎng)絡(luò)運(yùn)營商轉(zhuǎn)變?yōu)樾滦蛿?shù)據(jù)運(yùn)營商,為智慧城市建設(shè)奠定基礎(chǔ)。
TN948.3
A
10.15913/j.cnki.kjycx.2020.12.070
2095-6835(2020)12-0158-02
張翼,男,河南新鄭人,本科學(xué)歷,研判員,工程師,研究方向?yàn)樾旅襟w監(jiān)管。
〔編輯:王霞〕