數(shù)據(jù)分析系統(tǒng)
- 基于Spark的大數(shù)據(jù)分析系統(tǒng)設(shè)計(jì)和實(shí)現(xiàn)
rk的大數(shù)據(jù)分析系統(tǒng)設(shè)計(jì)方案。該系統(tǒng)的框架選擇適用性較強(qiáng)的Spark計(jì)算框架為主,能夠支持多種類型語(yǔ)言的編程,此外還可以實(shí)現(xiàn)對(duì)大數(shù)據(jù)的交互式、批量處理、計(jì)算分析。基于Spark的大數(shù)據(jù)分析系統(tǒng),以實(shí)現(xiàn)對(duì)大數(shù)據(jù)的實(shí)時(shí)分析。1 Spark技術(shù)概述Spark作為UC Berkeley AMPLab所開(kāi)發(fā)的一款大數(shù)據(jù)計(jì)算框架,它和Hadoop兩者之間既有相似部分,也有不同[3]。不過(guò),Spark和Hadoop兩者都具有分布式優(yōu)點(diǎn),能夠?qū)崿F(xiàn)對(duì)大數(shù)據(jù)的快速集群計(jì)算,并
信息記錄材料 2023年9期2023-10-31
- 基于大數(shù)據(jù)技術(shù)的用戶用電采集數(shù)據(jù)分析系統(tǒng)設(shè)計(jì)
用電采集數(shù)據(jù)分析系統(tǒng)進(jìn)行研究,通過(guò)建立異常指標(biāo)庫(kù),進(jìn)一步加強(qiáng)對(duì)配電網(wǎng)點(diǎn)運(yùn)行效果和質(zhì)量的監(jiān)測(cè)與控制。該系統(tǒng)是一個(gè)集成多種技術(shù)的實(shí)時(shí)信息采集和分析系統(tǒng),具備信息采集、費(fèi)控管理、遠(yuǎn)程抄表、負(fù)荷監(jiān)控以及線損分析等多項(xiàng)優(yōu)勢(shì)[1]。利用移動(dòng)網(wǎng)絡(luò)、光纖專網(wǎng)等先進(jìn)通信手段,該系統(tǒng)能夠?qū)崿F(xiàn)系統(tǒng)主站與現(xiàn)場(chǎng)終端之間的高效通信,從而有效監(jiān)測(cè)電網(wǎng)中設(shè)備的運(yùn)行狀態(tài)、負(fù)荷情況、供電狀況、電能質(zhì)量以及線損等重要指標(biāo),并對(duì)客戶的日常用電情況進(jìn)行深入分析。該系統(tǒng)不僅能滿足快速發(fā)展的經(jīng)濟(jì)社會(huì)對(duì)
通信電源技術(shù) 2023年15期2023-09-11
- 基于云計(jì)算的企業(yè)大數(shù)據(jù)分析系統(tǒng)研究
過(guò)構(gòu)建大數(shù)據(jù)分析系統(tǒng),可以更好地掌握行業(yè)數(shù)據(jù)、企業(yè)內(nèi)部數(shù)據(jù)信息的規(guī)律和潛在信息等,為促進(jìn)企業(yè)決策和發(fā)展戰(zhàn)略制定提供必要依據(jù)。在構(gòu)建大數(shù)據(jù)分析系統(tǒng)中,云計(jì)算技術(shù)也是重要的組成部分,這一技術(shù)的有效應(yīng)用,對(duì)于優(yōu)化系統(tǒng)設(shè)計(jì)、提升系統(tǒng)性能等都具有重要作用。1 云計(jì)算和大數(shù)據(jù)技術(shù)概述1.1 云計(jì)算技術(shù)云計(jì)算技術(shù)應(yīng)用中,需要借助相關(guān)硬軟件資源支持,結(jié)合客戶的具體需要,在多個(gè)端口以及規(guī)格應(yīng)用,為客戶提供服務(wù)[1]。在云計(jì)算技術(shù)應(yīng)用過(guò)程中,搭建云平臺(tái)是基礎(chǔ)工作,這是支撐平臺(tái)
無(wú)線互聯(lián)科技 2023年1期2023-03-20
- 新疆煤質(zhì)數(shù)據(jù)分析系統(tǒng)優(yōu)缺點(diǎn)及改進(jìn)建議
建立煤質(zhì)數(shù)據(jù)分析系統(tǒng)可以對(duì)煤炭基礎(chǔ)資料進(jìn)行現(xiàn)代化管理,為相關(guān)企業(yè)和部門提供煤質(zhì)數(shù)據(jù)基礎(chǔ)依據(jù),帶來(lái)一定的社會(huì)經(jīng)濟(jì)效益。1 建立煤質(zhì)數(shù)據(jù)分析系統(tǒng)的意義新疆煤質(zhì)數(shù)據(jù)分析系統(tǒng)從最簡(jiǎn)單的單個(gè)數(shù)據(jù)表格匯總發(fā)展到能夠進(jìn)行煤質(zhì)綜合評(píng)價(jià),可以提高煤炭開(kāi)采率和利用率,可以通過(guò)查詢功能得到相應(yīng)的信息,也可以提升客戶對(duì)煤質(zhì)報(bào)告的滿意度和準(zhǔn)確率,使煤礦企業(yè)的社會(huì)形象提升,推動(dòng)了各方的經(jīng)濟(jì)發(fā)展。通過(guò)查詢?cè)撓到y(tǒng)里的煤質(zhì)數(shù)據(jù)和評(píng)價(jià)報(bào)告可以在地質(zhì)報(bào)告的前期設(shè)計(jì)、施工管理和總結(jié)報(bào)告中給與相應(yīng)
新疆有色金屬 2022年2期2022-11-22
- DRG數(shù)據(jù)分析系統(tǒng)運(yùn)維期風(fēng)險(xiǎn)識(shí)別與業(yè)務(wù)推動(dòng)
。DRG數(shù)據(jù)分析系統(tǒng)具備組內(nèi)可比性強(qiáng)和分析指標(biāo)清晰全面的特性,是很好的數(shù)據(jù)標(biāo)化工具,主要用于住院醫(yī)療服務(wù)監(jiān)測(cè)分析和醫(yī)療付費(fèi)改革,數(shù)據(jù)來(lái)源是病案統(tǒng)計(jì)編目后的病案首頁(yè)。DRG數(shù)據(jù)分析系統(tǒng)各指標(biāo)分析精準(zhǔn)度可以具體到患者詳細(xì)的病歷資料,下鉆分析維度、指標(biāo)數(shù)目極多。本文將醫(yī)療大數(shù)據(jù)與DRG管理工具結(jié)合,運(yùn)用信息技術(shù)對(duì)電子病歷進(jìn)行分詞、切詞和歸一等操作,實(shí)現(xiàn)數(shù)據(jù)后結(jié)構(gòu)化,極大范圍的拓展DRG分析指標(biāo),借助大數(shù)據(jù)的思維和方法進(jìn)行研究,突破傳統(tǒng)分析模式,有效延伸和拓展DR
網(wǎng)絡(luò)安全技術(shù)與應(yīng)用 2022年8期2022-11-20
- 一種基于源數(shù)據(jù)適配的大數(shù)據(jù)分析系統(tǒng)
適配的大數(shù)據(jù)分析系統(tǒng),該系統(tǒng)在不建立大數(shù)據(jù)倉(cāng)庫(kù)的情況下,能很好地解決多個(gè)業(yè)務(wù)系統(tǒng)數(shù)據(jù)關(guān)聯(lián)、數(shù)據(jù)查詢、信息孤島的問(wèn)題,將分散的業(yè)務(wù)系統(tǒng)做整合,變成業(yè)務(wù)上統(tǒng)一的系統(tǒng)。設(shè)計(jì)的系統(tǒng)有以下特點(diǎn):(1)該系統(tǒng)定位為數(shù)據(jù)中間件平臺(tái),不用建立統(tǒng)一數(shù)據(jù)倉(cāng)庫(kù),即可達(dá)到數(shù)據(jù)統(tǒng)一、數(shù)據(jù)關(guān)聯(lián)、統(tǒng)一查詢的目的。(2)在統(tǒng)一認(rèn)證登錄平臺(tái)基礎(chǔ)上增加了數(shù)據(jù)共享的功能,真正做到數(shù)據(jù)的統(tǒng)一。(3)本系統(tǒng)下分三個(gè)子系統(tǒng),通過(guò)三個(gè)子系統(tǒng):業(yè)務(wù)系統(tǒng)接口適配系統(tǒng)、數(shù)據(jù)調(diào)用和組合規(guī)則適配調(diào)用系統(tǒng)、服務(wù)調(diào)
現(xiàn)代信息科技 2022年17期2022-11-03
- 職業(yè)技能競(jìng)賽可持續(xù)發(fā)展提升對(duì)策研究*
能競(jìng)賽大數(shù)據(jù)分析系統(tǒng)及競(jìng)賽潛質(zhì)測(cè)評(píng)與引導(dǎo)訓(xùn)練系統(tǒng),助力職業(yè)技能競(jìng)賽可持續(xù)發(fā)展和整體水平提升。1 政策基礎(chǔ)1.1 符合政策需求2015年,國(guó)務(wù)院辦公廳發(fā)布了《促進(jìn)大數(shù)據(jù)發(fā)展行動(dòng)綱要》指出大數(shù)據(jù)發(fā)展是國(guó)家中長(zhǎng)期戰(zhàn)略的重要組成部分[3],在職業(yè)技能競(jìng)賽中涵蓋的數(shù)據(jù)參數(shù)多種多樣、相互影響,建立大數(shù)據(jù)分析系統(tǒng)是較好的解決方案。此外,2018年,由教育部印發(fā)的《教育信息化2.0行動(dòng)計(jì)劃》,提出要實(shí)現(xiàn)專用資源轉(zhuǎn)向大資源建設(shè),大數(shù)據(jù)、云計(jì)算等信息化手段可以進(jìn)一步提升教育質(zhì)
四川農(nóng)業(yè)與農(nóng)機(jī) 2022年5期2022-10-28
- Debye-screening effect on electron-impact excitation of helium-like Al11+and Fe24+ions
發(fā)的實(shí)時(shí)數(shù)據(jù)分析系統(tǒng),并在突發(fā)情況,自然災(zāi)害發(fā)生的情況下保證數(shù)據(jù)不會(huì)丟失,是智慧城市發(fā)展的第二個(gè)需要面臨的問(wèn)題。3.1. Test of numerical methodsIn order to verify the numerical methods and computing codes, the present EIE cross sections for the transition 1s→2p in an Ne9+ion are compared
Chinese Physics B 2022年4期2022-04-12
- 基于大數(shù)據(jù)的高校學(xué)生一卡通數(shù)據(jù)分析系統(tǒng)的設(shè)計(jì)
生一卡通數(shù)據(jù)分析系統(tǒng)設(shè)計(jì)思路各高校信息化系統(tǒng)包含了學(xué)生工作管理系統(tǒng),教務(wù)管理軟件,校園一卡通軟件,校園網(wǎng)絡(luò)管理軟件,門禁管理系統(tǒng)等。通過(guò)對(duì)學(xué)生一卡通數(shù)據(jù)分析系統(tǒng)的建設(shè),將學(xué)校內(nèi)的各應(yīng)用系統(tǒng)數(shù)據(jù)利用大數(shù)據(jù)技術(shù)。①確定數(shù)據(jù)來(lái)源,包括宿舍門禁記錄,食堂消費(fèi)記錄,圖書(shū)借閱記錄,評(píng)獎(jiǎng)評(píng)優(yōu)記錄,綜合測(cè)評(píng)數(shù)據(jù)。②利用ETL 工具將數(shù)據(jù)同步抽取到一卡通數(shù)據(jù)分析系統(tǒng),然后對(duì)獲得的數(shù)據(jù)利用大數(shù)據(jù)技術(shù)進(jìn)行治理與分析,保證各維度數(shù)據(jù)的有效性、準(zhǔn)確性、完整性、一致性。③借助Echa
內(nèi)蒙古科技與經(jīng)濟(jì) 2022年18期2022-02-08
- 共享交換環(huán)境生態(tài)大數(shù)據(jù)分析系統(tǒng)建設(shè)方法分析
境生態(tài)大數(shù)據(jù)分析系統(tǒng)進(jìn)行建設(shè)的過(guò)程中,明確合理規(guī)范的建設(shè)思維和方法,研究相關(guān)內(nèi)容,采用針對(duì)性有效的建設(shè)方法,保證信息數(shù)據(jù)應(yīng)用的完整性,對(duì)生態(tài)環(huán)境的發(fā)展提供有力的支持和保障。1 共享交換環(huán)境生態(tài)大數(shù)據(jù)分析系統(tǒng)建設(shè)意義1.1 增強(qiáng)政務(wù)信息公開(kāi)透明性新時(shí)代發(fā)展背景下,政府信息公開(kāi)透明是提升相關(guān)公共開(kāi)展的公開(kāi)透明性,最大程度的防治出現(xiàn)廉政腐敗等問(wèn)題,增強(qiáng)人們對(duì)政府的信任度,擴(kuò)大其社會(huì)影響力,實(shí)現(xiàn)政府和社會(huì)大眾多方面的高效協(xié)作。政府和公民是新時(shí)代法治社會(huì)建設(shè)發(fā)展工程
電子技術(shù)與軟件工程 2021年11期2021-11-22
- 基于大數(shù)據(jù)的電力設(shè)備運(yùn)行數(shù)據(jù)分析系統(tǒng)的設(shè)計(jì)研究
和推廣大數(shù)據(jù)分析系統(tǒng)勢(shì)在必行。1 應(yīng)用大數(shù)據(jù)設(shè)計(jì)電力設(shè)備運(yùn)行數(shù)據(jù)分析系統(tǒng)1.1 監(jiān)測(cè)電力設(shè)備運(yùn)行狀態(tài)電力設(shè)備運(yùn)行過(guò)程中,常會(huì)因?yàn)樵O(shè)備缺陷、信號(hào)干擾、不良天氣等因素的影響,出現(xiàn)超負(fù)荷運(yùn)行、跳閘等情況,為整個(gè)系統(tǒng)的運(yùn)行埋下安全隱患,而利用大數(shù)據(jù)技術(shù),設(shè)備運(yùn)行參數(shù)得以被實(shí)時(shí)傳輸?shù)奖O(jiān)控終端,工作人員只需要對(duì)系統(tǒng)傳回的圖像進(jìn)行查看和分析,就可以發(fā)現(xiàn)這些異常,大大提升可監(jiān)測(cè)工作的靈敏度。其次,在日益激烈的競(jìng)爭(zhēng)環(huán)境下,電力企業(yè)的發(fā)展需求也在日益高漲,通過(guò)大數(shù)據(jù)設(shè)備運(yùn)行數(shù)
電子技術(shù)與軟件工程 2021年16期2021-11-03
- 高爐數(shù)據(jù)分析系統(tǒng)的設(shè)計(jì)與應(yīng)用
概述高爐數(shù)據(jù)分析系統(tǒng)是以實(shí)時(shí)生產(chǎn)數(shù)據(jù)為支撐,通過(guò)數(shù)據(jù)采集、計(jì)算、分析與數(shù)據(jù)統(tǒng)計(jì)來(lái)反映高爐的生產(chǎn)情況。2 設(shè)計(jì)開(kāi)發(fā)背景目前,高爐爐況分析數(shù)據(jù)主要來(lái)自于生產(chǎn)監(jiān)控畫(huà)面的實(shí)時(shí)數(shù)據(jù)、歷史趨勢(shì)和每天的人工報(bào)表數(shù)據(jù)。由于監(jiān)控畫(huà)面顯示和歷史趨勢(shì)的數(shù)據(jù)源存在實(shí)時(shí)性和局部性,不能反應(yīng)出高爐冶煉整體情況的完整性。雖然每天的報(bào)表數(shù)據(jù)能解決這一問(wèn)題,但是要從這些大量的紙質(zhì)報(bào)表中進(jìn)行數(shù)據(jù)提煉、分析,效率低下,且這種傳統(tǒng)的依靠操作工日復(fù)一日的手動(dòng)抄錄數(shù)據(jù)存在較多缺點(diǎn)。2.1 手工抄錄數(shù)
科學(xué)技術(shù)創(chuàng)新 2021年30期2021-10-25
- 基于大數(shù)據(jù)的電力企業(yè)財(cái)務(wù)數(shù)據(jù)分析系統(tǒng)建設(shè)
企業(yè)財(cái)務(wù)數(shù)據(jù)分析系統(tǒng)的層次結(jié)構(gòu)按照數(shù)據(jù)處理順序,可以將電力企業(yè)的財(cái)務(wù)大數(shù)據(jù)分析系統(tǒng)分為3 個(gè)層次,分別是數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)預(yù)處理以及構(gòu)建動(dòng)態(tài)財(cái)務(wù)共享數(shù)據(jù)分析中心。其中,數(shù)據(jù)存儲(chǔ)能夠保證數(shù)據(jù)完整保留,數(shù)據(jù)處理能夠確保數(shù)據(jù)時(shí)效性,而動(dòng)態(tài)數(shù)據(jù)分析體系能夠充分挖掘數(shù)據(jù)價(jià)值[1]。三者合為一體,能夠讓大數(shù)據(jù)的價(jià)值體現(xiàn)得更為完整和貼切。針對(duì)來(lái)自國(guó)家電網(wǎng)大數(shù)據(jù)中心以及外部數(shù)據(jù)源的大數(shù)據(jù),文章分別從源數(shù)據(jù)層面、數(shù)據(jù)存儲(chǔ)層面、數(shù)據(jù)預(yù)處理層面以及數(shù)據(jù)分析層面分析財(cái)務(wù)數(shù)據(jù)分析系統(tǒng)的
中國(guó)管理信息化 2021年14期2021-09-18
- 基于關(guān)聯(lián)規(guī)則的大學(xué)生體質(zhì)測(cè)試健康數(shù)據(jù)分析系統(tǒng)設(shè)計(jì)
一個(gè)健康數(shù)據(jù)分析系統(tǒng),將學(xué)生各項(xiàng)體質(zhì)測(cè)試指標(biāo)輸入該系統(tǒng)后,系統(tǒng)能夠以特定的健康數(shù)值,生成個(gè)體或總體的身體健康分析結(jié)果,校方據(jù)此調(diào)整實(shí)際的教學(xué)方向,增強(qiáng)大學(xué)生的身體素質(zhì)[3].在境外,分析大學(xué)生體質(zhì)測(cè)試健康數(shù)據(jù)的研究起步較早,其大多應(yīng)用了數(shù)據(jù)挖掘算法后,數(shù)據(jù)分析系統(tǒng)逐漸向精準(zhǔn)化、關(guān)聯(lián)化發(fā)展,可高效分析大學(xué)生群體的體質(zhì)健康狀況[4-7];而我國(guó),相關(guān)數(shù)據(jù)分析系統(tǒng)起步較晚,文獻(xiàn)[8]以學(xué)生體質(zhì)健康測(cè)試區(qū)塊鏈為研究對(duì)象,在"省級(jí)-地級(jí)-縣級(jí)"的三級(jí)結(jié)構(gòu)下,從矯正利
吉林化工學(xué)院學(xué)報(bào) 2021年7期2021-08-31
- 校園卡數(shù)據(jù)分析平臺(tái)建設(shè)及運(yùn)用
合校園卡數(shù)據(jù)分析系統(tǒng),了解和查詢個(gè)人賬單,也不能通過(guò)學(xué)生消費(fèi)和使用情況,讓學(xué)校了解學(xué)生在校的動(dòng)態(tài),導(dǎo)致校園卡數(shù)據(jù)分析平臺(tái)建設(shè)工作存在問(wèn)題[1]。同時(shí),學(xué)校也不能通過(guò)校園卡數(shù)據(jù)分析平臺(tái),了解學(xué)生的消費(fèi)人群的分布情況,而且在直觀展示學(xué)生食堂和商鋪消費(fèi)性系統(tǒng)方面缺乏時(shí)效性,進(jìn)而不利于推動(dòng)學(xué)生管理工作創(chuàng)新發(fā)展。在學(xué)生食堂就餐高峰期期間,也不能通過(guò)校園卡數(shù)據(jù)分析平臺(tái)直觀展示,只能采用課表時(shí)間預(yù)估的方式,了解學(xué)生校園卡使用情況[1]。另外,在校園卡數(shù)據(jù)分析平臺(tái)中,不能
信息記錄材料 2021年1期2021-04-04
- 基于GIS 的國(guó)土測(cè)繪數(shù)據(jù)分析系統(tǒng)設(shè)計(jì)
國(guó)土測(cè)繪數(shù)據(jù)分析系統(tǒng)存在分析殘差高的缺陷,為此,基于GIS 重新設(shè)計(jì)國(guó)土測(cè)繪數(shù)據(jù)分析系統(tǒng),致力于降低國(guó)土測(cè)繪數(shù)據(jù)分析殘差。1 GIS 應(yīng)用概述GIS 以其自身良好的空間數(shù)據(jù)表現(xiàn)力,實(shí)時(shí)采集地理信息[1],并通過(guò)GIS 的運(yùn)算、分類、存儲(chǔ)等功能執(zhí)行對(duì)地理信息的管理操作。通過(guò)地理信息的坐標(biāo)點(diǎn)位,展示其獨(dú)特的視覺(jué)化效果。除此之外,GIS 具備極強(qiáng)的空間分析能力,在對(duì)GIS 技術(shù)進(jìn)行分析時(shí),發(fā)現(xiàn)此項(xiàng)技術(shù)具有較強(qiáng)的空間分析能力,這項(xiàng)功能在實(shí)施過(guò)程中,需要由計(jì)算機(jī)網(wǎng)絡(luò)
科學(xué)技術(shù)創(chuàng)新 2021年4期2021-03-06
- 基于工業(yè)互聯(lián)網(wǎng)平臺(tái)的大數(shù)據(jù)分析系統(tǒng)研究
平臺(tái)的大數(shù)據(jù)分析系統(tǒng)構(gòu)建新思路、構(gòu)建路徑。關(guān)鍵詞:工業(yè)領(lǐng)域互聯(lián)網(wǎng)平臺(tái)大數(shù)據(jù)技術(shù)數(shù)據(jù)分析系統(tǒng)中圖分類號(hào):TP311 ? 文獻(xiàn)標(biāo)識(shí)碼:A ? 文章編號(hào):1672-3791(2021)12(a)-0000-00Research on Big DataAnalysis System Based onIndustrial Internet PlatformPENG Shuzhe ?WANG Xu ?WEI Hongntao(Ningbo Chuangyuan Inf
科技資訊 2021年34期2021-02-11
- 探討Arc GIS礦山測(cè)繪成果數(shù)據(jù)分析系統(tǒng)
測(cè)繪成果數(shù)據(jù)分析系統(tǒng)主要是針對(duì)已經(jīng)獲得的礦山測(cè)繪數(shù)據(jù),根據(jù)需求進(jìn)行信息的整合[1]。Arc GIS能夠?yàn)榈V山測(cè)繪成果數(shù)據(jù)分析系統(tǒng)提供豐富的數(shù)據(jù)類型自己三位數(shù)護(hù)具模型,為實(shí)現(xiàn)數(shù)字礦山打下基礎(chǔ)。1 系統(tǒng)需求分析1.1 礦山測(cè)繪成果數(shù)據(jù)分析現(xiàn)狀某地區(qū)具有豐富的礦產(chǎn)資源,當(dāng)前已經(jīng)開(kāi)展了礦山測(cè)繪成果數(shù)據(jù)分析系統(tǒng)。該系統(tǒng)主要包括以下結(jié)構(gòu):收集礦山地表層層空間數(shù)據(jù)的地測(cè)管理信息系統(tǒng);安全生產(chǎn)監(jiān)控系統(tǒng);生產(chǎn)管理監(jiān)督系統(tǒng)。通過(guò)該系統(tǒng),能夠了解礦山的地理信息,并且實(shí)現(xiàn)對(duì)生產(chǎn)過(guò)
世界有色金屬 2020年18期2020-11-30
- K高校審計(jì)數(shù)據(jù)分析系統(tǒng)建設(shè)方案研究
高校審計(jì)數(shù)據(jù)分析系統(tǒng),一方面實(shí)現(xiàn)審計(jì)數(shù)據(jù)標(biāo)準(zhǔn)化快捷報(bào)送,另一方面也實(shí)現(xiàn)內(nèi)部審計(jì)工作的轉(zhuǎn)型升級(jí)?,F(xiàn)階段,高校的審計(jì)工作已經(jīng)改變了傳統(tǒng)的方式,將賬套式改為數(shù)據(jù)式審計(jì),傳統(tǒng)的審計(jì)工作只能遵循原有的思路,導(dǎo)致工作人員面對(duì)大量的數(shù)據(jù)信息無(wú)從下手,從而出現(xiàn)難如登天、水中撈月的尷尬的場(chǎng)面。而新型數(shù)據(jù)審計(jì)方式,制定了新型的信息化方案,由互聯(lián)網(wǎng)來(lái)輔助工作人員進(jìn)行數(shù)據(jù)整理更容易理清審計(jì)思路,建立高校審計(jì)數(shù)據(jù)分析系統(tǒng)變得非常迫切。一、建設(shè)高校審計(jì)數(shù)據(jù)分析系統(tǒng)的意義高校審計(jì)覆蓋財(cái)
大眾投資指南 2020年30期2020-09-09
- 數(shù)據(jù)分析系統(tǒng)在技術(shù)方面的改進(jìn)措施
的,所以數(shù)據(jù)分析系統(tǒng)就成為了一個(gè)重要的工具。數(shù)據(jù)分析系統(tǒng)的四個(gè)主要功能是配置、采集、處理和應(yīng)用,并且其中包含采集數(shù)據(jù)、分析整理、構(gòu)建模型等流程。這些功能看似簡(jiǎn)單,但是卻能找到數(shù)據(jù)的規(guī)律,從而對(duì)某一事件的結(jié)果進(jìn)行預(yù)測(cè)。這對(duì)于很多決策者來(lái)說(shuō)是很具有價(jià)值的,分析的結(jié)果可以讓他們獲知市場(chǎng)的大致動(dòng)向,并減少做出錯(cuò)誤決斷的情況。因此,該系統(tǒng)對(duì)于任何領(lǐng)域來(lái)說(shuō),其價(jià)值都是難以估量的。關(guān)鍵詞:數(shù)據(jù)分析系統(tǒng);技術(shù);改進(jìn)一、數(shù)據(jù)分析系統(tǒng)概述(一)數(shù)據(jù)分析的常用方法現(xiàn)在分析中一些
中國(guó)新通信 2020年1期2020-05-25
- 數(shù)據(jù)分析系統(tǒng)在技術(shù)方面的改進(jìn)措施
法。2 數(shù)據(jù)分析系統(tǒng)的基本組成和運(yùn)作流程2.1 系統(tǒng)組成框架(1)采集模塊。獲取樣本數(shù)據(jù)是該系統(tǒng)運(yùn)作的首要環(huán)節(jié),采集模塊可以通過(guò)人為設(shè)定關(guān)鍵詞或數(shù)據(jù)抓取標(biāo)準(zhǔn)的方式,對(duì)數(shù)據(jù)存儲(chǔ)空間內(nèi)的海量數(shù)據(jù)進(jìn)行篩選、檢索,將那些符合條件的數(shù)據(jù)采集起來(lái),并單獨(dú)存放在一個(gè)獨(dú)立的存儲(chǔ)空間內(nèi),方便下一步進(jìn)行深入的分析處理。(2)處理模塊。按照特定的應(yīng)用軟件或構(gòu)建數(shù)學(xué)模型等方式,對(duì)符合標(biāo)準(zhǔn)的數(shù)據(jù)進(jìn)行多樣化的處理。處理模塊主要是進(jìn)行數(shù)據(jù)轉(zhuǎn)化,將一堆雜亂的數(shù)據(jù)轉(zhuǎn)化為清晰、直觀的圖表、數(shù)
黑龍江科學(xué) 2020年2期2020-01-18
- 基于累計(jì)工作量的在線大數(shù)據(jù)分析作業(yè)調(diào)度算法
rk等大數(shù)據(jù)分析系統(tǒng)中無(wú)先驗(yàn)知識(shí)任務(wù)的高效執(zhí)行問(wèn)題,設(shè)計(jì)了基于累計(jì)工作量(CRW)的任務(wù)調(diào)度器CRWScheduler。該調(diào)度器根據(jù)CRW將任務(wù)在低權(quán)重隊(duì)列與高權(quán)重隊(duì)列間切換;在為作業(yè)分配資源時(shí),同時(shí)考慮到作業(yè)所在的隊(duì)列和其瞬時(shí)占用資源量,無(wú)需作業(yè)先驗(yàn)知識(shí)即顯著提升系統(tǒng)性能。基于Apache Hadoop YARN實(shí)現(xiàn)了CRWScheduler原型,在28個(gè)節(jié)點(diǎn)的基準(zhǔn)測(cè)試集群上的實(shí)驗(yàn)表明,與YARN的公平調(diào)度機(jī)制相比,作業(yè)流時(shí)間(JFT)平均降低21%,其
計(jì)算機(jī)應(yīng)用 2019年8期2019-10-23
- 基于云圖像處理的城市車廂和站臺(tái)擁擠度的檢測(cè)與研究
擁擠度;數(shù)據(jù)分析系統(tǒng)引言我國(guó)經(jīng)濟(jì)的快速發(fā)展,城市化建設(shè)工程不斷加快,私家車數(shù)量逐漸增多,因而道路交通擁堵問(wèn)題也日益嚴(yán)重,尤其是城市主要路段和商業(yè)領(lǐng)域交通擁堵十分嚴(yán)重,或許這些已經(jīng)成為阻礙城市發(fā)展的重要因素。針對(duì)這一交通問(wèn)題,交通數(shù)據(jù)分析系統(tǒng)技術(shù)顯得尤為重要,這種技術(shù)利用互聯(lián)網(wǎng)與通訊技術(shù)擁擠圖像識(shí)別技術(shù),并且在相應(yīng)的電子設(shè)備上配置檢測(cè)設(shè)備,從而實(shí)現(xiàn)對(duì)車輛息數(shù)據(jù)和人口擁擠度數(shù)據(jù)進(jìn)行有效采集和分析整理[2]。此外,這種交通數(shù)據(jù)分析系統(tǒng)技術(shù)會(huì)及時(shí)把檢測(cè)數(shù)據(jù)傳輸給監(jiān)
- 基于云平臺(tái)的智能家電數(shù)據(jù)分析系統(tǒng)的應(yīng)用研究
智能家電數(shù)據(jù)分析系統(tǒng)的概述智能家電系統(tǒng)的組成包含了云平臺(tái)、家電產(chǎn)品、用戶客戶端,是基于物聯(lián)網(wǎng)技術(shù)、云計(jì)算技術(shù)和大數(shù)據(jù)技術(shù)的應(yīng)用。在云平臺(tái)上整合了各類家電的數(shù)據(jù)分析系統(tǒng),通過(guò)物聯(lián)網(wǎng)技術(shù),將家電運(yùn)行的重要參數(shù)實(shí)時(shí)上傳云端的數(shù)據(jù)分析系統(tǒng)。云平臺(tái)系統(tǒng)針對(duì)接收數(shù)據(jù)進(jìn)行存儲(chǔ),結(jié)合過(guò)去數(shù)據(jù)進(jìn)行邏輯分析,即可判斷當(dāng)前家電的運(yùn)行狀態(tài),也可以系統(tǒng)分析出用戶使用該家電的習(xí)慣,甚至系統(tǒng)可以分析出用戶是否滿足于目前家電的功能需求,如圖1。經(jīng)過(guò)系統(tǒng)數(shù)據(jù)分析后,將一些重要的信息推送到人
日用電器 2019年7期2019-08-07
- 基于機(jī)器學(xué)習(xí)的硬件數(shù)據(jù)分析系統(tǒng)的實(shí)現(xiàn)
探測(cè)硬件數(shù)據(jù)分析系統(tǒng)內(nèi)部各組件潛在的相互聯(lián)系.1 硬件數(shù)據(jù)分析系統(tǒng)構(gòu)架硬件數(shù)據(jù)分析系統(tǒng)是性能計(jì)數(shù)單元收集的性能信息的數(shù)據(jù)挖掘工具.圖1給出了硬件數(shù)據(jù)分析系統(tǒng)的系統(tǒng)框架,主要由三部分組成:數(shù)據(jù)集成模塊、重要排序模塊和階段關(guān)閉排序模塊,具體硬件數(shù)據(jù)分析框架結(jié)構(gòu)關(guān)系圖如圖1所示.圖1 硬件數(shù)據(jù)分析框架在大數(shù)據(jù)計(jì)算框架中,數(shù)據(jù)負(fù)載運(yùn)行時(shí),硬件數(shù)據(jù)分析系統(tǒng)使用perf_event[2]工具批量監(jiān)控性能計(jì)算單元中的性能事件,生成原始時(shí)間數(shù)據(jù).數(shù)據(jù)集成模塊對(duì)這些源數(shù)據(jù)進(jìn)
通化師范學(xué)院學(xué)報(bào) 2019年8期2019-07-19
- 鐵路行車組織數(shù)據(jù)分析系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)
行車組織數(shù)據(jù)分析系統(tǒng)的設(shè)計(jì)結(jié)構(gòu)進(jìn)行總結(jié),進(jìn)而在數(shù)據(jù)提取、挖掘分析算法與實(shí)現(xiàn)技術(shù)相關(guān)基礎(chǔ)上,分析和闡述鐵路行車組織數(shù)據(jù)分析系統(tǒng)的實(shí)現(xiàn)技術(shù)。[關(guān)鍵詞]鐵路行車組織數(shù)據(jù)分析系統(tǒng)設(shè)計(jì)鐵路運(yùn)行是非常復(fù)雜的過(guò)程,列車運(yùn)行時(shí)會(huì)受到各種因素影響。鐵路行車組織是鐵路運(yùn)輸中十分關(guān)鍵的構(gòu)成部分,是鐵路綜合使用各項(xiàng)技術(shù)設(shè)備,對(duì)列車運(yùn)行進(jìn)行合理安排,以此實(shí)現(xiàn)乘客與貨物運(yùn)輸?shù)囊环N計(jì)劃性工作。其工作內(nèi)容主要有車站技術(shù)、車流組織、調(diào)度等相關(guān)方面的工作。從這些方面就可以看出,鐵路行車組織是
電子技術(shù)與軟件工程 2019年8期2019-07-16
- 大數(shù)據(jù)在智慧港口中的應(yīng)用
港口大數(shù)據(jù)分析系統(tǒng)港口大數(shù)據(jù)分析系統(tǒng)是港口數(shù)字化管理平臺(tái)的核心應(yīng)用。通過(guò)訪問(wèn)數(shù)據(jù)庫(kù)信息,可分析處理港口數(shù)據(jù),從而有效利用港口數(shù)字化管理平臺(tái)中的數(shù)據(jù)資源,為港口管理、生產(chǎn)提供決策信息[4]。港口大數(shù)據(jù)分析系統(tǒng)主要具有四個(gè)功能:(1)數(shù)據(jù)采集及數(shù)據(jù)庫(kù)建立,實(shí)時(shí)采集港口日常生產(chǎn)產(chǎn)生的各種數(shù)據(jù),按照港口調(diào)度需求,確定港口數(shù)據(jù)庫(kù)結(jié)構(gòu),將采集數(shù)據(jù)即時(shí)存儲(chǔ)到數(shù)據(jù)庫(kù)中;(2)可視化管理,建立符合港口管理需要的可視化管理模型,如泊位占比、物資流向、??繒r(shí)間、任務(wù)完成情況等
通信電源技術(shù) 2019年3期2019-04-17
- 基于數(shù)據(jù)挖掘技術(shù)的應(yīng)答器報(bào)文分析方法研究
答器報(bào)文數(shù)據(jù)分析系統(tǒng)的設(shè)計(jì)及實(shí)現(xiàn)5.1 應(yīng)答器報(bào)文數(shù)據(jù)分析系統(tǒng)的功能分析應(yīng)答器報(bào)文數(shù)據(jù)主要功能需求及C/S結(jié)構(gòu)的基本特征,應(yīng)答器報(bào)文數(shù)據(jù)分析系統(tǒng)界面布局如圖2所示,包括系統(tǒng)工具欄區(qū)、報(bào)文數(shù)據(jù)顯示區(qū)、解析數(shù)據(jù)顯示區(qū)和日志及報(bào)警信息顯示4部分。5.2 應(yīng)答器報(bào)文數(shù)據(jù)分析系統(tǒng)軟件的功能實(shí)現(xiàn)雖然應(yīng)答器數(shù)據(jù)量大,但是其解析數(shù)據(jù)擁有結(jié)構(gòu)清晰的特點(diǎn),對(duì)于使用大數(shù)據(jù)分析的方法,難免大材小用,且不易于工程化的設(shè)計(jì)和實(shí)現(xiàn),因此可以考慮采用小型化、輕便的數(shù)據(jù)分析工具來(lái)實(shí)現(xiàn)基于K
鐵路通信信號(hào)工程技術(shù) 2019年1期2019-03-04
- 大數(shù)據(jù)分析平臺(tái)建設(shè)與應(yīng)用研究
集成化的數(shù)據(jù)分析系統(tǒng)從客觀上來(lái)說(shuō),數(shù)據(jù)的存在都代表著客觀世界當(dāng)中的某種事物的軌跡。因此,各方面的數(shù)據(jù)是極其具有價(jià)值的東西。隨著科技的發(fā)展,我們今天開(kāi)始逐步的認(rèn)識(shí)到了這些數(shù)據(jù)的重要意義。但是由于現(xiàn)有技術(shù)的不足,到目前為止我們還缺乏一種高度集成化的數(shù)據(jù)分析系統(tǒng)來(lái)與現(xiàn)實(shí)的數(shù)據(jù)分析平臺(tái)相匹配。(五)對(duì)大數(shù)據(jù)分析平臺(tái)的開(kāi)發(fā)程度有待加強(qiáng)大數(shù)據(jù)平臺(tái)的建立是為了滿足人類社會(huì)發(fā)展的各種需求的。但是數(shù)據(jù)的原始狀態(tài)是非常復(fù)雜甚至是雜亂無(wú)章的。這也造成了數(shù)據(jù)在開(kāi)發(fā)利用上的巨大阻礙
魅力中國(guó) 2019年39期2019-01-14
- 智慧交通運(yùn)行狀態(tài)數(shù)據(jù)分析系統(tǒng)的應(yīng)用研究
運(yùn)行狀態(tài)數(shù)據(jù)分析系統(tǒng)的架構(gòu)智慧交通運(yùn)行狀態(tài)數(shù)據(jù)分析系統(tǒng)的整體結(jié)構(gòu)如圖1所示,該分析控制系統(tǒng)主要包括數(shù)據(jù)儲(chǔ)存層、數(shù)據(jù)準(zhǔn)備層、算法工具層、分析邏輯層及應(yīng)用層。數(shù)據(jù)儲(chǔ)存層主要用于匯總、儲(chǔ)存智慧交通系統(tǒng)所收集到的各類的監(jiān)測(cè)數(shù)據(jù);數(shù)據(jù)準(zhǔn)備層主要用于對(duì)系統(tǒng)設(shè)定的各指定數(shù)據(jù)進(jìn)行專門的打包分類及初步處理;算法工具層主要用于對(duì)存儲(chǔ)隔離在數(shù)據(jù)準(zhǔn)備層內(nèi)的各類信息按照系統(tǒng)設(shè)定的算法工具進(jìn)行邏輯運(yùn)算,轉(zhuǎn)換為合成數(shù)據(jù);分析邏輯層則用于對(duì)各合成數(shù)據(jù)和系統(tǒng)設(shè)定的原始控制數(shù)據(jù)進(jìn)行分析對(duì)比,
機(jī)電信息 2018年27期2018-09-21
- 基于物聯(lián)網(wǎng)的智慧電梯大數(shù)據(jù)分析系統(tǒng)開(kāi)發(fā)
管理和大數(shù)據(jù)分析系統(tǒng),實(shí)現(xiàn)電梯制造與安裝工藝優(yōu)化、維修成本降低、應(yīng)急救援和維修時(shí)間縮短,電梯故障率和事故率大幅降低。1 電梯安全監(jiān)測(cè)技術(shù)的現(xiàn)狀分析由于電梯頻繁啟停,許多維保不到位,再加上電梯逐年“老齡化”,造成可靠性下降,進(jìn)入故障多發(fā)期,屢屢有電梯故障停梯和關(guān)人困人事故發(fā)生。且故障發(fā)生時(shí),因故障信息不能有效傳達(dá),出現(xiàn)電梯維修延誤、電梯故障加重,導(dǎo)致被困人員不能得到及時(shí)解救甚至在不當(dāng)自救過(guò)程中出現(xiàn)更大的傷害等問(wèn)題。目前,電梯在安全隱患和安全監(jiān)測(cè)技術(shù)上存在較多
電子制作 2018年15期2018-09-21
- 基于scrapy框架的京東數(shù)據(jù)分析系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)
京東購(gòu)物數(shù)據(jù)分析系統(tǒng)。從而對(duì)京東商鋪客戶評(píng)價(jià)進(jìn)行分析,獲取該商品的質(zhì)量?jī)?yōu)劣,可以迅速的幫助用戶獲取商品的很多重要信息。Abstract: The behavior analysis and prediction of customer information based on large data technology has caused more and more enterprises to pay attention to it. Accordin
價(jià)值工程 2018年28期2018-09-20
- 基于信息融合的社群金融信息數(shù)據(jù)分析系統(tǒng)的研究與實(shí)現(xiàn)
金融信息數(shù)據(jù)分析系統(tǒng)的應(yīng)用與其在實(shí)際中存在的問(wèn)題,做了簡(jiǎn)單的分析,使信息融合的社群金融信息數(shù)據(jù)系統(tǒng)更好的實(shí)現(xiàn)其價(jià)值。【關(guān)鍵詞】信息融合 社群金融信息 數(shù)據(jù)分析系統(tǒng) 研究方法進(jìn)入到二十一世紀(jì)以后我國(guó)的經(jīng)濟(jì)水平逐漸提高,經(jīng)濟(jì)發(fā)展的基礎(chǔ)是依靠我國(guó)第一產(chǎn)業(yè)、第二產(chǎn)業(yè)、第三產(chǎn)業(yè)的發(fā)展,第一產(chǎn)業(yè)是農(nóng)業(yè),第二產(chǎn)業(yè)是工業(yè),而第三產(chǎn)業(yè)是服務(wù)業(yè),其中在第三產(chǎn)業(yè)中信息化技術(shù)的應(yīng)用最為全面,所占比例也最大,因?yàn)榭萍嫉淖⑷?,所以在很大程度上?jié)省了人力物力,降低了生產(chǎn)成本,從而就會(huì)帶
時(shí)代金融 2018年15期2018-08-28
- 面向風(fēng)險(xiǎn)管理的銀行大數(shù)據(jù)分析系統(tǒng)架構(gòu)研究
的銀行大數(shù)據(jù)分析系統(tǒng)架構(gòu)目的是,基于信息資源管理的視角,通過(guò)構(gòu)建覆蓋數(shù)據(jù)整合、數(shù)據(jù)分析和數(shù)據(jù)應(yīng)用等全流程的一體化大數(shù)據(jù)分析系統(tǒng)架構(gòu)來(lái)提升銀行的風(fēng)險(xiǎn)管理水平,真正實(shí)現(xiàn)精細(xì)化風(fēng)險(xiǎn)控制。2 銀行風(fēng)險(xiǎn)數(shù)據(jù)分析的現(xiàn)狀研究2.1 銀行風(fēng)險(xiǎn)數(shù)據(jù)分析的內(nèi)涵風(fēng)險(xiǎn)是銀行在開(kāi)展各類業(yè)務(wù)的過(guò)程中受各類不確定要素的影響使資產(chǎn)和收益出現(xiàn)減值的可能[ 4]。雖然銀行風(fēng)險(xiǎn)管理的發(fā)展經(jīng)歷了傳統(tǒng)風(fēng)險(xiǎn)管理和新型風(fēng)險(xiǎn)管理兩個(gè)階段,但兩個(gè)階段的風(fēng)險(xiǎn)管理整體流程基本一致,均包括了風(fēng)險(xiǎn)識(shí)別、風(fēng)險(xiǎn)評(píng)估、
信息資源管理學(xué)報(bào) 2018年2期2018-05-04
- 數(shù)據(jù)分析系統(tǒng)及其技術(shù)的改進(jìn)措施
量的專業(yè)數(shù)據(jù)分析系統(tǒng)。數(shù)據(jù)分析系統(tǒng)就是通過(guò)對(duì)生產(chǎn)活動(dòng)中所出現(xiàn)的數(shù)據(jù)進(jìn)行分析,發(fā)現(xiàn)其間的數(shù)值與邏輯規(guī)律,對(duì)分析對(duì)象的決策、改進(jìn)提供參考。常見(jiàn)的數(shù)據(jù)分析系統(tǒng)至少包括配置、采集、處理和應(yīng)用4個(gè)層級(jí),并包含采集數(shù)據(jù)、分析整理、提出模型、分析檢驗(yàn)等基本流程。針對(duì)現(xiàn)有的數(shù)據(jù)分析系統(tǒng),要想更好地改進(jìn)其性能,一方面要選取更適宜的數(shù)據(jù)分析指標(biāo),使數(shù)據(jù)分析更加具有可靠性;在軟件編寫(xiě)時(shí),建立標(biāo)準(zhǔn)代碼庫(kù)與數(shù)據(jù)集市,并改進(jìn)其交互性、兼容性也顯得格外重要。關(guān)鍵詞:數(shù)據(jù)分析系統(tǒng);技術(shù);
科學(xué)與財(cái)富 2018年5期2018-04-21
- 大數(shù)據(jù)分析系統(tǒng)創(chuàng)新平臺(tái)與生態(tài)建設(shè)
2. 大數(shù)據(jù)分析系統(tǒng)國(guó)家工程實(shí)驗(yàn)室,北京 1001901 引言近幾年,科技界和企業(yè)界甚至世界各國(guó)政府都把大數(shù)據(jù)作為發(fā)展的重點(diǎn)。美國(guó)政府更是把大數(shù)據(jù)看作“未來(lái)的新石油”,擁有數(shù)據(jù)的規(guī)模和運(yùn)用數(shù)據(jù)的能力將成為衡量一個(gè)國(guó)家綜合國(guó)力的重要組成部分,國(guó)家間和企業(yè)間對(duì)數(shù)據(jù)的占有和控制將成為新的爭(zhēng)奪焦點(diǎn)。大數(shù)據(jù)分析技術(shù)是使用大數(shù)據(jù)的核心關(guān)鍵技術(shù),對(duì)數(shù)據(jù)的深度分析和利用將在推動(dòng)經(jīng)濟(jì)持續(xù)增長(zhǎng)、提升國(guó)家和企業(yè)競(jìng)爭(zhēng)力方面起到至關(guān)重要的作用。大數(shù)據(jù)將成為未來(lái)新的經(jīng)濟(jì)增長(zhǎng)點(diǎn),企業(yè)將
大數(shù)據(jù) 2018年1期2018-03-01
- 大數(shù)據(jù)對(duì)于企業(yè)管理會(huì)計(jì)的影響及對(duì)策
。若將大數(shù)據(jù)分析系統(tǒng)應(yīng)用于該領(lǐng)域,可使其獲得更好的發(fā)展。一、大數(shù)據(jù)對(duì)企業(yè)管理會(huì)計(jì)的影響(一)大數(shù)據(jù)對(duì)會(huì)計(jì)信息的影響財(cái)務(wù)信息是管理會(huì)計(jì)的主要分析對(duì)象,傳統(tǒng)的管理會(huì)計(jì)理論認(rèn)為,企業(yè)的經(jīng)營(yíng)狀況可被概括為生產(chǎn)要素的流轉(zhuǎn),即生產(chǎn)要素轉(zhuǎn)化為商品,商品轉(zhuǎn)化為貨幣,貨幣再轉(zhuǎn)化為生產(chǎn)要素。同時(shí)由于生產(chǎn)要素的構(gòu)成較為復(fù)雜,因此其可通過(guò)貨幣進(jìn)行量化統(tǒng)計(jì)。因此,通過(guò)分析財(cái)務(wù)報(bào)表,企業(yè)的運(yùn)營(yíng)情況將得以呈現(xiàn)。但大數(shù)據(jù)的出現(xiàn),對(duì)傳統(tǒng)理論提出了挑戰(zhàn)。首先,大數(shù)據(jù)是指互聯(lián)網(wǎng)中蘊(yùn)藏的海量數(shù)據(jù)
現(xiàn)代營(yíng)銷(創(chuàng)富信息版) 2018年12期2018-02-21
- 智能數(shù)據(jù)分析系統(tǒng)研究及應(yīng)用
業(yè)智能的數(shù)據(jù)分析系統(tǒng)。智能數(shù)據(jù)分析系統(tǒng)的存在能夠?yàn)檎蛘咂髽I(yè)的工作提供重要的數(shù)據(jù)信息支持。文章在闡述智能數(shù)據(jù)分析系統(tǒng)設(shè)計(jì)和實(shí)現(xiàn)的基礎(chǔ)上,具體分析智能數(shù)據(jù)分析系統(tǒng)在政務(wù)系統(tǒng)中的應(yīng)用?!娟P(guān)鍵詞】智能 數(shù)據(jù)分析系統(tǒng) 關(guān)聯(lián)分析 聚類分析1 智能數(shù)據(jù)分析關(guān)鍵技術(shù)1.1 智能數(shù)據(jù)抽取工具——ODIODL作為Qracle公司的智能數(shù)據(jù)抽取工具,實(shí)現(xiàn)對(duì)大量數(shù)據(jù)信息的收集、轉(zhuǎn)換、加載和整理,并實(shí)現(xiàn)多種關(guān)系型數(shù)據(jù)庫(kù)的繼集成操作。智能數(shù)據(jù)挖掘方法如圖1所示。1.2 智能數(shù)據(jù)分
電子技術(shù)與軟件工程 2017年19期2017-11-09
- 一種輕量級(jí)大數(shù)據(jù)分析系統(tǒng)的實(shí)現(xiàn)
輕量級(jí)大數(shù)據(jù)分析系統(tǒng)的實(shí)現(xiàn)解文祥江蘇省海量數(shù)據(jù)技術(shù)研究所有限公司,江蘇 南京 210019隨著信息化進(jìn)程的不斷推進(jìn),大數(shù)據(jù)時(shí)代也隨之到來(lái)。各個(gè)行業(yè)的發(fā)展都要依賴大數(shù)據(jù)分析,從而為商業(yè)決策提供最有價(jià)值的參考數(shù)據(jù)。然而面對(duì)龐大的數(shù)據(jù)量,從中提取有效信息的過(guò)程實(shí)屬不易。大數(shù)據(jù)分析技術(shù)的出現(xiàn)讓這一難題得到了有效解決?;诖耍饕峭ㄟ^(guò)一種輕量級(jí)大數(shù)據(jù)分析系統(tǒng)的實(shí)現(xiàn),繼而從復(fù)雜的大數(shù)據(jù)分析中解脫出來(lái),使得相關(guān)領(lǐng)域能夠從中得到啟發(fā)。輕量級(jí)大數(shù)據(jù);大數(shù)據(jù)分析;大數(shù)據(jù)分析
移動(dòng)信息 2017年11期2017-04-14
- 海量冗余數(shù)據(jù)干擾下的網(wǎng)絡(luò)數(shù)據(jù)捕獲和分析系統(tǒng)研究
獲系統(tǒng);數(shù)據(jù)分析系統(tǒng)0 引 言隨著網(wǎng)絡(luò)技術(shù)的快速發(fā)展,網(wǎng)絡(luò)逐漸成為人們生產(chǎn)和生活中的重要工具。網(wǎng)絡(luò)安全性受到人們的普遍關(guān)注[1?2]。安全性是指網(wǎng)絡(luò)信息不被泄露和破壞。網(wǎng)絡(luò)數(shù)據(jù)包捕獲和分析技術(shù)是一種基本的網(wǎng)絡(luò)安全維護(hù)手段。建立有關(guān)網(wǎng)絡(luò)數(shù)據(jù)捕獲和分析方法對(duì)網(wǎng)絡(luò)安全具有重要作用[3?5]。目前,有關(guān)網(wǎng)絡(luò)數(shù)據(jù)捕獲和分析方法取得了如下進(jìn)展:李小華將TDT同步算法與滑動(dòng)相關(guān)法融合完成網(wǎng)絡(luò)數(shù)據(jù)捕獲,但存在效率低、一級(jí)數(shù)據(jù)損失高的缺陷[6];崔文明對(duì)參考信號(hào)和接收信號(hào)進(jìn)
現(xiàn)代電子技術(shù) 2016年16期2016-08-30
- 新聞鏈接:惠安中學(xué)啟用新校區(qū) “好人教育”迎來(lái)大數(shù)據(jù)
人教育大數(shù)據(jù)分析系統(tǒng)上線發(fā)布會(huì),在惠中博聞樓大廳隆重舉行。惠中全體教師,惠中大學(xué)區(qū)成員校戶縣六中、電廠中學(xué),以及戶縣四中、戶縣八中主管德育副校長(zhǎng)、政教主任,惠中學(xué)生代表約600人參加了會(huì)議。會(huì)議由惠安中學(xué)黨總支書(shū)記黃涌主持。每世英校長(zhǎng)作了題為《好人教育大數(shù)據(jù)分析及學(xué)校文化建設(shè)體系》的報(bào)告。隨后,黃涌書(shū)記就新校區(qū)搬遷啟用進(jìn)行動(dòng)員講話,這標(biāo)志著惠安中學(xué)新校區(qū)的正式啟用?;莅仓袑W(xué)新校區(qū)建設(shè)工程全面開(kāi)始于2014年,是戶縣人民政府2014年“十件惠民大事”之一。2
陜西教育·綜合版 2016年6期2016-08-05
- 海底管線缺陷內(nèi)檢測(cè)技術(shù)與裝備工程化研究技術(shù)總結(jié)
漏磁檢測(cè)數(shù)據(jù)分析系統(tǒng)。該系統(tǒng)配合內(nèi)檢測(cè)器已項(xiàng)目中投入測(cè)試,對(duì)牽拉實(shí)驗(yàn)數(shù)據(jù)分析的結(jié)果驗(yàn)證了所提出算法的確具有優(yōu)秀的量化性能。關(guān)鍵詞:漏磁檢測(cè) 缺陷分類 缺陷量化 多缺陷聚集 數(shù)據(jù)分析系統(tǒng)Abstract:The magnetic flux leakage(MFL) is the most generalized method for in-pipe inspection. A method of classification and quantificati
科技資訊 2016年3期2016-05-30
- 環(huán)境監(jiān)測(cè)數(shù)據(jù)分析系統(tǒng)的研究
環(huán)境監(jiān)測(cè)數(shù)據(jù)分析系統(tǒng)的研究崔旭(梨樹(shù)縣環(huán)境監(jiān)測(cè)站吉林四平136500)環(huán)境檢測(cè)是環(huán)境保護(hù)工作的重要組成部分,同時(shí)了解一個(gè)地區(qū)環(huán)境變化的重要手段。環(huán)境監(jiān)測(cè)涉及常規(guī)監(jiān)測(cè)和污染源檢測(cè)等不同類型的監(jiān)測(cè)項(xiàng)目,監(jiān)測(cè)數(shù)據(jù)也非常巨大,對(duì)于監(jiān)測(cè)數(shù)據(jù)的分析對(duì)于環(huán)境監(jiān)測(cè)工作意義重大。本文從環(huán)境監(jiān)測(cè)數(shù)據(jù)分析系統(tǒng)搭建的意義和功能入手,研究當(dāng)前環(huán)境監(jiān)測(cè)數(shù)據(jù)分析系統(tǒng)在線的時(shí)期能夠運(yùn)用哪些重要的技術(shù)手段。環(huán)境監(jiān)測(cè);數(shù)據(jù)分析;系統(tǒng)1 引言環(huán)境監(jiān)測(cè)數(shù)據(jù)分析系統(tǒng)是環(huán)境信息系統(tǒng)不可或缺的一部分,
資源節(jié)約與環(huán)保 2016年10期2016-02-07
- 把脈世界杯熱點(diǎn)
M社交大數(shù)據(jù)分析系統(tǒng)的深度挖掘,騰訊得以把握世界杯期間每個(gè)階段的熱點(diǎn)。2014年巴西世界杯已經(jīng)漸漸離我們遠(yuǎn)去了,但中國(guó)球迷仍然在社交媒體上談?wù)撝鞣N感興趣的話題。雖然中國(guó)隊(duì)沒(méi)能參加本屆世界杯,但是這似乎絲毫沒(méi)有影響中國(guó)球迷的熱情——他們通過(guò)社交平臺(tái)和工具發(fā)出自己的聲音。7月7日,騰訊曾經(jīng)根據(jù)中國(guó)球迷支持率公布了一份本屆世界杯四強(qiáng)名單?,F(xiàn)在看來(lái),這份名單讓我們感到十分吃驚,因?yàn)樗谷慌c本屆世界杯最后的比賽結(jié)果完全吻合:德國(guó)隊(duì)獲得冠軍,阿根廷隊(duì)是亞軍,荷蘭隊(duì)是
中國(guó)計(jì)算機(jī)報(bào) 2014年28期2014-08-21
- 稅源專業(yè)化管理模式下數(shù)據(jù)分析系統(tǒng)的應(yīng)用研究
理模式下數(shù)據(jù)分析系統(tǒng)的應(yīng)用研究◆王一民數(shù)據(jù)分析技術(shù)在信息化管理的決策中發(fā)揮著越來(lái)越重要的作用。文章分析了當(dāng)前稅源專業(yè)化管理中的數(shù)據(jù)分析系統(tǒng)功能、作用,剖析了應(yīng)用過(guò)程中的成效和存在的問(wèn)題,提出了完善稅源專業(yè)化管理應(yīng)用中數(shù)據(jù)分析系統(tǒng)的對(duì)策。稅源管理;數(shù)據(jù)分析;信息管稅一、涉稅數(shù)據(jù)分析系統(tǒng)的概況(一)當(dāng)代數(shù)據(jù)分析技術(shù)對(duì)稅收信息化建設(shè)的影響我國(guó)稅收信息化建設(shè)作為現(xiàn)代稅收征管體系中的重要方面,從上世紀(jì)八十年代初起步至今,經(jīng)歷了從小到大、從簡(jiǎn)單到復(fù)雜、從自行開(kāi)發(fā)到統(tǒng)一
稅收經(jīng)濟(jì)研究 2014年3期2014-04-09
- 進(jìn)口礦產(chǎn)品檢測(cè)數(shù)據(jù)分析系統(tǒng)的研究與應(yīng)用
產(chǎn)品檢測(cè)數(shù)據(jù)分析系統(tǒng),有效整合、利用了全國(guó)各口岸進(jìn)口礦產(chǎn)品的檢驗(yàn)檢疫信息,并動(dòng)態(tài)收集進(jìn)口礦產(chǎn)品檢驗(yàn)數(shù)據(jù),既能為上級(jí)部門的宏觀決策提供技術(shù)支持,又能為檢驗(yàn)檢疫質(zhì)量把關(guān)及海關(guān)監(jiān)管提供輔助手段,還可為國(guó)內(nèi)企業(yè)的貿(mào)易采購(gòu)提供技術(shù)咨詢服務(wù)。數(shù)據(jù)分析系統(tǒng)采用邊開(kāi)發(fā)、邊應(yīng)用、邊維護(hù)、邊輸出成果的設(shè)計(jì)理念,以此良性循環(huán)不斷完善進(jìn)口礦產(chǎn)品信息。2 進(jìn)口礦產(chǎn)品檢測(cè)數(shù)據(jù)分析系統(tǒng)的研究2.1 進(jìn)口礦產(chǎn)品檢測(cè)體系的研究為確保進(jìn)口礦產(chǎn)品質(zhì)量,防止其中有毒有害物質(zhì)對(duì)環(huán)境和人們身體健康造
質(zhì)量安全與檢驗(yàn)檢測(cè) 2013年6期2013-01-12
- 基于SQL Server的GSM-R網(wǎng)絡(luò)質(zhì)量數(shù)據(jù)分析系統(tǒng)
網(wǎng)絡(luò)質(zhì)量數(shù)據(jù)分析系統(tǒng)(以下簡(jiǎn)稱數(shù)據(jù)分析系統(tǒng))是用于檢測(cè)無(wú)線服務(wù)器、分析通用分組無(wú)線服務(wù)業(yè)務(wù)(GPRS)服務(wù)器及交換服務(wù)器的工作情況和計(jì)算服務(wù)器的各個(gè)網(wǎng)絡(luò)性能指標(biāo)。根據(jù)指標(biāo)的多變性,使用自定義公式設(shè)計(jì)滿足指標(biāo)的不確定性。目前,北京核心網(wǎng)有移動(dòng)業(yè)務(wù)交換中心(M SC)、業(yè)務(wù)控制點(diǎn)(SCP)的話務(wù)統(tǒng)計(jì)分析系統(tǒng),青藏鐵路也有自己的網(wǎng)絡(luò)質(zhì)量監(jiān)測(cè)數(shù)據(jù)分析系統(tǒng),全路其他GSM-R核心網(wǎng)均無(wú)統(tǒng)計(jì)分析軟件,無(wú)法掌握網(wǎng)絡(luò)的性能,使GSM-R網(wǎng)絡(luò)優(yōu)化暫時(shí)處于空白。2 系統(tǒng)設(shè)計(jì)2
鐵路技術(shù)創(chuàng)新 2011年2期2011-12-31