基于私有云架構的營銷分析系統(tǒng)設計

李南

摘要：為了更好地利用和發(fā)揮企業(yè)海量數(shù)據(jù)的價值，服務于企業(yè)管理決策，本文結合卷煙企業(yè)實際，提出了一套基于私有云架構的營銷分析系統(tǒng)，介紹了營銷分析系統(tǒng)的體系架構和基于hadoop企業(yè)私有云的構建方法，以及整個企業(yè)云在系統(tǒng)中的作用和工作原理，最后設計了整個系統(tǒng)的部署方案。

關鍵詞：私有云;Hadoop;營銷分析系統(tǒng);管理決策

中圖分類號：TP311.52 文獻標識碼：A 文章編號：1007-9416（2018）12-0149-02

對于卷煙工業(yè)企業(yè)而言，在行業(yè)依法推進控煙履約工作和卷煙營銷市場化取向改革的大環(huán)境下，一些諸如廣告宣傳、活動促銷等傳統(tǒng)營銷方式已經(jīng)很難適應現(xiàn)代網(wǎng)絡營銷便捷高效的競爭需要。制定傳統(tǒng)市場營銷方案通常都需要花費較長的時間周期和較高的人工成本，采取登載廣告、散發(fā)傳單、問卷調查等方式統(tǒng)計分析市場需求信息，并制定有針對性的營銷策略，甚至在未獲得數(shù)據(jù)支撐的前提下盲目隨意地制定銷售策略，常常難以達到理想的宣傳效果[1]。基于企業(yè)私有云平臺構建營銷分析系統(tǒng)，既能夠快速高效收集卷煙銷售數(shù)據(jù)和零售戶訂單數(shù)據(jù)，積累形成豐富的信息資源庫，又能在此基礎上借助云計算、大數(shù)據(jù)技術開展海量數(shù)據(jù)的挖掘與分析，幫助企業(yè)更好地制定營銷策略和維護客戶關系。同時保證了客戶信息的安全性和私密性。

1 系統(tǒng)設計思路及架構

采用新的數(shù)據(jù)存儲分析架構，運用互聯(lián)網(wǎng)迭代思維，進行大數(shù)據(jù)分析，將數(shù)據(jù)分析與業(yè)務管理活動緊密結合，將數(shù)據(jù)應用向市場、終端進行延伸，讓營銷行為更加具有指向性和引導性，按照上述思路設計的系統(tǒng)架構自下而上分為六個層級。

1.1 數(shù)據(jù)源層

數(shù)據(jù)源采集匯總企業(yè)內外部數(shù)據(jù)，其中內部數(shù)據(jù)包括營銷、財務、生產(chǎn)、原料、研發(fā)等基礎數(shù)據(jù)。外部數(shù)據(jù)包括煙草行業(yè)下行的卷煙品牌銷量及零售戶訂單數(shù)據(jù)，以及綜合營銷系統(tǒng)中自有品牌在全國的購銷存數(shù)據(jù)、財務成本與廣告宣傳促銷費用信息[2]。

1.2 傳輸層

傳輸層主要起到數(shù)據(jù)傳輸媒介和通道作用，負責抽取數(shù)據(jù)庫的源數(shù)據(jù)到加工層，從技術上可以采取部署ETL中間件和開發(fā)企業(yè)系統(tǒng)接口兩種方式來實現(xiàn)。

1.3 加工層

由于來自數(shù)據(jù)源傳輸?shù)臄?shù)據(jù)量非常大，也存在無法利用的數(shù)據(jù)，因此在存儲過程中需要進行數(shù)據(jù)預處理。該項任務可以由基于Hadoop架構的企業(yè)私有云執(zhí)行，其主要作用是框架式的將海量數(shù)據(jù)做出處理，其特有的HDFS文件系統(tǒng)具有精減數(shù)據(jù)、降低海量數(shù)據(jù)分析維度和清洗操作等簡化數(shù)據(jù)的功能特性，可以在保持數(shù)據(jù)的完整性和準確性同時，滿足數(shù)據(jù)分析利用的需要。

1.4 存儲中心

存儲中心主要負責儲存經(jīng)過加工層處理后的數(shù)據(jù)?，F(xiàn)有系統(tǒng)的Oracle關系數(shù)據(jù)庫與基于Hadoop構建的企業(yè)私有云存儲平臺組成了整個存儲中心，對于能夠導入通用數(shù)據(jù)分析模型使用的數(shù)據(jù)，直接用關系數(shù)據(jù)庫存儲，而對于需要深入挖掘或建模定制的數(shù)據(jù)交給云存儲。

1.5 分析層

存儲中心的數(shù)據(jù)套用現(xiàn)成的數(shù)據(jù)模型進行分析，根據(jù)數(shù)據(jù)的類型和規(guī)模要分別采取不同的方式。例如，結構化的數(shù)據(jù)可以在關系數(shù)據(jù)庫的存儲過程里完成，海量數(shù)據(jù)則要通過Hadoop MapReduce計算模型完成，最后將產(chǎn)生結果輸出到展現(xiàn)層。

1.6 展示層

通過構建用戶與系統(tǒng)之間的人機交互接口，及時將分析結果以圖表、報告等形式展示給用戶，對于企業(yè)私有云數(shù)據(jù)的日常性管理，如用戶系統(tǒng)管理權限設置、信息檢索、數(shù)據(jù)傳輸、預處理以及存儲策略控制等都可以通過數(shù)據(jù)庫管理的可視化界面進行操作。

2 企業(yè)私有云的構建

作為數(shù)據(jù)處理引擎的企業(yè)私有云，能有效實現(xiàn)云終端輕量化聚合，主要承擔大數(shù)據(jù)分析任務，而數(shù)據(jù)庫服務器與應用服務器可以看作接入云的“終端”，逐漸接近單一的輸入輸出功能，由此可以大幅減輕數(shù)據(jù)服務器和應用服務器的資源負載。

2.1 基于Hadoop的企業(yè)私有云架構

考慮到海量零售戶信息的特點，該私有云平臺架構采用分層、分布式結構設計而成，可劃分為數(shù)據(jù)存儲層、歸檔數(shù)據(jù)管理層、數(shù)據(jù)處理層、訪問接口層等四個層次。架構如圖1所示。

2.2 軟硬件環(huán)境的搭建

對于企業(yè)私有云的搭建必須先準備好JDK及SSH，軟件版本應使用穩(wěn)定版本而非最新版本[3]。由于Hadoop具有高容錯性及完備的備份機制，企業(yè)私有云DataNode節(jié)點考慮利用廉價PC機搭建服務器集群，克服傳統(tǒng)服務器集群、磁盤陣列技術存在的計算資源利用率不高、可擴展性不強等缺陷。同時NameNode是整個Hadoop集群的關鍵，負責HDFS文件系統(tǒng)的命名空間管理、元數(shù)據(jù)及塊管理等，因此NameNode服務器應購置費用更貴而性能穩(wěn)定、配置更高的中高端小型機。

2.3 系統(tǒng)網(wǎng)絡拓撲結構

基于Hadoop技術的服務器集群，可以根據(jù)日益增長的業(yè)務數(shù)據(jù)和應用需求的變化進行擴展，網(wǎng)絡拓撲結構包括兩層，機架1、2、3中的服務器分別共享帶寬1GB的網(wǎng)絡交換機，然后所有機架中的網(wǎng)絡交換機都統(tǒng)一由上層的核心路由器匯聚，并且應選用不低于1G帶寬的路由器。由于Hadoop具有良好的可靠性與可擴展性，通過增加機架和DataNode節(jié)點的方式，按需擴展存儲空間及計算資源。為進一步提高Hadoop集群的整體性能，必須進行科學合理的配置，以更好地為企業(yè)提供安全穩(wěn)定的數(shù)據(jù)資源存儲和利用服務。

3 系統(tǒng)應用效果

基于私有云架構的營銷分析系統(tǒng)建成后，實現(xiàn)了對全國約500萬活躍零售戶的訂單數(shù)據(jù)的抽取、加工和分析，可以實現(xiàn)卷煙工業(yè)企業(yè)核心零售戶和目標消費群體的精準定位，深入分析和展現(xiàn)當?shù)責煵菔袌霭l(fā)展趨勢、消費者的消費趨勢、卷煙結構的發(fā)展趨勢等，為卷煙投放、品牌培育提供了決策依據(jù)，同時可以通過手機APP推送給各個銷區(qū)，幫助銷區(qū)進行營銷活動，指導業(yè)務員開展市場走訪、維護等具體工作。

4 結語

本文結合卷煙工業(yè)企業(yè)實際，提出了一套基于私有云架構的營銷分析系統(tǒng)，介紹營銷分析系統(tǒng)的體系架構和基于hadoop企業(yè)私有云的構建方法、工作原理，最后描述整個系統(tǒng)部署方案及應用效果。

參考文獻

[1]王海飛.基于Hadoop云的數(shù)據(jù)庫營銷海量數(shù)據(jù)處理與挖掘的研究[D].浙江理工大學，2013.

[2]胡穎萍.基于移動互聯(lián)技術的煙草營銷系統(tǒng)設計與實現(xiàn)[D].江西財經(jīng)大學，2016.

[3]肖迎賓，許建，邢陽，沈毅，莊文杰.基于Android平臺的煙草移動營銷系統(tǒng)設計與實現(xiàn)[J].煙草科技，2015，（3）：98-102.

Design of Marketing Analysis System based on Private Cloud Architecture

LI Nan

（College of Mathematics and Computer Science， Yichun University， Yichun Jiangxi 336000）

Abstract：In order to make better use of the value of the massive data of enterprise and serve the decision of enterprise management， the thesis propose a type of marketing analysis system based on the private cloud architecture. It introduces the architecture of the marketing analysis system， the method based on hadoop enterprise private cloud and the role and working principle of the entire enterprise cloud in the system， the deployment plan of the system is finally designed.

Key words：private cloud; Hadoop; marketing analysis system; management decision