為了提升生產(chǎn)和管理效率,降低創(chuàng)新成本,制造企業(yè)迫切需要一個(gè)平臺,統(tǒng)一管理企業(yè)海量的數(shù)據(jù)資產(chǎn),挖掘數(shù)據(jù)的核心價(jià)值,最大程度地釋放數(shù)據(jù)生產(chǎn)力,支撐智慧運(yùn)營與業(yè)務(wù)創(chuàng)新。這個(gè)平臺就是人們常說的數(shù)據(jù)中臺,也就是企業(yè)不可或缺的“數(shù)據(jù)大腦”。
作為全球知名的制造企業(yè),海信從2019年2月開始搭建其大數(shù)據(jù)平臺,并于4月30日正式上線,兩個(gè)多月時(shí)間內(nèi)完成了5000多個(gè)調(diào)度,以及數(shù)千個(gè)表的遷移,雖然時(shí)間緊、任務(wù)重,但在戴爾公司的全力配合下,加班加點(diǎn)、傾斜資源,最終保證了大數(shù)據(jù)平臺按期成功上線。
海信從2015年開始了大數(shù)據(jù)方面的探索,并于2018年重組IT與數(shù)據(jù)管理部,下設(shè)大數(shù)據(jù)部,眾多大數(shù)據(jù)相關(guān)項(xiàng)目持續(xù)上馬,2018年年底,大數(shù)據(jù)平臺項(xiàng)目完成了論證。
“我們部門的核心職能是數(shù)據(jù)中臺建設(shè)、數(shù)據(jù)應(yīng)用和數(shù)據(jù)治理?!焙P偶瘓F(tuán)有限公司IT與數(shù)據(jù)管理部大數(shù)據(jù)部長羅慶干表示,對于制造企業(yè)而言,數(shù)字化主要解決了以下三個(gè)方面的業(yè)務(wù)問題:首先,支撐領(lǐng)導(dǎo)快速、準(zhǔn)確的決策;其次,有效助力生產(chǎn),尤其是在供應(yīng)鏈端,將工業(yè)大數(shù)據(jù)、工業(yè)互聯(lián)網(wǎng)等與業(yè)務(wù)緊密結(jié)合,提升生產(chǎn)線的自動化程度;最后,以數(shù)據(jù)為驅(qū)動,支持一些創(chuàng)新應(yīng)用,比如防竄貨和資金占用,進(jìn)而提升效率,降低成本,建立核心競爭優(yōu)勢。
海信集團(tuán)有限公司IT與數(shù)據(jù)管理部大數(shù)據(jù)部數(shù)據(jù)中臺總監(jiān)劉海波回憶說,在大數(shù)據(jù)平臺籌建前,存在數(shù)據(jù)孤島、數(shù)據(jù)時(shí)效性低和數(shù)據(jù)質(zhì)量差等問題。它是阻礙海信集團(tuán)數(shù)字化進(jìn)程、影響數(shù)據(jù)創(chuàng)新能力的絆腳石。首先,由于數(shù)據(jù)量越來越大,傳統(tǒng)的數(shù)據(jù)倉庫已捉襟見肘。其次,從2015年開始大規(guī)模應(yīng)用的數(shù)據(jù)倉庫在性能上已經(jīng)跟不上業(yè)務(wù)發(fā)展的要求,尤其是在數(shù)據(jù)處理的時(shí)效性方面,雖然系統(tǒng)一直在優(yōu)化,數(shù)據(jù)處理的效率不斷提升,處理周期從一天逐漸縮短至12個(gè)小時(shí)、8個(gè)小時(shí)甚至2個(gè)小時(shí),但2個(gè)小時(shí)基本上已是傳統(tǒng)數(shù)據(jù)倉庫的處理極限。最后,問題數(shù)據(jù)找不到具體的責(zé)任人、流程和機(jī)制。如何突破這一瓶頸,讓業(yè)務(wù)處理的時(shí)效性和數(shù)據(jù)應(yīng)用再上一個(gè)臺階呢?數(shù)據(jù)中臺和數(shù)據(jù)管理體系的建設(shè)成了當(dāng)務(wù)之急,戴爾積極參與其中。
在很多人的印象中,戴爾一直是一個(gè)IT基礎(chǔ)架構(gòu)解決方案提供商,而非典型意義上的“大數(shù)據(jù)廠商”。但是經(jīng)過嚴(yán)格的招標(biāo)流程,海信集團(tuán)最終還是屬意戴爾公司,這背后有何原委?
劉海波表示,戴爾的加入帶動了整個(gè)項(xiàng)目的成功。戴爾本身就是一家成功的制造企業(yè)。它對客戶需求的理解,以及作為制造企業(yè)本身數(shù)字化的經(jīng)驗(yàn)是一種有益的借鑒和啟示。制造企業(yè)的數(shù)據(jù)遠(yuǎn)比互聯(lián)網(wǎng)企業(yè)復(fù)雜,數(shù)據(jù)類型、處理邏輯、業(yè)態(tài)等更加多樣化,如此復(fù)雜的數(shù)據(jù)和處理再集成到一起,就如同一座橫亙在用戶面前的大山。海信自身還有更大的“特殊性”,那就是它有歷史積累的7套SAP系統(tǒng),將這7套SAP系統(tǒng)的所有數(shù)據(jù)有效集成起來,僅此一項(xiàng)可能就會讓一些大數(shù)據(jù)廠商望而卻步。戴爾的突出優(yōu)勢在于,其項(xiàng)目經(jīng)理在制造企業(yè)數(shù)字化知識的深度和廣度上更勝一籌,尤其是對客戶數(shù)據(jù)集成和處理需求的理解很到位,在項(xiàng)目執(zhí)行過程中遇到問題時(shí),可以采取更加積極有效的辦法,協(xié)調(diào)資源,克服難關(guān)。
“戴爾為我們推薦了Gre enplum企業(yè)級數(shù)據(jù)倉庫。20 18年年底,我們對Greenplum做過一次POC,其優(yōu)異表現(xiàn)得到了一致的認(rèn)可?!眲⒑2ń榻B說,“Greenplum在部署之后,對某些業(yè)務(wù)場景起到了十分有效的優(yōu)化作用,并開發(fā)了一些與大數(shù)據(jù)平臺對接的接口,方便業(yè)務(wù)查詢。”
如今,包括供應(yīng)鏈中的質(zhì)量管理系統(tǒng)等在內(nèi)的許多大數(shù)據(jù)項(xiàng)目正逐步遷移到大數(shù)據(jù)平臺之上。在這些應(yīng)用從原來的數(shù)據(jù)庫遷移到Greenplum平臺的過程中,戴爾團(tuán)隊(duì)提出了很多優(yōu)化的建設(shè)和提案,取得令人滿意的效果。
7套SAP系統(tǒng),版本各不相同,在戴爾的幫助下,大數(shù)據(jù)部通過逐一實(shí)施,不僅打補(bǔ)丁,而且又填平了很多技術(shù)上的“坑”,將SAP SLT全面充分地應(yīng)用起來,很好地解決了管理報(bào)表的相關(guān)問題。另外,為了實(shí)現(xiàn)敏捷開發(fā),大數(shù)據(jù)部在戴爾的協(xié)助下還開發(fā)了一些工具。以前,開發(fā)一個(gè)ETL至少需要15分鐘,現(xiàn)在借助這些新的開發(fā)工具,可能只需要5分鐘,簡單配置一下,就能將數(shù)據(jù)提取出來,改善了應(yīng)用體驗(yàn)。在大數(shù)據(jù)平臺正式上線后,大數(shù)據(jù)部曾經(jīng)做了測試,整體的數(shù)據(jù)處理效率提升200%以上。讓劉海波印象深刻的是,與產(chǎn)品大數(shù)據(jù)處理相關(guān)的一項(xiàng)作業(yè),以前需要跑15~20個(gè)小時(shí),而采用Greenplum后,處理時(shí)間只需兩分鐘。而且數(shù)據(jù)量越大,效率提升得越明顯?!疤嵘鎯δ芰?、計(jì)算效率和數(shù)據(jù)處理的時(shí)效性,這三大目標(biāo)在大數(shù)據(jù)平臺建立后得以完全實(shí)現(xiàn)?!眲⒑2ū硎?。
在大數(shù)據(jù)平臺上線運(yùn)行后的大約一年時(shí)間里,已有幾十個(gè)項(xiàng)目安全平穩(wěn)地運(yùn)行在這一平臺之上?!?019年初,我們在建設(shè)這個(gè)大數(shù)據(jù)平臺時(shí),對‘?dāng)?shù)據(jù)中臺’概念還沒有很深的體會。但在與戴爾合作完成大數(shù)據(jù)平臺建設(shè)并上線運(yùn)行后,我們感覺數(shù)據(jù)中臺的意味越來越濃。”劉海波表示,“搭平臺只是第一步,接下來更重要的是基于此平臺將所有數(shù)據(jù)盡快整合起來,再在業(yè)務(wù)數(shù)據(jù)整合的基礎(chǔ)上建立數(shù)據(jù)集市。從應(yīng)用的角度,數(shù)據(jù)中臺的完善要與業(yè)務(wù)的發(fā)展同步,以保障智能制造、供應(yīng)鏈自動化等場景的實(shí)現(xiàn)和優(yōu)化。”
2020年,大數(shù)據(jù)部將通過數(shù)據(jù)預(yù)言及時(shí)發(fā)現(xiàn)業(yè)務(wù)中存在的問題,不斷深化在大數(shù)據(jù)方面的探索。
劉海波點(diǎn)出了在大數(shù)據(jù)應(yīng)用方面的最大閃光點(diǎn),那就是其大數(shù)據(jù)平臺更加多元化,不僅支持Hadoop等開源大數(shù)據(jù)應(yīng)用,而且兼顧傳統(tǒng)數(shù)據(jù)庫和像Greenplum這樣的新型數(shù)據(jù)庫,即使是新興的5G、物聯(lián)網(wǎng)等應(yīng)用也不在話下?!皩⒍喾N類型的數(shù)據(jù)庫無縫集成在一起,根據(jù)數(shù)據(jù)的需要將其存儲在最適合的數(shù)據(jù)庫中,并且做好規(guī)劃,這樣才能事半功倍?!眲⒑2ū硎尽?/p>
經(jīng)過幾年的摸索和實(shí)踐,大數(shù)據(jù)部做得最成熟的就是報(bào)表應(yīng)用,以及防竄貨和資金占用等應(yīng)用。讓很多企業(yè)感到頭痛的是,由于報(bào)表開發(fā)一味追求大而全,不僅越來越復(fù)雜,而且成本居高不下。在搭建數(shù)據(jù)中臺的過程中,大數(shù)據(jù)部同步開發(fā)了信數(shù)平臺,基于敏捷開發(fā)的方式實(shí)現(xiàn)了快速開發(fā)、快速交付和快速迭代,當(dāng)用戶提出需求后,一天之內(nèi)便可實(shí)現(xiàn)報(bào)表上線并推送數(shù)據(jù),發(fā)現(xiàn)問題后還能及時(shí)修正。
“基于信數(shù)平臺,我們實(shí)現(xiàn)了報(bào)表的生命周期管理,比如在報(bào)表長期不用的情況下,系統(tǒng)可自動將閑置的資源重新釋放出來?!眲⒑2ń榻B說,“在Tableau、永洪BI、Java自開發(fā)等多種報(bào)表工具并存的情況下,我們還是通過信數(shù)平臺將不同的報(bào)表無縫集成起來,用戶不必關(guān)心報(bào)表產(chǎn)生自哪個(gè)平臺或業(yè)務(wù)系統(tǒng),通過目錄檢索即可輕松找到所需的報(bào)表數(shù)據(jù),然后推送到應(yīng)用前端。這個(gè)信數(shù)平臺的后端就是之前建立的大數(shù)據(jù)平臺?!?/p>
從大數(shù)據(jù)平臺上線到現(xiàn)在,大數(shù)據(jù)部一直保持著與戴爾團(tuán)隊(duì)的密切溝通和協(xié)作,比如Greenplum或SAP SLT需要進(jìn)一步優(yōu)化和調(diào)整,戴爾的技術(shù)人員都會在第一線時(shí)間解決問題。另外,大數(shù)據(jù)部還在戴爾的協(xié)助下開發(fā)了一些腳本,進(jìn)一步簡化應(yīng)用與管理,比如從Greenplum內(nèi)部實(shí)現(xiàn)數(shù)據(jù)同步,以前都需要手工實(shí)現(xiàn),現(xiàn)在通過一個(gè)開發(fā)的自動化程序即可完成。諸如此類的優(yōu)化還有很多。
與戴爾團(tuán)隊(duì)的合作,讓劉海波深切感受到,戴爾不僅僅是大數(shù)據(jù)平臺項(xiàng)目的一個(gè)解決方案提供商,而是更像一個(gè)目標(biāo)一致、行動一致的戰(zhàn)略合作伙伴。羅慶干表示,未來我們在大數(shù)據(jù)方面將重點(diǎn)在兩個(gè)方向上發(fā)力:一是繼續(xù)提升數(shù)據(jù)質(zhì)量,建立整體的數(shù)據(jù)管理體系;二是在供應(yīng)鏈方面,更好地支持集團(tuán)的智能制造、人工智能等應(yīng)用。
眾所周知,戴爾在IT產(chǎn)品制造領(lǐng)域以高效的供應(yīng)鏈管理而聞名,特別是在利用數(shù)字化技術(shù)降低庫存和成本,實(shí)現(xiàn)定制化生產(chǎn),強(qiáng)化供應(yīng)鏈上的信息流通速度和透明度方面獨(dú)樹一幟。這些成功的經(jīng)驗(yàn)也是很多制造企業(yè)可以借鑒的。在與戴爾團(tuán)隊(duì)合作的過程中,羅慶干對于戴爾在供應(yīng)鏈方面的技術(shù)和知識儲備以及實(shí)操能力印象深刻。以現(xiàn)在的數(shù)據(jù)中臺為著力點(diǎn),雙方很可能在供應(yīng)鏈和營銷等方面有更加深入的合作,共同探索和挖掘一些新的應(yīng)用場景。
此次新冠疫情的出現(xiàn),讓我們再次認(rèn)識到制造業(yè)實(shí)現(xiàn)數(shù)字化轉(zhuǎn)型和智能化升級的重要性和必要性。通過先進(jìn)的技術(shù)平臺和現(xiàn)代化的流程設(shè)計(jì),尤其是數(shù)據(jù)中臺的溝通和連接,將為制造業(yè)的復(fù)蘇和再次騰飛插上數(shù)字化的翅膀。