劉長文

“還有不到一分鐘，晚會就要開始了，大家要密切關(guān)注在線用戶數(shù)和系統(tǒng)負(fù)荷……”9月24日晚7時59分，中國移動山東公司網(wǎng)優(yōu)室專家吳德勝提醒著身邊的同事。

作為2018年中央廣播電視總臺中秋晚會（以下簡稱中秋晚會）現(xiàn)場通信保障專家支援團(tuán)隊(duì)的組長，吳德勝已進(jìn)駐濟(jì)南曲阜尼山一個多月，他和同事們白天勘察現(xiàn)場，晚上討論方案，結(jié)合演出現(xiàn)場的實(shí)際情況，吳德勝提出“宏微協(xié)同”“T/F協(xié)同”“賦型天線”等技術(shù)方案，成功解決了密集組網(wǎng)下的同頻干擾問題和容量受限問題。

隨著《海上生明月》歌曲的結(jié)束，中秋晚會緩緩落下帷幕。在這臺華麗大戲的背后，有著許許多多像吳德勝一樣的山東移動的員工，他們?yōu)榱吮Ｕ现星锿頃ㄐ艜惩?，舍棄與家人幸福團(tuán)聚時刻，堅(jiān)守工作一線，以最高的標(biāo)準(zhǔn)、最嚴(yán)的要求、最實(shí)的舉措，實(shí)現(xiàn)了“零重大網(wǎng)絡(luò)事故、零重大安全事件、零重大客戶投訴”的既定目標(biāo)，不僅為中秋晚會的保障工作畫上了圓滿的句號，也踐行了駐魯央企的社會責(zé)任和使命擔(dān)當(dāng)。

三級聯(lián)動 應(yīng)急預(yù)案一分鐘響應(yīng)

對山東移動來說，保障中秋晚會通信和網(wǎng)絡(luò)暢通面臨三大挑戰(zhàn)：一是從會場確定到舉辦僅有40天時間，籌備期短；二是會場所在景區(qū)為新建景區(qū)，網(wǎng)絡(luò)覆蓋弱；三是原有網(wǎng)絡(luò)設(shè)施單一，需要立體組網(wǎng)建設(shè)。

“為此，我們不畏艱難、迎難而上，發(fā)揮省、市、區(qū)三級聯(lián)動的組織優(yōu)勢、精干創(chuàng)新的技術(shù)優(yōu)勢和精心細(xì)致服務(wù)優(yōu)勢，因地制宜在會場900米處設(shè)立前線指揮部，劃分6個保障區(qū)域、60個點(diǎn)位，責(zé)任到人，制定科學(xué)、有效、具體、優(yōu)化的保障方案，優(yōu)質(zhì)高效開展通信保障工作?！鄙綎|移動相關(guān)負(fù)責(zé)人說。

“按照各保障目標(biāo)的綜合保障分級、區(qū)域分布以及9月可能出現(xiàn)的惡劣氣候影響概率，我們按照重保點(diǎn)位+網(wǎng)格分級保障的方式，制定差異化保障方案。”參與中秋晚會保障的技術(shù)人員石紹震說。此外，為應(yīng)對用戶數(shù)激增，山東移動對區(qū)域內(nèi)的站點(diǎn)擴(kuò)容并從各地市調(diào)配多臺應(yīng)急通信車，進(jìn)行網(wǎng)絡(luò)結(jié)構(gòu)調(diào)整，應(yīng)對風(fēng)險(xiǎn)。

在加強(qiáng)體制機(jī)制創(chuàng)新的同時，中國移動山東公司也啟動了“一點(diǎn)一案”“一事一策”的應(yīng)急預(yù)案，全方位、無死角地保障晚會的通信暢通。具體來說，在網(wǎng)格方面，山東移動對保障區(qū)域根據(jù)站點(diǎn)數(shù)量、場館酒店的分布分級劃分網(wǎng)格，并制定網(wǎng)格保障方案，實(shí)現(xiàn)保障區(qū)域的點(diǎn)、線、面兼顧保障。其中，尼山圣境、三孔景區(qū)等重保景區(qū)、媒體酒店等重保區(qū)域及周邊基站，實(shí)現(xiàn)一級保障。一級保障網(wǎng)格的維護(hù)人員和備件配置按照1分鐘響應(yīng)，5分鐘到達(dá)，10分鐘處理故障的要求進(jìn)行配備。

據(jù)統(tǒng)計(jì)，自8月20日到晚會當(dāng)天，山東移動共出動保障人員1900人次，保障車輛600臺次，濟(jì)寧移動對23個核心機(jī)房、60個點(diǎn)位實(shí)施不間斷巡檢。

硬件升級 提升晚會通信保障能力

在通信網(wǎng)絡(luò)保障方面，山東移動提前做好人員、物資等資源儲備，以充足的準(zhǔn)備、周全的預(yù)案和務(wù)實(shí)的執(zhí)行，推進(jìn)保障工作落地落實(shí)，確保網(wǎng)絡(luò)平穩(wěn)運(yùn)行。

“為了確?，F(xiàn)場網(wǎng)絡(luò)運(yùn)行穩(wěn)定，我們按照省公司的要求，頂著酷暑，冒著大雨，堅(jiān)守工作一線，將保障區(qū)域從沒有獨(dú)立基站覆蓋的信號‘盲區(qū)’打造成為優(yōu)質(zhì)高效的分層保障網(wǎng)絡(luò)?！眳⑴c硬件鋪設(shè)的技術(shù)人員孔利說，短短40天內(nèi)，他們協(xié)調(diào)鐵塔、中移、代維等一切力量，新建宏站、微站、室分等50余處，擴(kuò)容2G小區(qū)1000余處，4G小區(qū)2000余處，完成景區(qū)途經(jīng)道路、會場周邊、香格里拉等住宿酒店網(wǎng)絡(luò)無縫覆蓋，確保用戶可隨時隨地暢享無線網(wǎng)絡(luò)。其中，多數(shù)現(xiàn)場值守的工作人員面對吃住不便的情況，他們毫無怨言，餓了吃碗方便面，困了在簡易行軍床上休息一會兒……

其中，山東移動在核心區(qū)域?qū)嵤半p電源、雙設(shè)備、雙上連、雙時鐘、雙IP、雙備份、雙路由/三路由、池組化”的多維度容災(zāi)保障，構(gòu)建“容災(zāi)層、覆蓋層、容量層、體驗(yàn)層”四重網(wǎng)絡(luò)架構(gòu)，采用融合組網(wǎng)、分場景應(yīng)用多類新技術(shù)，保障核心區(qū)域的用戶感知及網(wǎng)絡(luò)安全。

在整臺晚會演出期間，山東移動專業(yè)的通信保障領(lǐng)導(dǎo)小組成員們發(fā)揚(yáng)工匠精神、精益求精、忘我工作，以實(shí)際行動捍衛(wèi)了“網(wǎng)絡(luò)質(zhì)量是通信企業(yè)生命線”的誓言，讓中國移動4G通信技術(shù)在中秋晚會期間大放異彩。

“保障人員實(shí)時測試現(xiàn)場的信號強(qiáng)度和呼叫、上網(wǎng)情況，后臺維護(hù)人員密切關(guān)注話務(wù)設(shè)備的運(yùn)行情況、專用通信保障車輛及保障人員24小時值班駐扎晚會會場和各個線路節(jié)點(diǎn)，專人巡檢人員也正沿途密切關(guān)注線路的安全狀況?！爆F(xiàn)場保障人員顧濤介紹。

據(jù)統(tǒng)計(jì)，晚會當(dāng)天主會場高速流量達(dá)1TB，相當(dāng)于上傳26萬張圖片或35000條短視頻（每條30M）；高速、穩(wěn)定、安全的4G+網(wǎng)絡(luò)得到了社會各界的廣泛認(rèn)可。

優(yōu)質(zhì)服務(wù) 圓滿保障用戶體驗(yàn)

在晚會現(xiàn)場，一排山東移動的雙語服務(wù)話務(wù)員令人眼前一亮。為了保障晚會的順利進(jìn)行，中國移動山東公司組建了現(xiàn)場服務(wù)專項(xiàng)保障團(tuán)隊(duì)，設(shè)置雙語熱線臺席、營業(yè)廳雙語臺席等，熱忱解答廣大客戶的需求。

據(jù)了解，晚會現(xiàn)場話務(wù)量激增，語音和短信容量是平時的2到3倍，而手機(jī)上網(wǎng)連接次數(shù)是平時的10倍左右。由于準(zhǔn)備充分、保障得力，晚會現(xiàn)場信號暢通無阻。許多中國移動用戶都暢快地通過手機(jī)享受高速移動互聯(lián)網(wǎng)服務(wù)；通過電話、短信、微信、郵件向親朋好友送上中秋祝福；通過朋友圈、微博分享晚會的精彩節(jié)目……

據(jù)統(tǒng)計(jì)，在中秋晚會期間，濟(jì)寧曲阜尼山景區(qū)用戶數(shù)1.95萬人，其中演出主會場9100多人。4G數(shù)據(jù)流量累計(jì)684GB，較日常增長9倍，主要是上傳業(yè)務(wù)量較大，單小區(qū)最高上行利用率為72%。網(wǎng)絡(luò)經(jīng)受住了高密度業(yè)務(wù)考驗(yàn)，4G無線接通率為99.96%，無線掉線率為0，業(yè)務(wù)感知良好。

“主會場業(yè)務(wù)測試下行速率47MBps，上行速率28Mbps，網(wǎng)絡(luò)質(zhì)量令廣大用戶滿意?！爆F(xiàn)場技術(shù)人員孔利說。

晚會保障期間，山東移動共出動保障人員1900人次，保障車輛600臺次。濟(jì)寧移動對23個核心機(jī)房、60個點(diǎn)位實(shí)施不間斷巡檢，各系統(tǒng)運(yùn)轉(zhuǎn)正常，網(wǎng)絡(luò)運(yùn)行整體平穩(wěn)。

2018年中央廣播電視總臺中秋晚會服務(wù)保障工作已圓滿完成，但山東移動矢志打造高品質(zhì)通信網(wǎng)絡(luò)的初心不變，站在新起點(diǎn)，謀劃新發(fā)展，實(shí)現(xiàn)新跨越，他們將以更加務(wù)實(shí)的作風(fēng)、更加昂揚(yáng)的精神狀態(tài)，勇立潮頭，譜寫互聯(lián)網(wǎng)+時代的新篇章。

智能設(shè)備 實(shí)現(xiàn)“1分鐘監(jiān)控”

為全面做好晚會的通信保障和指揮調(diào)度工作，山東移動繼在上合組織青島峰會之后，再次引入人工智能設(shè)備，利用基于AI的“智多星”指揮調(diào)度系統(tǒng)，實(shí)現(xiàn)了智能決策和智能調(diào)度。

筆者在中秋晚會現(xiàn)場看到兩輛大塊頭的廂式貨車：一輛是應(yīng)急指揮車，另一輛則是“海納”號應(yīng)急信號車。應(yīng)急指揮車可以實(shí)現(xiàn)網(wǎng)絡(luò)的現(xiàn)場指揮調(diào)度，工作人員坐在車內(nèi)實(shí)時了解現(xiàn)場情況，更能通過數(shù)據(jù)系統(tǒng)實(shí)時調(diào)取全網(wǎng)數(shù)據(jù)，通過視頻會議進(jìn)行網(wǎng)絡(luò)調(diào)度指揮，及時協(xié)調(diào)后方指揮中心和前方工作調(diào)度。

而“海納”號應(yīng)急信號車一旦開啟，整車可開啟22個小區(qū)，支持2.8萬戶接入、1.1萬戶業(yè)務(wù)并發(fā)。

“智多星”指揮調(diào)度系統(tǒng)的應(yīng)用，可實(shí)現(xiàn)預(yù)案操作指令自動生成，執(zhí)行效率提升10倍以上；圍繞場景地圖建立作戰(zhàn)室，基于地圖的多維聚合信息進(jìn)行戰(zhàn)況預(yù)判，將預(yù)案處理方法自動推送至相關(guān)維護(hù)人員，確保出現(xiàn)問題能夠及時發(fā)現(xiàn)快速處置。

據(jù)了解，該系統(tǒng)是在上合青島峰會首次啟用后，再次應(yīng)用于重大活動保障。智多星指揮調(diào)度系統(tǒng)打通了27個系統(tǒng)、147個接口，針對228個應(yīng)急預(yù)案，建立了22個場景、500余個指標(biāo)的監(jiān)控預(yù)警指揮作戰(zhàn)體系。

該系統(tǒng)可以根據(jù)保障場景智能化調(diào)度，實(shí)現(xiàn)保障任務(wù)的自動分派和自動通知，智能化搶修信息自動推送，應(yīng)急通信車等應(yīng)急資源的調(diào)度預(yù)通知，實(shí)現(xiàn)對業(yè)務(wù)量、業(yè)務(wù)質(zhì)量、業(yè)務(wù)負(fù)荷1分鐘粒度實(shí)時監(jiān)控，1分鐘實(shí)時調(diào)整，實(shí)現(xiàn)不同網(wǎng)絡(luò)之間的負(fù)荷均衡，確保大業(yè)務(wù)量場景下用戶的使用感知，并通過GPS跟蹤應(yīng)急資源的位置和移動情況，提升調(diào)度能力。

同時，通過大屏端、PC端和掌上端三個模式，以大屏端為“腦”進(jìn)行指揮調(diào)度，以手機(jī)端為“眼”獲取現(xiàn)場實(shí)景，以PC端為“手”執(zhí)行應(yīng)急操作，手、眼、腦協(xié)同作戰(zhàn)，形成三屏聯(lián)動的指揮作戰(zhàn)體系，有效支撐了指揮中心、保障現(xiàn)場、各專業(yè)保障人員“三位一體”的通信保障組織體系。

值得一提的是，圍繞網(wǎng)絡(luò)通信、網(wǎng)絡(luò)質(zhì)量、網(wǎng)絡(luò)安全三類保障，山東移動充分考慮設(shè)備類型、業(yè)務(wù)場景、事件影響等因素，建立“總體-業(yè)務(wù)-事件-設(shè)備-區(qū)域場館”五位一體的應(yīng)急預(yù)案體系，實(shí)現(xiàn)全面覆蓋。

此外，山東移動也將自主研發(fā)的一鍵容災(zāi)系統(tǒng)投入到了中秋晚會通信保障中。

“一鍵容災(zāi)系統(tǒng)，把以往的維護(hù)經(jīng)驗(yàn)梳理成固化的維護(hù)腳本，采用圖形化操作方式，將核心網(wǎng)各專業(yè)的容災(zāi)倒換操作進(jìn)行集成，實(shí)現(xiàn)了網(wǎng)元的一鍵容災(zāi)，將單一設(shè)備的隔離倒換時間從20分鐘縮短至1分鐘，大大縮短了業(yè)務(wù)的恢復(fù)時間?！奔夹g(shù)保障專家馬進(jìn)說。

立體組網(wǎng) 應(yīng)對流量爆發(fā)場景

作為中秋晚會主會場的濟(jì)寧曲阜尼山，其觀眾區(qū)域面積高達(dá)3600平方米，聚集人數(shù)近萬人，峰值活躍用戶近6000人，客戶微信、視頻、拍照等分享業(yè)務(wù)需求旺盛，上行業(yè)務(wù)感知保障壓力大。

為應(yīng)對區(qū)域面積小、流量密度高、無線環(huán)境復(fù)雜等一系列難題，山東移動采用立體組網(wǎng)方案，全無線頻段、全設(shè)備形態(tài)、全網(wǎng)絡(luò)制式系統(tǒng)支撐，靈活運(yùn)用3D-MIMO、寬頻宏站、微站、皮站等多類型設(shè)備，充分發(fā)揮3DMIMO強(qiáng)大的上下行空分及FDD上行承載能力。

同時，積極創(chuàng)新應(yīng)用天線賦形、Pre-5G等先進(jìn)技術(shù)手段，通過“宏微協(xié)同”“高低協(xié)同”“遠(yuǎn)近協(xié)同”，大幅提升系統(tǒng)上行容量。

部署“基于業(yè)務(wù)的調(diào)度策略”，重點(diǎn)提升微信等熱點(diǎn)業(yè)務(wù)感知，有效保障用戶集中拍攝視頻上傳朋友圈等業(yè)務(wù)需求，同步分享精彩瞬間。

此外，加大外圍傳輸網(wǎng)接入容量，新建第三路由，將PTN接入環(huán)網(wǎng)帶寬提升至10GE；從“七雙、三路、一站一案、網(wǎng)格化巡視”多維度提升網(wǎng)絡(luò)安全，重保區(qū)域雙設(shè)備、雙廠家、雙環(huán)網(wǎng)、雙上連、雙時鐘、雙IP、雙備份，全量加載1588V2時鐘，形成基站時鐘雙保險(xiǎn)，有效防范了大范圍GPS干擾風(fēng)險(xiǎn)。