□方 成

AVID非編網(wǎng)硬件故障風(fēng)險(xiǎn)分析

□方 成

本文以廣西電視臺(tái)的AVID非編網(wǎng)維護(hù)團(tuán)隊(duì)在日常維護(hù)和工作中遇到的情況為例，從設(shè)備安全風(fēng)險(xiǎn)的角度出發(fā)，介紹AVID網(wǎng)絡(luò)架構(gòu)、核心存儲(chǔ)、服務(wù)集群以及客戶端的安全風(fēng)險(xiǎn)防控分析以及相關(guān)解決方案。

AVID非編網(wǎng)；風(fēng)險(xiǎn)分析；事故分級(jí)；應(yīng)急預(yù)案

一、項(xiàng)目介紹

廣西電視臺(tái)AVID非編網(wǎng)的建網(wǎng)時(shí)間為2008年，該網(wǎng)主要為除新聞及資訊頻道外的全臺(tái)所有高、標(biāo)清頻道日常播出的節(jié)目提供一個(gè)穩(wěn)定、可靠、高效的制作平臺(tái)。

AVID非編網(wǎng)的組成由以下幾大塊構(gòu)成：核心存儲(chǔ)、管理服務(wù)器集群、精編工作站、配音工作站、演播室信號(hào)收錄服務(wù)器、技監(jiān)級(jí)審片室、文件類視頻素材上載工作站、外來(lái)文件導(dǎo)入服務(wù)器。同時(shí)，主網(wǎng)還連接著音頻制作網(wǎng)，以及多個(gè)小型非編子網(wǎng)。

二、網(wǎng)絡(luò)設(shè)備故障類風(fēng)險(xiǎn)防控

為了便于管理，首先對(duì)突發(fā)事故做一套分級(jí)處理制度。當(dāng)故障發(fā)生，處理的時(shí)間會(huì)影響當(dāng)天播出節(jié)目的，定義為一級(jí)重大故障，啟動(dòng)相應(yīng)的重大應(yīng)急預(yù)案。當(dāng)故障處理時(shí)間大于1個(gè)小時(shí)小于3個(gè)小時(shí)，但不影響當(dāng)天節(jié)目下載的，定義為一級(jí)故障，啟動(dòng)相應(yīng)的一級(jí)應(yīng)急預(yù)案。當(dāng)故障處理時(shí)間小于1個(gè)小時(shí)并且不影響當(dāng)天節(jié)目下載的，定義為二級(jí)故障，啟動(dòng)相應(yīng)的二級(jí)應(yīng)急預(yù)案。當(dāng)故障處理時(shí)間小于半個(gè)小時(shí)并且不影響當(dāng)天節(jié)目下載的，定義為三級(jí)故障，啟動(dòng)相應(yīng)的三級(jí)應(yīng)急預(yù)案。

（一）風(fēng)險(xiǎn)一：核心存儲(chǔ)ISIS 2000故障風(fēng)險(xiǎn)及應(yīng)急預(yù)案

1.刀片故障風(fēng)險(xiǎn)

風(fēng)險(xiǎn)發(fā)生幾率：低；故障分級(jí)：重大故障；故障處理時(shí)間：30分鐘-5小時(shí)。

整套存儲(chǔ)中，當(dāng)損壞任意一塊刀片，系統(tǒng)會(huì)自動(dòng)將故障刀片剔除，剩余刀片自動(dòng)重新整合，整合完成后，將恢復(fù)容災(zāi)能力。事后，只需要更換冷備刀片即可。如果同一時(shí)間損壞兩塊刀片或以上，將會(huì)導(dǎo)致存儲(chǔ)內(nèi)的數(shù)據(jù)丟失。這類風(fēng)險(xiǎn)通常只會(huì)發(fā)生在盤(pán)箱斷電后的重啟過(guò)程中。應(yīng)急預(yù)案：如果是重啟盤(pán)箱導(dǎo)致的刀片無(wú)法加載，嘗試重新盤(pán)箱加電，如確認(rèn)刀片發(fā)生故障，在網(wǎng)絡(luò)平臺(tái)系統(tǒng)完全啟動(dòng)后，將故障刀片手動(dòng)剔除，并更換冷備刀片，盤(pán)箱會(huì)自動(dòng)進(jìn)行修復(fù)。在修復(fù)的時(shí)段內(nèi)，盤(pán)箱性能會(huì)有所下降。

首先是為客戶端提供家庭服務(wù)，后面越來(lái)越清晰，叫“讓家更美好”，58到家只做到家里提供的服務(wù)，這就是叫“到家”的根本原因。雖然后來(lái)美團(tuán)等一些公司也叫“到家”，但是他們更多是把外賣“送”到家里，而58到家是服務(wù)人員去家里服務(wù)。

2.交換背板故障風(fēng)險(xiǎn)

風(fēng)險(xiǎn)發(fā)生幾率：低；故障分級(jí)：三級(jí)故障；故障處理時(shí)間：半小時(shí)內(nèi)。

位于每個(gè)盤(pán)箱后部的交換背板，是網(wǎng)內(nèi)所有設(shè)備連接存儲(chǔ)的接口，一旦發(fā)生故障，將會(huì)導(dǎo)致連接在此端口上的相應(yīng)設(shè)備無(wú)法訪問(wèn)網(wǎng)絡(luò)。應(yīng)急預(yù)案：首先確定故障交換背板的位置，將故障端口上的設(shè)備網(wǎng)線移至其他盤(pán)箱同網(wǎng)段的交換背板即可恢復(fù)設(shè)備的連接。然后在設(shè)備維護(hù)時(shí)間內(nèi)，更換冷背交換背板。

3.盤(pán)箱電源故障風(fēng)險(xiǎn)：

風(fēng)險(xiǎn)發(fā)生幾率：低；故障分級(jí)：重大故障。

存儲(chǔ)的每個(gè)盤(pán)箱均配置使用三組獨(dú)立電源供電，失去其中任意一路電源，都不會(huì)影響盤(pán)箱正常工作，但是一旦發(fā)生兩路電源故障就容易導(dǎo)致盤(pán)箱意外斷電，有可能會(huì)損壞刀片。同時(shí)，盤(pán)箱的刀片電源指示燈會(huì)閃爍報(bào)警，提醒注意。應(yīng)急預(yù)案：更換電源備件，同時(shí)檢查數(shù)據(jù)是否丟失，必要時(shí)通知節(jié)目部門(mén)，啟動(dòng)欄目?jī)?nèi)部的應(yīng)急備播機(jī)制。

（二）風(fēng)險(xiǎn)二：中心機(jī)房核心服務(wù)器集群故障風(fēng)險(xiǎn)及應(yīng)急預(yù)案

風(fēng)險(xiǎn)發(fā)生幾率：中；故障分級(jí)：三級(jí)故障；故障處理時(shí)間：網(wǎng)絡(luò)系統(tǒng)重啟大約耗時(shí)半小時(shí)。

網(wǎng)內(nèi)所有核心管理服務(wù)器都是采用主備同時(shí)在線的方式，主備服務(wù)器之間通過(guò)心跳線相互檢測(cè)，自動(dòng)切換。每臺(tái)服務(wù)器都是通過(guò)雙網(wǎng)線接入不同盤(pán)箱的不同網(wǎng)段的交換背板來(lái)連接存儲(chǔ)。常見(jiàn)故障多為服務(wù)器當(dāng)機(jī)、硬件故障。應(yīng)急預(yù)案：因?yàn)槭侵鱾渫瑫r(shí)在線，所以當(dāng)某臺(tái)服務(wù)器發(fā)生故障時(shí)，對(duì)應(yīng)的備用服務(wù)器會(huì)自動(dòng)接管，不需要人為干預(yù)，不會(huì)對(duì)網(wǎng)絡(luò)使用造成影響。這時(shí)只需要將故障服務(wù)器脫網(wǎng)維修即可，如果維修時(shí)間過(guò)長(zhǎng)，可以使用冷備服務(wù)器替換。

（三）風(fēng)險(xiǎn)三：編輯工作站故障風(fēng)險(xiǎn)及應(yīng)急預(yù)案

風(fēng)險(xiǎn)發(fā)生幾率：中；故障分級(jí)：三級(jí)故障。

全網(wǎng)除高端工作站以光纖方式外，其余普通精編工作站均由千兆網(wǎng)線接入盤(pán)箱左右兩塊不同網(wǎng)段的交換背板。編輯工位上還配置有監(jiān)視器、錄像機(jī)、視頻加速器等設(shè)備。通常遇到的都是設(shè)備長(zhǎng)時(shí)間工作導(dǎo)致的無(wú)響應(yīng)，一般重啟相應(yīng)設(shè)備就可以解決。如果遇到硬件故障需要維修的，可以讓欄目編輯更換到相同設(shè)備配置的工位上繼續(xù)工作即可。應(yīng)對(duì)措施：加強(qiáng)巡視，出現(xiàn)故障立刻排查原因，讓編輯更換工位繼續(xù)工作，然后著手清除故障。

（四）風(fēng)險(xiǎn)四：交換機(jī)故障風(fēng)險(xiǎn)及應(yīng)急預(yù)案

風(fēng)險(xiǎn)發(fā)生幾率：低；故障分級(jí)：一級(jí)故障；故障處理時(shí)間：大約一個(gè)半小時(shí)。

常見(jiàn)故障及應(yīng)急預(yù)案：如果接入第三方服務(wù)器的交換機(jī)出現(xiàn)故障，會(huì)出現(xiàn)網(wǎng)內(nèi)設(shè)備無(wú)法訪問(wèn)外來(lái)文件存儲(chǔ)池、無(wú)法使用自動(dòng)唱詞服務(wù)器等現(xiàn)象。當(dāng)無(wú)法訪問(wèn)外來(lái)文件存儲(chǔ)池時(shí)，可以由網(wǎng)管人員將外來(lái)介質(zhì)通過(guò)一臺(tái)采用非windows系統(tǒng)的電腦，將需要導(dǎo)入的文件轉(zhuǎn)存至一個(gè)專用的、空白的移動(dòng)硬盤(pán)，經(jīng)過(guò)殺毒后，直接接入工作站背板u口，然后在軟件中直接導(dǎo)入。此預(yù)案必須由網(wǎng)管人員全程操作，絕對(duì)禁止欄目編輯自行操作。當(dāng)無(wú)法使用自動(dòng)唱詞功能時(shí)，則使用非編軟件自帶的字幕編輯功能，手動(dòng)拍唱詞。而如果是連接音頻網(wǎng)的交換機(jī)出現(xiàn)故障，配音工作站以及演播室收錄服務(wù)器還有整個(gè)音頻制作網(wǎng)就會(huì)無(wú)法聯(lián)網(wǎng)使用，但仍可以脫網(wǎng)獨(dú)立工作。待故障排除后，再連接入網(wǎng)內(nèi)，手動(dòng)將數(shù)據(jù)遷移至核心存儲(chǔ)即可。

當(dāng)線上交換機(jī)發(fā)生硬件故障時(shí)，應(yīng)當(dāng)立刻使用冷備交換機(jī)，導(dǎo)入備份的交換機(jī)配置文件，然后接入網(wǎng)內(nèi)，并重啟服務(wù)端設(shè)備就可恢復(fù)網(wǎng)絡(luò)正常。

（五）風(fēng)險(xiǎn)五：設(shè)備間線路故障風(fēng)險(xiǎn)及應(yīng)急預(yù)案

風(fēng)險(xiǎn)發(fā)生幾率：低；故障分級(jí)：三級(jí)故障。

所有服務(wù)器與核心存儲(chǔ)的連接都是采用雙網(wǎng)線不同網(wǎng)段的連接，這樣就可以相互作主備連接，降低因線路引起故障的風(fēng)險(xiǎn)，并且在工作站到存儲(chǔ)、交換機(jī)到存儲(chǔ)之間，均備有足夠數(shù)量的冗余網(wǎng)線或光纖，以供不時(shí)之需。

（六）風(fēng)險(xiǎn)六：網(wǎng)絡(luò)病毒防護(hù)

風(fēng)險(xiǎn)發(fā)生幾率：低；故障分級(jí)：嚴(yán)重。

由于AVID網(wǎng)絡(luò)的先天數(shù)據(jù)結(jié)構(gòu)優(yōu)勢(shì)，使其自身?yè)碛休^強(qiáng)的抗病毒能力，即使在網(wǎng)絡(luò)染毒的情況下，大多數(shù)情況都可帶毒應(yīng)急工作，能保證最基本的編輯和上下載功能。應(yīng)對(duì)病毒感染，可以將網(wǎng)內(nèi)部分日播欄目臨時(shí)遷移至其它非編子網(wǎng)，優(yōu)先保障該欄目使用。其它欄目則啟動(dòng)各自欄目的應(yīng)急備播機(jī)制。同時(shí)，網(wǎng)管應(yīng)盡快恢復(fù)系統(tǒng)。應(yīng)對(duì)措施：加強(qiáng)巡視，禁止私自在工作站使用移動(dòng)存儲(chǔ)介質(zhì)，禁止在服務(wù)器上隨意使用U盤(pán)。

三、空調(diào)、動(dòng)力、火災(zāi)類風(fēng)險(xiǎn)

（一）中心設(shè)備機(jī)房空調(diào)故障

風(fēng)險(xiǎn)發(fā)生幾率：低；故障分級(jí)：重大故障。

空調(diào)、機(jī)抽濕機(jī)由于故障停止工作，會(huì)導(dǎo)致機(jī)房?jī)?nèi)部溫度急劇升高，引發(fā)設(shè)備過(guò)熱，甚至可能導(dǎo)致死機(jī)甚至火災(zāi)風(fēng)險(xiǎn)。應(yīng)對(duì)措施：加強(qiáng)巡視，同時(shí)機(jī)房?jī)?nèi)應(yīng)裝配智能溫度監(jiān)控系統(tǒng)，當(dāng)出現(xiàn)機(jī)房溫度過(guò)高狀況時(shí)，系統(tǒng)自動(dòng)以短信方式發(fā)出報(bào)警。

（二）動(dòng)力故障

風(fēng)險(xiǎn)發(fā)生幾率：低；故障分級(jí)：重大故障。

中心機(jī)房配備兩路UPS供電外加一路動(dòng)力電。所有網(wǎng)絡(luò)設(shè)備均使用兩路UPS供電，核心存儲(chǔ)盤(pán)箱使用兩路UPS加一路動(dòng)力電。常見(jiàn)故障為動(dòng)力倒電引起的動(dòng)力電短暫中斷。應(yīng)對(duì)措施：注意接聽(tīng)動(dòng)力部門(mén)的倒電提前通知，并在科室內(nèi)傳達(dá)，提醒值班人員加強(qiáng)倒電期間的巡視，出現(xiàn)動(dòng)力故障立刻聯(lián)系動(dòng)力部門(mén)解決。

四、總結(jié)

廣西電視臺(tái)AVID非編網(wǎng)自從建網(wǎng)以來(lái)，一直堅(jiān)持自行維護(hù)，沒(méi)有聘請(qǐng)第三方維護(hù)團(tuán)隊(duì)，在多年的工作實(shí)踐中，總結(jié)出了一整套針對(duì)AVID非編網(wǎng)的網(wǎng)管軟硬件維護(hù)實(shí)操經(jīng)驗(yàn)，將網(wǎng)絡(luò)故障風(fēng)險(xiǎn)維持在一個(gè)低發(fā)生率、高可控性的狀態(tài)，為節(jié)目部門(mén)提供了一個(gè)穩(wěn)定、可靠的工作平臺(tái)。

1.AVID官方產(chǎn)品使用手冊(cè)。

（作者單位：廣西電視臺(tái)）