• 
    

    
    

      99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

      科來:某運營商話務(wù)呼出系統(tǒng)偶發(fā)性訪問失敗分析

      2018-11-07 09:04:58
      網(wǎng)絡(luò)安全和信息化 2018年6期
      關(guān)鍵詞:偶發(fā)性客戶端服務(wù)器

      話務(wù)呼出系統(tǒng)可以有效提升外呼通話的接通率,是運營商內(nèi)部重要的業(yè)務(wù)系統(tǒng)之一,同時也是提升品牌形象、提高寬帶服務(wù)質(zhì)量的重要方式。偶發(fā)性訪問失敗會直接導致業(yè)務(wù)癱瘓,有損用戶服務(wù)體驗。

      問題描述

      短短一個月內(nèi),該業(yè)務(wù)系統(tǒng)出現(xiàn)偶發(fā)性訪問失敗數(shù)次,用戶通過很多手段排查定位此故障的真正原因依然未果。科來通過與用戶溝通并立刻在該系統(tǒng)服務(wù)器區(qū)出口部署科來網(wǎng)絡(luò)回溯分析系統(tǒng)(RAS),開始對該系統(tǒng)流量進行監(jiān)測。

      在部署科來網(wǎng)絡(luò)回溯分析系統(tǒng)(RAS)的幾天后,該系統(tǒng)再次出現(xiàn)大面積無法訪問,頁面無法正常打開。通過RAS提取出問題時段的系統(tǒng)服務(wù)器通信數(shù)據(jù)流量,我們終于發(fā)現(xiàn)導致用戶無法正常訪問話務(wù)呼出系統(tǒng)的直接原因。

      分析結(jié)果

      科來為用戶進行故障重現(xiàn)描述:原因并非是該業(yè)務(wù)系統(tǒng)內(nèi)出現(xiàn)問題,而是網(wǎng)絡(luò)中數(shù)據(jù)庫部分出現(xiàn)故障間接導致本次大面積訪問失敗。由于數(shù)據(jù)庫出現(xiàn)故障造成無法及時斷開連接,導致數(shù)據(jù)庫的連接數(shù)撐爆。數(shù)據(jù)庫無法正常工作,所以才造成用戶無法正常訪問該系統(tǒng)應(yīng)用。

      方案價值

      案例中對于業(yè)務(wù)系統(tǒng)故障的分析難點在于其特有的偶發(fā)性,因此存在較大分析難度。科來網(wǎng)絡(luò)回溯分析系統(tǒng)(RAS)能夠重現(xiàn)故障現(xiàn)象并從不易覺察的異常數(shù)據(jù)流量中發(fā)現(xiàn)問題突破點,對隱性故障問題實現(xiàn)精細化挖掘分析,快速發(fā)現(xiàn)故障點,清晰定位查明故障原因,為客戶解決故障問題、界定直接責任提供了準確的流量依據(jù)。

      這也為我們積累了難得的運維經(jīng)驗,有時業(yè)務(wù)系統(tǒng)的問題并非其自身原因,極有可能是與之相連的上下游部分出現(xiàn)問題間接導致故障的發(fā)生,運維過程需大局觀,不可單獨割裂只看復雜網(wǎng)絡(luò)中某一部分。

      分析過程

      1.配置回溯分析系統(tǒng),在相關(guān)的業(yè)務(wù)訪問邏輯進行抓包分析:

      營業(yè)廳→外網(wǎng)(130.XX.XX.46)→F5(130.XX.XX.27)→服務(wù)器(134.XX.XX.92-95)→數(shù)據(jù)庫(134.XX.XX.86)

      圖1 業(yè)務(wù)系統(tǒng)存在大量訪問被重置

      2.通過對該業(yè)務(wù)系統(tǒng)的監(jiān)控分析,發(fā)現(xiàn)在發(fā)生故障的時間段存在大量訪問被重置的情況,如圖1所示。

      通過對該時間段的會話分析,發(fā)現(xiàn)客戶端在與服務(wù)端建立三次握手,發(fā)送POST請求之后,服務(wù)端也回復了ACK進行確認。但等了幾秒甚至至幾百秒服務(wù)器都沒有數(shù)據(jù)響應(yīng),客戶端直接把會話斷開,直接回復了RST關(guān)閉會話,如圖2所示。

      那么什么原因?qū)е聭?yīng)用沒有回復數(shù)據(jù)響應(yīng)呢?

      通過對數(shù)據(jù)庫134.XX.XX.86的監(jiān)控,應(yīng)用需要向數(shù)據(jù)庫調(diào)用數(shù)據(jù),是不是數(shù)據(jù)庫端出現(xiàn)問題?

      圖2 客戶端關(guān)閉會話

      在同一個時間點,發(fā)現(xiàn)數(shù)據(jù)出現(xiàn)了異常,數(shù)據(jù)庫的連接數(shù)比正常的情況下多了很多。數(shù)據(jù)庫一般是長連接,所以客戶端的連接數(shù)一般不會很多,會設(shè)定相關(guān)連接數(shù)上限,對單個客戶端連接數(shù)的上限設(shè)定為100個。

      但通過對數(shù)據(jù)庫半個小時分析,發(fā)現(xiàn)服務(wù)器134.XX.XX.94半個小時的連接數(shù)達到了229個,134.XX.XX.93的連接數(shù)達到了132個,明顯超過了這個設(shè)定的100個連接數(shù)的上限值。

      圖3 客戶端無法正常打開

      所以,該段時間內(nèi)的數(shù)據(jù)庫連接數(shù)很高,導致數(shù)據(jù)庫響應(yīng)緩慢或者數(shù)據(jù)庫無法響應(yīng),間接就導致了客戶端去訪問應(yīng)用,然后無法正常打開,如圖3所示。

      通過對客戶端134.XX.XX.94訪問數(shù)據(jù)庫的會話進行詳細分析,客戶端發(fā)送請求之后,數(shù)據(jù)庫這一端沒有及時發(fā)送數(shù)據(jù)進行響應(yīng),等了264秒之后客戶端在發(fā)了fin中斷連接,然后需要再建新連接,但數(shù)據(jù)庫134.XX.XX.86這邊5分鐘之后才發(fā)響應(yīng)數(shù)據(jù)以及fin包,該連接還保持著,這樣就導致數(shù)據(jù)庫134.XX.XX.86的連接數(shù)過多,數(shù)據(jù)庫無法正常響應(yīng)數(shù)據(jù)。

      圖4 數(shù)據(jù)庫監(jiān)控圖

      所以,通過以上分析,由于數(shù)據(jù)庫沒有及時斷開連接,數(shù)據(jù)庫端出現(xiàn)問題,導致客戶端的連接數(shù)超過上限。通過客戶反饋該時間段的數(shù)據(jù)庫的連接數(shù)已經(jīng)超過正常值,由于數(shù)據(jù)庫無法正常響應(yīng)數(shù)據(jù),間接就導致客戶端無法正常調(diào)取數(shù)據(jù)及正常訪問應(yīng)用,應(yīng)用服務(wù)器的連接數(shù)就撐爆了連接池,數(shù)據(jù)庫監(jiān)控如圖4所示。

      解決方案

      定位了問題發(fā)生的原因后,我們與該業(yè)務(wù)系統(tǒng)應(yīng)用及數(shù)據(jù)的管理員進行溝通,請其升高(134.XX.XX.92-95)服務(wù)器的最大DB連接數(shù)配置,從而提高系統(tǒng)容錯瓶頸。

      調(diào)整后,該系統(tǒng)恢復正常,同時應(yīng)用(134.XX.XX.92-95)連接數(shù)恢復正常。

      成都科來軟件有限公司

      電話:400-6869-069 010-82601814

      網(wǎng)址:www.colasoft.com.cn

      論壇:www.csna.cn

      猜你喜歡
      偶發(fā)性客戶端服務(wù)器
      偶發(fā)與編輯:論人工智能帶來的繪畫“異軌”
      通信控制服務(wù)器(CCS)維護終端的設(shè)計與實現(xiàn)
      淺析偶然性在藝術(shù)發(fā)展歷程中的呈現(xiàn)
      縣級臺在突發(fā)事件報道中如何應(yīng)用手機客戶端
      傳媒評論(2018年4期)2018-06-27 08:20:24
      孵化垂直頻道:新聞客戶端新策略
      傳媒評論(2018年4期)2018-06-27 08:20:16
      基于Vanconnect的智能家居瘦客戶端的設(shè)計與實現(xiàn)
      電子測試(2018年10期)2018-06-26 05:53:34
      淺析偶發(fā)性對于藝術(shù)家理想創(chuàng)作狀態(tài)的促進
      得形忘意的服務(wù)器標準
      計算機網(wǎng)絡(luò)安全服務(wù)器入侵與防御
      客戶端空間數(shù)據(jù)緩存策略
      大邑县| 溆浦县| 广饶县| 仪征市| 托克逊县| 铜川市| 北宁市| 黄冈市| 宜昌市| 肃南| 布拖县| 山丹县| 冷水江市| 柏乡县| 咸宁市| 峨边| 明溪县| 连平县| 桂阳县| 印江| 敖汉旗| 龙胜| 朝阳市| 阜新市| 江永县| 佳木斯市| 嘉祥县| 宁蒗| 囊谦县| 班戈县| 西安市| 湖南省| 图们市| 游戏| 青河县| 边坝县| 茌平县| 资阳市| 九江市| 温宿县| 陆良县|