基于大數(shù)據(jù)分析的網(wǎng)絡(luò)異常檢測方法-論文.pdf

《基于大數(shù)據(jù)分析的網(wǎng)絡(luò)異常檢測方法-論文.pdf》由會(huì)員上傳分享，免費(fèi)在線閱讀，更多相關(guān)內(nèi)容在行業(yè)資料-天天文庫。

1、運(yùn)營技術(shù)廣角基于大數(shù)據(jù)分析的網(wǎng)絡(luò)異常檢測方法曹旭。曹瑞彤(中國聯(lián)合網(wǎng)絡(luò)通信集團(tuán)有限公司北京100033)摘要：隨著當(dāng)前網(wǎng)絡(luò)結(jié)構(gòu)的日益復(fù)雜，網(wǎng)絡(luò)故障出現(xiàn)的概率逐漸增加，網(wǎng)絡(luò)管理面臨更大的挑戰(zhàn)。網(wǎng)絡(luò)管理的一個(gè)重要任務(wù)是通過對網(wǎng)絡(luò)設(shè)備運(yùn)行狀況的監(jiān)測，及時(shí)發(fā)現(xiàn)網(wǎng)絡(luò)異常，提前進(jìn)行處置，以降低故障帶來的損失。當(dāng)前業(yè)界已經(jīng)對故障診斷進(jìn)行了大量研究，但仍然存在告警丟失、虛警嚴(yán)重等問題。為此，提出了一種基于大數(shù)據(jù)分析的網(wǎng)絡(luò)性能預(yù)測方法．通過改變網(wǎng)絡(luò)管理中“先報(bào)警，再處理”的故障處理流程，實(shí)現(xiàn)網(wǎng)絡(luò)故障的預(yù)警功能。本文的研究內(nèi)容對于提升網(wǎng)絡(luò)的可用性和可靠性具有一定的

2、意義。關(guān)鍵詞：網(wǎng)絡(luò)管理；故障預(yù)測；大數(shù)據(jù)；時(shí)間序列分析doi：10．3969／j．issn．1000-0801．2014．06．025NetworkAnomalyPredictionMethodBasedonBigDataCaoXu，CaoRuitong(ChinaUnitedNetworkCommunicationsCo．，Ltd．，Beijing100033，China)Abstract：Withthedevelopmentofthenetworktechnologyandexpansionofthenetworksize，theproba

3、bilityofnetworkanomalyisgreatlyincreased，whichmakesnetworkmanagementface~emerchallenges．Animportanttaskofnetworkmanagementisnetworkanomalydetectionintimebasedonthedatagotbynetworkmanagementsystem(NMS)；theperformanceofnetworkmanagementwillbegreatimprovedifthenetworkanomalycou

4、ldbedetectedbeforeitreallyhappen．Amethodofnetworkanomalypredictionbasedonbigdatawaspresented，thetraditionalprocessactas“firstalarm，thensolve”wasreplacedbyanomalypredictionprocess．Theresultissignificantforimprovingnetworkavailabilityandreliability．Keywords：networkmanagement，a

5、nomalyprediction，bigdata，timeseriesanalysis網(wǎng)絡(luò)管理的目的是通過對網(wǎng)絡(luò)設(shè)備運(yùn)行狀況的連續(xù)1引言監(jiān)測，及時(shí)發(fā)現(xiàn)網(wǎng)絡(luò)中的異常情況，并對異常情況及時(shí)隨著通信技術(shù)的飛速發(fā)展，電信網(wǎng)絡(luò)在人們工作和報(bào)警，提醒網(wǎng)管人員采取措施保證網(wǎng)絡(luò)正常運(yùn)行。然而，生活中的作用越來越大，并從根本上改變了人們工作和生在實(shí)際網(wǎng)絡(luò)中，憑借網(wǎng)絡(luò)管理人員的經(jīng)驗(yàn)來分析網(wǎng)絡(luò)運(yùn)活的方式；同時(shí)，隨著電信業(yè)務(wù)的不斷深入發(fā)展，人們對網(wǎng)行狀況的方式已經(jīng)越來越難以滿足運(yùn)營商的需求。隨著絡(luò)的依賴性也不斷增大。然而．日益增長的網(wǎng)絡(luò)規(guī)模、不斷網(wǎng)絡(luò)規(guī)模的擴(kuò)大，網(wǎng)管人

6、員常常需要面對大量告警而無更新的網(wǎng)絡(luò)設(shè)備以及不斷出現(xiàn)的新業(yè)務(wù)，使得網(wǎng)絡(luò)出現(xiàn)法確定網(wǎng)絡(luò)的真實(shí)故障。因此，迫切需要一種能夠?qū)W(wǎng)故障的可能性大大增加，這給網(wǎng)絡(luò)管理工作帶來了全新絡(luò)數(shù)據(jù)進(jìn)行智能處理的技術(shù)，即網(wǎng)絡(luò)數(shù)據(jù)剛出現(xiàn)異常的挑戰(zhàn)時(shí)。便能夠自動(dòng)檢測出來，使故障在真正發(fā)生之前被發(fā)現(xiàn)，從而可以大大提升網(wǎng)絡(luò)管理人員的效率和網(wǎng)絡(luò)的總成果引入網(wǎng)絡(luò)管理領(lǐng)域，以更好地提升網(wǎng)絡(luò)故障監(jiān)測的性體性能。能表現(xiàn)。在傳統(tǒng)的網(wǎng)絡(luò)管理過程中，只有當(dāng)網(wǎng)絡(luò)設(shè)備出現(xiàn)異在基于觀測數(shù)據(jù)的網(wǎng)絡(luò)故障方案中．最簡單和普遍使常并上報(bào)告警后，才會(huì)由網(wǎng)絡(luò)管理人員解決問題，這顯用的是基于閾值的監(jiān)測方法，即

7、針對某個(gè)網(wǎng)絡(luò)參數(shù)預(yù)先設(shè)然是一種“響應(yīng)式”的處理過程，即“先出現(xiàn)問題．再進(jìn)行定一個(gè)閾值，故障監(jiān)測的任務(wù)就是監(jiān)測該參數(shù)是否超過了處理的網(wǎng)絡(luò)管理方式。然而，由于網(wǎng)絡(luò)管理人員看到告這一閾值。這種方法簡單易行，是實(shí)際網(wǎng)絡(luò)管理中應(yīng)用最警后，需要一段時(shí)間來分析確定問題才能采取措施，這廣泛的方法，然而這種方法也存在兩個(gè)明顯的問題：一方種長時(shí)間的故障處理過程可能給用戶和企業(yè)造成巨大面，閾值的選取是憑借網(wǎng)絡(luò)管理人員的經(jīng)驗(yàn)確定的，其取的損失。值缺乏可靠的依據(jù)，存在著較大的不確定性；另一方面，由在網(wǎng)絡(luò)運(yùn)營的實(shí)踐中，一些網(wǎng)絡(luò)設(shè)備的故障和網(wǎng)絡(luò)性于缺乏對閾值以下數(shù)據(jù)的處理，

8、忽略了大量和網(wǎng)絡(luò)狀態(tài)有能問題在發(fā)生之前就會(huì)在網(wǎng)絡(luò)流量或性能參數(shù)中有所表關(guān)的細(xì)節(jié)信息，如圖1所示?，F(xiàn)，但由于這些信息淹沒在大量的數(shù)據(jù)中而沒有引起網(wǎng)絡(luò)管理