綜合網(wǎng)絡(luò)數(shù)據(jù)采集平臺(tái)技術(shù)方案v1.1

《綜合網(wǎng)絡(luò)數(shù)據(jù)采集平臺(tái)技術(shù)方案v1.1》由會(huì)員上傳分享，免費(fèi)在線閱讀，更多相關(guān)內(nèi)容在行業(yè)資料-天天文庫。

1、綜合網(wǎng)絡(luò)數(shù)據(jù)采集平臺(tái)技術(shù)方案1.修改記錄序號(hào)版本日期修改人修改描述1V1.02014-08-05曹哲銘初始創(chuàng)建2V1.12014-11-19曹哲銘全部章節(jié)內(nèi)容修改1.概述1.1.背景隨著網(wǎng)絡(luò)運(yùn)維管理集中化程度的進(jìn)一步提高，網(wǎng)絡(luò)維護(hù)人員及管理人員對(duì)網(wǎng)管系統(tǒng)的新的需求也不斷出現(xiàn)，網(wǎng)管集成的應(yīng)用功能不斷增多，逐漸造成以下問題：系統(tǒng)擴(kuò)展能力不強(qiáng)：采集處理能力無法平滑擴(kuò)展，新增的采集機(jī)需要手工部署相應(yīng)的采集程序及調(diào)試，升級(jí)割接過程存在影響現(xiàn)網(wǎng)業(yè)務(wù)的風(fēng)險(xiǎn)。系統(tǒng)可靠性低：采集任務(wù)為靜態(tài)負(fù)載分配，當(dāng)某采集機(jī)出現(xiàn)故障，沒有自動(dòng)恢復(fù)能力。采

2、集資源浪費(fèi)：數(shù)據(jù)消費(fèi)情況沒有有效管理手段，不支持按需采集；各專業(yè)分別建設(shè)采集平臺(tái)，容易造成對(duì)網(wǎng)元的重復(fù)采集；原有專業(yè)采集機(jī)普遍采集小型機(jī)硬件架構(gòu)，資源利用率低，且對(duì)硬件和機(jī)房要求高。采集效率有待提高：集團(tuán)對(duì)上報(bào)數(shù)據(jù)的時(shí)延要求在不斷提升，同時(shí)省端用戶對(duì)生成及時(shí)報(bào)表的速度也不滿意。需要從采集速度、接入速度兩個(gè)方面提升現(xiàn)有采集系統(tǒng)的效率。采集管理維護(hù)困難：各專業(yè)分別開發(fā)采集程序，造成采集程序、數(shù)據(jù)、設(shè)備分散，網(wǎng)元訪問頻繁，網(wǎng)元安全無法保障，管理維護(hù)崗位重復(fù)設(shè)置，缺乏集中的維護(hù)監(jiān)控手段。采集質(zhì)量無法保障：缺少采集數(shù)據(jù)質(zhì)量監(jiān)控的手

3、段，當(dāng)采集數(shù)據(jù)不及時(shí)、不準(zhǔn)確時(shí)，無法及時(shí)自動(dòng)發(fā)現(xiàn)，采集問題難以定位，采集過程不透明。數(shù)據(jù)開放共享問題：用戶對(duì)采集層數(shù)據(jù)的開放管控要求越來越高，需要采集系統(tǒng)具有統(tǒng)一的北向數(shù)據(jù)服務(wù)接口，面向各應(yīng)用系統(tǒng)提供靈活的數(shù)據(jù)采集定制功能。接入效率問題：新網(wǎng)元接入或新指標(biāo)升級(jí)開發(fā)效率低，開發(fā)周期長；指標(biāo)算法問題：指標(biāo)算法不透明；系統(tǒng)安全問題：目前網(wǎng)元/設(shè)備廠家網(wǎng)管訪問信息多處使用多處配置，采集系統(tǒng)對(duì)外共享數(shù)據(jù)接口標(biāo)準(zhǔn)不一，導(dǎo)致對(duì)系統(tǒng)安全存在威脅；為了更好的解決以上問題，綜合網(wǎng)絡(luò)數(shù)據(jù)采集平臺(tái)整合專業(yè)網(wǎng)管采集模塊，向各類系統(tǒng)提供采集共享數(shù)據(jù)

4、。統(tǒng)一規(guī)劃數(shù)據(jù)采集也是集中管理、集中監(jiān)控、集中維護(hù)的網(wǎng)絡(luò)維護(hù)思路的良好體現(xiàn)。1.1.設(shè)計(jì)目的針對(duì)目前OSS支撐系統(tǒng)建設(shè)中的數(shù)據(jù)問題從系統(tǒng)生命周期的各個(gè)階段分別進(jìn)行問題現(xiàn)象的描述，如下：規(guī)劃階段：n不同的系統(tǒng)對(duì)相同的原始數(shù)據(jù)進(jìn)行采集，造成網(wǎng)元處理壓力大；n不同的系統(tǒng)由于數(shù)據(jù)邊界劃分不清晰，造成數(shù)據(jù)的生產(chǎn)和消費(fèi)脫節(jié)，每個(gè)系統(tǒng)按照各自理解管理數(shù)據(jù)，形成重疊交叉；n由于沒有清晰的數(shù)據(jù)共享要求，系統(tǒng)規(guī)劃時(shí)無法滿足后續(xù)項(xiàng)目對(duì)于數(shù)據(jù)開放的需求。建設(shè)階段：n建設(shè)綜合性系統(tǒng)，需從各專業(yè)系統(tǒng)提取數(shù)據(jù)，但專業(yè)系統(tǒng)由于接口問題、模型問題、提供能

5、力問題，進(jìn)行有效數(shù)據(jù)交互的工作量大、靈活性差，實(shí)施極其困難；n同一組數(shù)據(jù)由于在不同系統(tǒng)中模型定義不一致，需要進(jìn)行映射來解決，增加實(shí)施工作量和難度。使用階段：n由于OSS系統(tǒng)提供的數(shù)據(jù)質(zhì)量不高，造成可信度下降，影響系統(tǒng)的推廣使用；n希望對(duì)系統(tǒng)產(chǎn)生的數(shù)據(jù)進(jìn)行進(jìn)一步加工處理，發(fā)現(xiàn)系統(tǒng)的數(shù)據(jù)存儲(chǔ)和組織方式完全封閉，根本無法獲取和使用。n維護(hù)階段：n系統(tǒng)在維護(hù)過程中，發(fā)現(xiàn)數(shù)據(jù)不完整、不及時(shí)，卻無法進(jìn)行問題定位，導(dǎo)致系統(tǒng)的可用性下降；n不同系統(tǒng)提供的數(shù)據(jù)相互矛盾，但數(shù)據(jù)的產(chǎn)生處理過程無法蹤。這些問題歸結(jié)到統(tǒng)一采集適配方面的需求能力問

6、題主要體現(xiàn)如下：ü制定統(tǒng)一的采集適配規(guī)范，支持各專業(yè)數(shù)據(jù)接入，支持第三方廠商采集適配器接入；ü統(tǒng)一任務(wù)調(diào)度和任務(wù)管理，提升系統(tǒng)執(zhí)行效率；ü優(yōu)化共享機(jī)制，加強(qiáng)共享安全管理，以消費(fèi)驅(qū)動(dòng)采集，減少無用采集，提升機(jī)器硬件利用率；ü加強(qiáng)配置信息集中管理，提升采集系統(tǒng)自管理能力和系統(tǒng)自維護(hù)能力，方便數(shù)據(jù)的快速接入；ü優(yōu)化系統(tǒng)執(zhí)行效率，增強(qiáng)數(shù)據(jù)質(zhì)量監(jiān)控手段，全面提升數(shù)據(jù)質(zhì)量；ü實(shí)現(xiàn)多臺(tái)采集機(jī)之間的硬件資源共享和任務(wù)動(dòng)態(tài)分擔(dān)，實(shí)現(xiàn)采集機(jī)的負(fù)載均衡。1.1.設(shè)計(jì)原則1)開放性：開放性與標(biāo)準(zhǔn)化的IT系統(tǒng)賴以生存發(fā)展的基礎(chǔ)，系統(tǒng)建設(shè)必須基于業(yè)

7、界開放式標(biāo)準(zhǔn)，以保證系統(tǒng)的生命力，保護(hù)投資，體現(xiàn)良好的擴(kuò)展性和互操作能力。2)安全可靠性：系統(tǒng)本著安全、可靠的原則，提供良好的可靠性策略，支持多種安全可靠性技術(shù)手段，制定嚴(yán)格的安全可靠性管理措施。3)先進(jìn)性：系統(tǒng)應(yīng)采用先進(jìn)成熟的設(shè)備，確保系統(tǒng)的技術(shù)先進(jìn)性，應(yīng)用軟件充分采用國內(nèi)外先進(jìn)技術(shù)，立足國內(nèi)發(fā)展，保證投資的有效性和延續(xù)性。4)高效性：遵從系統(tǒng)設(shè)計(jì)的高效性原則，充分利用軟硬件平臺(tái)的處理能力，實(shí)現(xiàn)盡可能高的系統(tǒng)運(yùn)行效率，滿足系統(tǒng)的運(yùn)行要求。5)可擴(kuò)展性：系統(tǒng)設(shè)計(jì)應(yīng)充分考慮擴(kuò)展性。系統(tǒng)設(shè)備必須能充分估計(jì)未來的擴(kuò)展情況，系統(tǒng)

8、設(shè)計(jì)必須是模塊化、可配置，能夠適應(yīng)一定時(shí)間內(nèi)的業(yè)務(wù)變化，并保證系統(tǒng)在進(jìn)行擴(kuò)展時(shí)，不影響系統(tǒng)的正常運(yùn)行。1.2.參考資料《中國移動(dòng)采集共享與聯(lián)機(jī)指令平臺(tái)技術(shù)規(guī)范總體技術(shù)要求》《中國移動(dòng)采集共享與聯(lián)機(jī)指令平臺(tái)技術(shù)規(guī)范接口技術(shù)規(guī)范》《中國移動(dòng)CM-OSS2.0總體技術(shù)規(guī)范》《中國移動(dòng)通信網(wǎng)設(shè)備OMC或網(wǎng)元直連北向網(wǎng)管接口規(guī)