IP網絡流量數據采集與存儲系統(tǒng)的設計與實現.pdf

1、近年來，隨著以TCP/IP為核心協(xié)議的互連網的快速發(fā)展，IP技術作為一種承載業(yè)務和溝通傳輸的中間體得到了極大的發(fā)展?；贗P的業(yè)務應用發(fā)展迅速，網絡的規(guī)模日趨龐大。網絡的可用性與網絡規(guī)模膨脹的矛盾顯得更加突出。結構越來越復雜和規(guī)模越來越龐大的網絡系統(tǒng)更需要網絡管理軟件來保證系統(tǒng)的正常運作，網絡管理的質量會直接影響到網絡的運行質量，管理好一個網絡與網絡的建設同等重要。 網絡管理軟件通過對網絡數據的分析達到對網絡資源、性能、故障的管

2、理，而網絡數據的獲取是網絡管理軟件中最為重要的部分，本文詳細闡述了IP網絡流量數據采集與存儲系統(tǒng)的設計與實現。 文章首先介紹了網絡管理的一些基礎知識，包括網絡管理的基本概念、網絡管理的五大功能以及網絡管理的體系結構。 其次，文章分析了網管數據采集系統(tǒng)所使用的主要協(xié)議，包括SNMP、NetFlow、sFlow以及RMON等。 接著，文章介紹了IP網絡海量數據的存儲方法，并比較了幾種存儲方案的優(yōu)劣。 文章最后

3、結合項目實踐詳細描述了IP網絡數據采集與存儲系統(tǒng)的設計與實現。鑒于被管網元的多樣性和管理類別的不同，我們在數據采集層上采取了不同的協(xié)議采集不同的網管數據，把數據采集分為主動數據采集和被動數據采集。NetFlow、sFlow、SNMP TRAP屬于被動采集的范疇，在flowd里面自動實現數據的采集、告警和入庫操作；而SNMP、CLI屬于主動采集，必須讓采集服務器使用輪詢操作來及時取得網管數據。為了避免海量數據存取導致的平凡I/O操作，在數