項(xiàng)目背景

傳統(tǒng)網(wǎng)絡(luò)數(shù)據(jù)分析會(huì)在交換機(jī)上配置網(wǎng)絡(luò)數(shù)據(jù)鏡像， 將?Packet?復(fù)制后發(fā)送到目標(biāo)機(jī)器，實(shí)現(xiàn)網(wǎng)絡(luò)流量鏡像的功能。而在云平臺(tái)上，目前網(wǎng)絡(luò)數(shù)據(jù)采集還沒有統(tǒng)一的方案。

針對(duì)私有云平臺(tái)，目前有流表數(shù)據(jù)包復(fù)制采集，在?hypervisor?上監(jiān)聽采集、vmware?平臺(tái)分布式虛交換機(jī)配置采集、libpcap?抓包采集等方案。對(duì)于?vmware?平臺(tái)分布式虛交換機(jī)配置采集的方案，性能較好，不占用客戶機(jī)資源，但其屬于商業(yè)產(chǎn)品，且只適用于購(gòu)買?vmware?私有云用戶；而在?hypervisor?上監(jiān)聽采集，目前有產(chǎn)品開發(fā)，性能較好，但只適用于?OpenStack?私有云；采用?OVS?流表方案，優(yōu)勢(shì)是免費(fèi)，不占用客戶機(jī)資源，但是配置復(fù)雜，且只能用于?OpenStack?私有云。

因此，開發(fā)基于libpcap + GRE封裝轉(zhuǎn)發(fā)的應(yīng)用，或許是云平臺(tái)目前最優(yōu)的網(wǎng)絡(luò)流量鏡像方案。其使用簡(jiǎn)單、開源、適用于各類公有云和私有云。

Packet-Agent 簡(jiǎn)介

Netis Packet Agent?基于libpcap技術(shù)，從業(yè)務(wù)網(wǎng)卡抓包，進(jìn)行 GRE 封裝后將采集到的數(shù)據(jù)包發(fā)送到另一臺(tái)遠(yuǎn)端機(jī)器，供分析使用。

該項(xiàng)目提供一套低開銷但是高性能的抓包工具：

• pktminerg?是第一個(gè)發(fā)布的工具。該工具可以輕松地在網(wǎng)卡上抓數(shù)據(jù)包，用GRE頭進(jìn)行封裝并發(fā)送到遠(yuǎn)端的設(shè)備，來進(jìn)行數(shù)據(jù)包監(jiān)控和分析

?

• pcapcompare?用于比較兩個(gè) pcap 文件
• gredump?根據(jù)特定的過濾規(guī)則抓取GRE數(shù)據(jù)包，并存儲(chǔ)為 pcap 文件
• gredemo?是一個(gè) demo 應(yīng)用程序，可以從 pcap 文件讀取數(shù)據(jù)包，然后把它們發(fā)送到遠(yuǎn)端網(wǎng)卡。這個(gè)程序只能通過源代碼編譯生成

Docker Kubernetes 支持

Packet-Agent 對(duì) Kubernetes 也提供了支持方案。簡(jiǎn)單來說，Packet-Agent封裝成容器后，與需要監(jiān)控的業(yè)務(wù)容器放在同一個(gè) K8S Pod 中，與其共享網(wǎng)絡(luò)層并抓包鏡像網(wǎng)絡(luò)流量。具體方案見項(xiàng)目文檔。

參與 Packet-Agent 項(xiàng)目

歡迎大家參與此項(xiàng)目，包括 star, fork, 提交 pull-request, 報(bào)告 bug, 提出任何意見或建議，或者將該項(xiàng)目介紹給相關(guān)的朋友。衷心感謝。