[项目自荐] 基于 ebpf 的高性能无侵入网络观测项目

Repo: https://github.com/packetd/packetd

项目概览

tcpdump 是一款强大的网络抓包工具，可以结合 wireshark 工具对流量进行分析。但是 tcpdump 缺少了一些现代化观测方案联动的手段，比如生成 traces/metrics/logs ，同时也缺少实时以 7 层网络视角观测的能力。另外 tcpdump 更倾向于作为一种 cli 工具，而不是以 agent 模式持续运行。

So, packetd is born.

packetd 支持从数据流中解析出多种应用协议（ HTTP/gRPC/MySQL/Redis/Kafka/...），使用请求的来回 roundtrip 作为其核心概念，进而衍生出 traces/metrics/roundtrips 数据。

packetd 提供了更加现代化的可观测手段，可以无缝地对接现有的观测体系：

• 支持 Prometheus /metrics 路由暴露指标。
• 支持 Prometheus RemoteWrite 协议主动上报 Metrics 数据（如 VictoriaMetrics ）。
• 支持 OpenTelemetry 协议上报 traces 数据。

快速上手

• docs/quickstart.md

packetd 支持 watch 和 agent 两种运行模式。前者作为一种 cli 工具 debug 网络请求，后者使用 agent 模式持续监听网络包并上报可观测数据。

watch mode

agent mode

jq 序列化 roundtrips 数据（以 HTTP 协议为例）

{ "Request": { "Host": "192.168.255.128", "Port": 36654, "Method": "GET", "Header": { "Accept": [ "*/*" ], "User-Agent": [ "curl/8.11.1" ] }, "Proto": "HTTP/1.1", "Path": "/get", "URL": "/get", "Scheme": "", "RemoteHost": "httpbin.org", "Close": false, "Size": 0, "Chunked": false, "Time": "2025-07-06T12:36:51.49809695-04:00" }, "Response": { "Host": "54.243.106.191", "Port": 80, "Header": { "Access-Control-Allow-Credentials": [ "true" ], "Access-Control-Allow-Origin": [ "*" ], "Connection": [ "keep-alive" ], "Content-Length": [ "255" ], "Content-Type": [ "application/json" ], "Date": [ "Sun, 06 Jul 2025 16:36:51 GMT" ], "Server": [ "gunicorn/19.9.0" ] }, "Status": "200 OK", "StatusCode": 200, "Proto": "HTTP/1.1", "Close": false, "Size": 255, "Chunked": false, "Time": "2025-07-06T12:36:52.044846786-04:00" }, "Duration": "546.749836ms" } 

traces 数据（以 HTTP 协议为例）

详见 docs/observability.md

Span Name <http.request.method>

Span Attributes:

• http.request.size
• http.response.size
• http.request.method
• http.response.status_code
• url.full
• url.scheme
• server.address
• server.port
• client.remote.host
• network.peer.address
• network.peer.port
• network.transport
• network.protocol.name
• network.protocol.version
• http.request.header.<key>
• http.response.header.<key>

协议支持

• amqp
• dns
• grpc
• http
• http2
• kafka
• mongodb
• mysql
• postgresql
• redis

可观测性

• docs/observability.md

packetd 可以结合社区的可观测方案将 packetd 产生的数据进行持久化及可视化。

Prometheus + Grafana

OpenTelemetry + Jaeger

Elasticsearch + Kibana

性能压测

packetd 做了大量的性能优化，有着优秀的性能表现，能在较低资源使用的同时保证数据准确率。

Header 字段含义：

HTTP 压测结果，0.2C/40MB 内存可以处理 10Gb/s 的网络请求数据。

MySQL 压测结果：

更多协议结果可参考 docs/performance.md