Configuración de NetFlow/IPFIX para registrar traducciones NAT en Debian 12

Русский · English · Español · Français · Deutsch

Guía práctica de instalación ipt_NETFLOW con soporte para NAT Events, exportación de eventos de transmisión y personalización del recopilador nfdump.

Todas las direcciones IP del artículo son condicionales. Las direcciones públicas se toman de los rangos de documentación RFC 5737.

1. Introducción

Cuando se utiliza Linux como puerta de enlace NAT, especialmente para proveedores de Internet con CGNAT, es necesario registrar la correspondencia de las direcciones internas y puertos de los suscriptores con las direcciones y puertos públicos. NetFlow normal tiene en cuenta los flujos de red, pero no siempre permite restaurar la traducción NAT. Para ello, se utiliza el registro de eventos NAT (NEL) en función de los eventos del subsistema conntrack.

Este tutorial utiliza el módulo del kernel de Debian 12 ipt_NETFLOW, NetFlow v9/IPFIX y recopilador nfcapd/nfdump.

2. Cómo funciona el registro de eventos NAT

Ejemplo de conexión inicial:

10.10.1.100:50004 -> 198.51.100.20:443

Después de SNAT:

203.0.113.10:61025 -> 198.51.100.20:443

Para identificar al suscriptor es necesario registrar la correspondencia 203.0.113.10:61025 y 10.10.1.100:50004, protocolo, dirección de destino y hora exacta del evento. El puerto después de NAT puede diferir del original.

Linux almacena datos de conexión y NAT en el subsistema de seguimiento de conexión de Netfilter (conntrack). ipt_NETFLOW puede recibir eventos de creación y eliminación de mapas NAT y exportarlos.

3. Arquitectura

Abonados 10.10.0.0/16
        |
Debian 12 NAT gateway (192.0.2.1)
        | SNAT: 203.0.113.10
        +-----------------> Internet
        |
        +--- NetFlow/IPFIX UDP 555 ---> Collector 192.0.2.10
                                        nfcapd -> nfdump -> archivo
Componente Objetivo
Netfilter NAT y filtrado de paquetes
conntrack Contabilidad del estado de la conexión
ipt_NETFLOW Exportar transmisiones y eventos NAT
Recepción
nfcapd NetFlow/IPFIX
nfdump Análisis y lectura del archivo

4. Campos IPFIX para NAT

IE Nombre Significado
4 protocolIdentifier Protocolo
7 sourceTransportPort Puerto de origen
8 sourceIPv4Address Fuente IPv4
11 destinationTransportPort puerto de destino
12 destinationIPv4Address Destino IPv4
225 postNATSourceIPv4Address IPv4 pública después de SNAT
Puerto
227 postNAPTSourceTransportPort después de NAT
230 natEvent Tipo de evento NAT

Es importante comprobar la plantilla real que se está exportando: la presencia de soporte para eventos NAT no garantiza en sí misma la presencia de todos los IE en una sola entrada.

5. Preparando Debian 12

uname -r
grep CONFIG_NF_CONNTRACK_EVENTS /boot/config-$(uname -r)
grep -E 'CONFIG_NF_NAT=|CONFIG_NF_CONNTRACK=' /boot/config-$(uname -r)
ls -l /lib/modules/$(uname -r)/build

Soporte de eventos esperados: CONFIG_NF_CONNTRACK_EVENTS=y (o la configuración del kernel correspondiente disponible). Herramientas de instalación:

apt update
apt install -y git build-essential dkms pkg-config libxtables-dev linux-headers-$(uname -r)

Si los encabezados del kernel en ejecución ya se han eliminado de los repositorios actuales, los paquetes correspondientes se pueden buscar en Debian Snapshot Archive. Las versiones del encabezado y del núcleo deben coincidir.

6. Construyendo ipt_NETFLOW con eventos NAT

Código fuente ipt_NETFLOW

cd /usr/src
git clone https://github.com/aabc/ipt-netflow.git
cd ipt-netflow
./configure --help

En la configuración probada, la llamada ayudó:

./configure --enable-natevents

En la versión mostrada --enable-natevents incluye soporte para eventos NAT. Verifique las claves disponibles y el resultado de compilación para la versión seleccionada.

make -j$(nproc)
make install
depmod -a

En caso de error DKMS tree already contains verifique las versiones registradas y los archivos instalados:

dkms status
find /lib/modules/$(uname -r) -name 'ipt_NETFLOW.ko*'
modinfo -n ipt_NETFLOW

No elimine todo el árbol DKMS sin comprobarlo. Si aparece un error de firma signing_key.pem, verifique el modo de arranque seguro y los requisitos de firma del módulo.

Cargando el módulo:
Criterios

modprobe ipt_NETFLOW
lsmod | grep ipt_NETFLOW
ls /proc/sys/net/netflow/
sysctl net.netflow.natevents

para la presencia de Registro de Eventos NAT: en /proc/sys/net/netflow/ debería aparecer la opción natevents. Si el módulo fue reconstruido mientras ya estaba cargado, será necesaria una recarga correcta del módulo. modinfo muestra el módulo en el disco, no una instancia cargada garantizada.

7. Configuración de exportación

para NetFlow v9:

sysctl -w net.netflow.protocol=9
sysctl -w net.netflow.destination=192.0.2.10:555
sysctl -w net.netflow.natevents=1

para IPFIX:

sysctl -w net.netflow.protocol=10

Verificar:

sysctl net.netflow.protocol
sysctl net.netflow.destination
sysctl net.netflow.natevents

Parámetros constantes del módulo en /etc/modprobe.d/ipt_NETFLOW.conf:

options ipt_NETFLOW destination=192.0.2.10:555 protocol=10 natevents=1

Tendrán efecto la próxima vez que se cargue el módulo.

8. ¿Son necesarias las reglas de iptables?

Para NAT Events regla separada -j NETFLOW : los eventos provienen de conntrack. Si también necesita estadísticas para hilos regulares, puede agregar:

iptables -I FORWARD 1 -j NETFLOW
iptables -L FORWARD -nvx --line-numbers

No debe agregarse NETFLOW en varias cadenas sin evaluar el riesgo de recuento de paquetes. No es necesario agregar NETFLOW a la tabla NAT para recibir eventos NAT.
Diagnóstico de conexión

9.

apt install conntrack
conntrack -L -s 10.10.1.100
conntrack -E -o timestamp,extended
conntrack -E -s 10.10.1.100

Notación condicional:

tcp 6 431999 ESTABLISHED
src=10.10.1.100 dst=198.51.100.20 sport=50004 dport=443
src=198.51.100.20 dst=203.0.113.10 sport=443 dport=61025

La dirección inversa muestra la dirección pública y el puerto asignado.

10. Estadísticas ipt_NETFLOW

cat /proc/net/stat/ipt_netflow
watch -n 1 cat /proc/net/stat/ipt_netflow

Dependiendo de la versión, las estadísticas contienen contadores de eventos NAT (start, stop), parámetros de exportación y error. Aumentar los contadores confirma que el módulo procesó eventos, pero no entregó todos los registros al recopilador.

11. Instalación de nfdump 1.7.x
Código fuente

nfdump

apt update
apt install -y git build-essential autoconf automake libtool pkg-config flex bison libbz2-dev zlib1g-dev liblz4-dev
cd /usr/local/src
git clone https://github.com/phaag/nfdump.git
cd nfdump
git tag --list '*1.7*'

Para un sistema en funcionamiento, seleccione una etiqueta verificada y configúrela en una variable NFDUMP_TAG.

: "${NFDUMP_TAG:?Set NFDUMP_TAG to a verified release tag}"
git checkout --detach "$NFDUMP_TAG"
./autogen.sh
./configure
make -j$(nproc)
make install
ldconfig
/usr/local/bin/nfdump -V
/usr/local/bin/nfcapd -V

Si el programa no encuentra libnfdump*.so, comprobar ldd /usr/local/bin/nfdump, ruta de biblioteca y configuración ldconfig.

12. Arranque del colector

mkdir -p /mnt/flow/nat
/usr/local/bin/nfcapd -w /mnt/flow/nat -p 555 -t 60

Para dos exportadores con división por catálogos (consulte la sintaxis en nfcapd -h su versión):

/usr/local/bin/nfcapd -p 555 -t 60 -S 1 \
  -n gw1,192.0.2.1,/mnt/flow/1 \
  -n gw2,192.0.2.2,/mnt/flow/2

13. Comprobación de recibo y decodificación

tcpdump -ni any udp port 555
find /mnt/flow/nat -type f -name 'nfcapd.*'
/usr/local/bin/nfdump -R /mnt/flow/nat -o raw
/usr/local/bin/nfdump -R /mnt/flow/nat -o 'fmt:%ts %sa:%sp -> %da:%dp %pr'

Este último formato está destinado principalmente a transmisiones regulares. Los eventos NAT pueden aparecer de forma diferente.

Para verificar la plantilla IPFIX real, capture los paquetes:

tcpdump -ni any -s0 -w /tmp/nat-ipfix.pcap udp port 555
tshark -r /tmp/nat-ipfix.pcap -V

Verifique IE 4, 7, 8, 11, 12, 225, 227, 230, así como registros de datos reales. Ejemplo de contenido de publicación lógica:

Protocol: TCP
Original Source: 10.10.1.100:50004
Destination: 198.51.100.20:443
Translated Source: 203.0.113.10:61025
NAT Event: CREATE

Esta es una ilustración, no un formato de salida literal. nfdump.

14. Errores comunes

Síntoma Qué comprobar
No
Indicadores de configuración natevents
, versión del módulo cargado, soporte para eventos del kernel
CONFIG_NF_NAT_NEEDED... No Esta es una prueba de una macro antigua, no una prueba de la ausencia de NAT
Conflicto de ensamblajes registrados
DKMS tree already contains DKMS
Error
Firma del módulo signing_key.pem y arranque seguro
UDP no se recibe Rutas, cortafuegos, destination, medidores exportadores
Se recibe UDP
, pero no hay entradas NAT natevents, contadores de eventos, plantilla IPFIX, decodificación

Comprobando la ruta al recolector:

ip route get 192.0.2.10

No debe forzar la definición de macros del kernel antiguas sin verificar las fuentes y la compatibilidad de la API.

15. Rendimiento

está determinada por la cantidad de asignaciones NAT creadas y no solo por la velocidad del tráfico. Con 5.000 creaciones y 5.000 borrados por segundo, habrá 10.000 eventos/s, es decir, 864 millones de eventos por día bajo carga constante.
Recomendaciones

:

  1. Utilice un recopilador de eventos NAT independiente.
  2. Supervise la pérdida de UDP y el desbordamiento del búfer.
  3. Sincroniza los relojes de puerta de enlace y colector.
  4. Controla el espacio en disco y la vida útil del almacenamiento.
  5. Limite el acceso a los registros de actividad del suscriptor.
  6. Verifique el funcionamiento después de actualizar el kernel y reiniciar.
  7. Bajo carga, verifique que los registros estén completos y que la plantilla IPFIX sea correcta.

16. Arranque automático

Archivo /etc/modules-load.d/ipt_NETFLOW.conf:

ipt_NETFLOW

Archivo /etc/modprobe.d/ipt_NETFLOW.conf:

options ipt_NETFLOW destination=192.0.2.10:555 protocol=10 natevents=1

Ejemplo de un servicio recopilador systemd /etc/systemd/system/nfcapd-nat.service:

[Unit]
Description=NetFlow/IPFIX Collector
After=network-online.target
Wants=network-online.target

[Service]
Type=simple
ExecStart=/usr/local/bin/nfcapd -w /mnt/flow/nat -p 555 -t 60
Restart=on-failure
RestartSec=5

[Install]
WantedBy=multi-user.target
systemctl daemon-reload
systemctl enable --now nfcapd-nat
systemctl status nfcapd-nat
journalctl -u nfcapd-nat -f

17. Lista de verificación

Conclusión

ipt_NETFLOW le permite exportar eventos NAT directamente desde la puerta de enlace de Linux sin reflejar todo el tráfico. Pero conviene distinguir tres niveles de preparación: el módulo está cargado; Se generan eventos NAT; el recopilador acepta y decodifica correctamente los campos obligatorios. Para tener en cuenta completamente NAT, debe verificar los tres niveles y la integridad de los eventos bajo carga.

Fuentes