Filtrage IPv4 au port des VM : DHCP serveur, ARP, MAC et IP source usurpés entre VM d'un même hôte #76

Closed
opened 2026-10-17 20:27:54 +00:00 by nicolas.boufideline · 4 comments

Constat

Campagne du 2026-10-17 (#70, 35-filtrage-port), deux VM d'un même subnet sur le même hôte, confirmé sur deux passes :

  • faux serveur DHCP : une VM émet des réponses DHCP (UDP 67 → 68), sa voisine les reçoit (5 trames vues) ;
  • usurpation ARP de la gateway .254 : la table ARP de la voisine est modifiée (elle ne garde pas la MAC anycast) ;
  • usurpation ARP de l'adresse d'émission .253 : la voisine l'associe à la MAC de la VM usurpatrice (00:22:33:00:00:0a).

Cause

Les règles ebtables (internal/ebtables, internal/subnet/anycast.go) ne sont posées que sur v-<id>-i, en sortie vers le fabric. Entre deux taps du même bridge dans le netns, rien n'est filtré.

Décision (2026-10-17) : filtrage IPv4 complet au port de chaque VM

Une règle par tap, dans le netns, posée au démarrage de la VM et retirée à l'arrêt ; pour toute trame émise par la VM :

  • MAC source ≠ MAC de la NIC → DROP ;
  • ARP dont l'adresse ou la MAC d'émetteur n'est pas celle de la NIC → DROP ;
  • DHCP serveur (UDP depuis le port 67) → DROP ;
  • IPv4 source ≠ adresse de la NIC → DROP, sauf 0.0.0.0 pour le DHCP client (DISCOVER / REQUEST initial).

Conséquence assumée : une VM qui route pour d'autres ou porte des adresses supplémentaires (VPN, routeur, IP flottante) ne peut plus émettre depuis ces adresses. Une liste d'adresses autorisées par NIC sera un ticket à part, si le besoin apparaît.

L'IPv6 (RA, DHCPv6, NDP) reste dans #61.

À faire

  • internal/ebtables : règles par tap, avec tests unitaires ; internal/vm : pose au démarrage, retrait à l'arrêt (NIC multiples comprises).
  • Watchdog : présence des règles pour chaque NIC running.
  • e2e 35-filtrage-port : les contrôles « attendu ; aucun filtrage entre VM d'un même hôte à ce jour » deviennent des contrôles normaux, et on ajoute :
    • IP source usurpée bloquée ;
    • MAC source usurpée bloquée ;
    • témoins : DHCP client et trafic légitime de la VM inchangés.
  • Doc : section sécurité / modes réseau.

Critère de clôture

35-filtrage-port vert en lab, chaque règle avec son témoin positif ; assert_clean vert (règles retirées à l'arrêt de la VM).

## Constat Campagne du 2026-10-17 (#70, `35-filtrage-port`), deux VM d'un même subnet sur le même hôte, confirmé sur deux passes : - **faux serveur DHCP** : une VM émet des réponses DHCP (UDP 67 → 68), sa voisine les reçoit (5 trames vues) ; - **usurpation ARP de la gateway `.254`** : la table ARP de la voisine est modifiée (elle ne garde pas la MAC anycast) ; - **usurpation ARP de l'adresse d'émission `.253`** : la voisine l'associe à la MAC de la VM usurpatrice (`00:22:33:00:00:0a`). ## Cause Les règles ebtables (`internal/ebtables`, `internal/subnet/anycast.go`) ne sont posées que sur `v-<id>-i`, en sortie vers le fabric. Entre deux taps du même bridge dans le netns, **rien n'est filtré**. ## Décision (2026-10-17) : filtrage IPv4 complet au port de chaque VM Une règle par tap, dans le netns, posée au démarrage de la VM et retirée à l'arrêt ; pour toute trame émise par la VM : - **MAC source** ≠ MAC de la NIC → DROP ; - **ARP** dont l'adresse ou la MAC d'émetteur n'est pas celle de la NIC → DROP ; - **DHCP serveur** (UDP depuis le port 67) → DROP ; - **IPv4 source** ≠ adresse de la NIC → DROP, sauf `0.0.0.0` pour le DHCP client (DISCOVER / REQUEST initial). **Conséquence assumée :** une VM qui route pour d'autres ou porte des adresses supplémentaires (VPN, routeur, IP flottante) ne peut plus émettre depuis ces adresses. Une liste d'adresses autorisées par NIC sera un ticket à part, si le besoin apparaît. L'IPv6 (RA, DHCPv6, NDP) reste dans **#61**. ## À faire - `internal/ebtables` : règles par tap, avec tests unitaires ; `internal/vm` : pose au démarrage, retrait à l'arrêt (NIC multiples comprises). - Watchdog : présence des règles pour chaque NIC `running`. - e2e `35-filtrage-port` : les contrôles « attendu ; aucun filtrage entre VM d'un même hôte à ce jour » deviennent des contrôles normaux, et on ajoute : - IP source usurpée bloquée ; - MAC source usurpée bloquée ; - témoins : DHCP client et trafic légitime de la VM inchangés. - Doc : section sécurité / modes réseau. ## Critère de clôture `35-filtrage-port` vert en lab, chaque règle avec son témoin positif ; `assert_clean` vert (règles retirées à l'arrêt de la VM).
Author
Owner

Marqueurs d'échec connu dans la suite e2e (#70)

En attendant ce correctif, ces contrôles de la suite e2e sont marqués comme échec connu rattaché à ce ticket (branche feature-70) :

Fichier Contrôle Marqueur
test/e2e/suite/35-filtrage-port.sh faux serveur DHCP dans t35-a (67 → 68) : n'atteint pas t35-b, même subnet, même hôte (${UNF} ; $(cat known
test/e2e/suite/35-filtrage-port.sh usurpation ARP de la gateway 10.35.1.254 par t35-a : t35-b garde la MAC anycast (${UNF} ; lue : $(vm_neigh_mac vp-t35 10.35.1.11 10.35.1.254)) known
test/e2e/suite/35-filtrage-port.sh usurpation ARP de l'adresse d'émission 10.35.1.253 par t35-a : t35-b garde ${RELAY_MAC:-?} (${UNF} ; lue : $(vm_neigh_mac vp-t35 10.35.1.11 10.35.1.253)) known

À retirer avec ce correctif : remplacer le marqueur (known "#76" ou known_flaky "#76", suivi de la description) par check dans les fichiers ci-dessus, puis vérifier en lab que les contrôles passent.

  • known : tant que l'échec persiste, le contrôle sort en CONNU sans faire échouer le test ; dès qu'il passe, il sort en INATTENDU et fait échouer le test — c'est le rappel automatique de retirer le marqueur.

La variable UNF de 35-filtrage-port.sh (« aucun filtrage entre VM d'un même hôte à ce jour ») est à retirer des descriptions en même temps.

run.sh --connus compte les contrôles connus comme des échecs, pour voir l'état brut.

## Marqueurs d'échec connu dans la suite e2e (#70) En attendant ce correctif, ces contrôles de la suite e2e sont marqués comme échec connu rattaché à ce ticket (branche `feature-70`) : | Fichier | Contrôle | Marqueur | |---|---|---| | `test/e2e/suite/35-filtrage-port.sh` | faux serveur DHCP dans t35-a (67 → 68) : n'atteint pas t35-b, même subnet, même hôte (${UNF} ; $(cat | `known` | | `test/e2e/suite/35-filtrage-port.sh` | usurpation ARP de la gateway 10.35.1.254 par t35-a : t35-b garde la MAC anycast (${UNF} ; lue : $(vm_neigh_mac vp-t35 10.35.1.11 10.35.1.254)) | `known` | | `test/e2e/suite/35-filtrage-port.sh` | usurpation ARP de l'adresse d'émission 10.35.1.253 par t35-a : t35-b garde ${RELAY_MAC:-?} (${UNF} ; lue : $(vm_neigh_mac vp-t35 10.35.1.11 10.35.1.253)) | `known` | **À retirer avec ce correctif** : remplacer le marqueur (`known "#76"` ou `known_flaky "#76"`, suivi de la description) par `check` dans les fichiers ci-dessus, puis vérifier en lab que les contrôles passent. - `known` : tant que l'échec persiste, le contrôle sort en `CONNU` sans faire échouer le test ; **dès qu'il passe, il sort en `INATTENDU` et fait échouer le test** — c'est le rappel automatique de retirer le marqueur. La variable `UNF` de `35-filtrage-port.sh` (« aucun filtrage entre VM d'un même hôte à ce jour ») est à retirer des descriptions en même temps. `run.sh --connus` compte les contrôles connus comme des échecs, pour voir l'état brut.
Author
Owner

Décision (2026-10-25) : nftables, avant le subnet public

  • Le filtrage au port est écrit en nftables (famille bridge) : Rocky 10 ne fournit pas les modules ebtables legacy (#52, commentaire du 2026-10-13), et les hyperviseurs Rocky restent dans le jalon 0.3.0.
  • Ce ticket est un prérequis de #89 (subnet public_ip) : des locataires différents y partagent le domaine de broadcast. Ordre de travail complet sur #31.
## Décision (2026-10-25) : nftables, avant le subnet public - Le filtrage au port est écrit en **nftables** (famille `bridge`) : Rocky 10 ne fournit pas les modules ebtables legacy (#52, commentaire du 2026-10-13), et les hyperviseurs Rocky restent dans le jalon 0.3.0. - Ce ticket est un **prérequis de #89** (subnet `public_ip`) : des locataires différents y partagent le domaine de broadcast. Ordre de travail complet sur #31.
Author
Owner

Plan et décisions

Décisions

  • Toutes les règles de couche 2 passent d'ebtables à nftables (famille bridge), y compris le confinement existant côté subnet, traduit à l'identique. Le DNAT iptables de #86 reste pour #90.
  • Les règles s'écrivent par appel au binaire nft (script sur l'entrée standard, relecture en JSON), comme pour iptables aujourd'hui ; pas de dépendance Go.
  • Dans le netns de chaque VPC, une table bridge two : des chaînes de base qui aiguillent par interface vers une chaîne par port (tap de VM, veth de subnet). Poser ou retirer un port est une seule transaction.
  • Règles par tap, posées au démarrage de la VM et retirées à l'arrêt. Toute trame émise par la VM est abandonnée si :
    • la MAC source n'est pas celle de la NIC ;
    • c'est de l'ARP dont la MAC ou l'adresse d'émetteur n'est pas celle de la NIC, sauf l'adresse 0.0.0.0 (sonde de conflit RFC 5227 d'un client DHCP) ;
    • c'est une réponse de serveur DHCP (UDP depuis le port 67), sauf si la NIC est autorisée (ci-dessous) ;
    • l'IPv4 source n'est pas celle de la NIC, sauf 0.0.0.0 vers le port 67.
    • L'IPv6 reste dans #61.
  • Serveur DHCP dans une VM : une NIC peut être déclarée serveur DHCP par un champ explicite à sa création (dhcp_server, faux par défaut). Cas d'usage : une VM d'un subnet en mode bridge sert le DHCP/PXE des machines diskless du réseau physique, avec des réservations statiques uniquement (pas de plage dynamique). Seule cette NIC peut répondre ; elle garde les contrôles de MAC et d'IP source. L'agent applique le champ sans regarder le mode du subnet : le réserver au mode bridge relève de l'appelant.
  • Le watchdog vérifie, pour chaque NIC d'une VM running, la présence de sa chaîne ; le contrôle des subnets passe sur nft.
  • nftables remplace ebtables dans bootstrap_kvm.sh ; le lab l'installe par hypervisor.sh tant que la release épinglée ne le fait pas.
  • Mise à jour depuis la 0.2.0 : vider l'hyperviseur puis recréer, comme pour #86.

Étapes

  1. Paquet internal/nft qui remplace internal/ebtables dans les subnets, l'anycast et le watchdog, sans changement de comportement ; internal/ebtables supprimé.
  2. Filtrage par tap dans le cycle de vie des VM, champ dhcp_server (API, stockage, CLI), contrôle du watchdog.
  3. bootstrap_kvm.sh et provision du lab.
  4. e2e : les trois known "#76" de 35-filtrage-port deviennent des contrôles, avec IP et MAC usurpées et leurs témoins ; VM serveur DHCP autorisée et VM voisine bloquée sur un subnet bridge ; helpers ebt_* remplacés.
  5. Doc et notes 0.3.0.

Risques

  • Une règle fausse coupe le réseau d'une VM (ARP, DHCP) : chaque règle a son témoin positif en e2e.
  • Une VM qui route pour d'autres ou porte des adresses supplémentaires ne peut plus émettre depuis ces adresses : assumé, à prendre en compte pour #88.
  • Une NIC sans règle n'est plus filtrée : signalé par le watchdog.
  • À vérifier au lab : le DHCP de two ne répond pas aux machines diskless dont les requêtes lui parviennent.
## Plan et décisions **Décisions** - Toutes les règles de couche 2 passent d'ebtables à nftables (famille `bridge`), y compris le confinement existant côté subnet, traduit à l'identique. Le DNAT iptables de #86 reste pour #90. - Les règles s'écrivent par appel au binaire `nft` (script sur l'entrée standard, relecture en JSON), comme pour `iptables` aujourd'hui ; pas de dépendance Go. - Dans le netns de chaque VPC, une table `bridge two` : des chaînes de base qui aiguillent par interface vers une chaîne par port (tap de VM, veth de subnet). Poser ou retirer un port est une seule transaction. - Règles par tap, posées au démarrage de la VM et retirées à l'arrêt. Toute trame émise par la VM est abandonnée si : - la MAC source n'est pas celle de la NIC ; - c'est de l'ARP dont la MAC ou l'adresse d'émetteur n'est pas celle de la NIC, **sauf l'adresse `0.0.0.0`** (sonde de conflit RFC 5227 d'un client DHCP) ; - c'est une réponse de serveur DHCP (UDP depuis le port 67), **sauf si la NIC est autorisée** (ci-dessous) ; - l'IPv4 source n'est pas celle de la NIC, sauf `0.0.0.0` vers le port 67. - L'IPv6 reste dans #61. - **Serveur DHCP dans une VM** : une NIC peut être déclarée serveur DHCP par un champ explicite à sa création (`dhcp_server`, faux par défaut). Cas d'usage : une VM d'un subnet en mode bridge sert le DHCP/PXE des machines diskless du réseau physique, avec des réservations statiques uniquement (pas de plage dynamique). Seule cette NIC peut répondre ; elle garde les contrôles de MAC et d'IP source. L'agent applique le champ sans regarder le mode du subnet : le réserver au mode bridge relève de l'appelant. - Le watchdog vérifie, pour chaque NIC d'une VM `running`, la présence de sa chaîne ; le contrôle des subnets passe sur nft. - `nftables` remplace `ebtables` dans `bootstrap_kvm.sh` ; le lab l'installe par `hypervisor.sh` tant que la release épinglée ne le fait pas. - Mise à jour depuis la 0.2.0 : vider l'hyperviseur puis recréer, comme pour #86. **Étapes** 1. Paquet `internal/nft` qui remplace `internal/ebtables` dans les subnets, l'anycast et le watchdog, sans changement de comportement ; `internal/ebtables` supprimé. 2. Filtrage par tap dans le cycle de vie des VM, champ `dhcp_server` (API, stockage, CLI), contrôle du watchdog. 3. `bootstrap_kvm.sh` et provision du lab. 4. e2e : les trois `known "#76"` de `35-filtrage-port` deviennent des contrôles, avec IP et MAC usurpées et leurs témoins ; VM serveur DHCP autorisée et VM voisine bloquée sur un subnet bridge ; helpers `ebt_*` remplacés. 5. Doc et notes 0.3.0. **Risques** - Une règle fausse coupe le réseau d'une VM (ARP, DHCP) : chaque règle a son témoin positif en e2e. - Une VM qui route pour d'autres ou porte des adresses supplémentaires ne peut plus émettre depuis ces adresses : assumé, à prendre en compte pour #88. - Une NIC sans règle n'est plus filtrée : signalé par le watchdog. - À vérifier au lab : le DHCP de two ne répond pas aux machines diskless dont les requêtes lui parviennent.
Author
Owner

Fusionné dans main. Lab du 2026-10-26 (main + #86 + #76 + #87 + #91) : suite complète verte (31 tests sur 31), dont 33-bridge (56 réussis, réponse DHCP de dhcp_server vue sur le segment, voisine bloquée) et 35-filtrage-port (61 réussis).

Fusionné dans main. Lab du 2026-10-26 (main + #86 + #76 + #87 + #91) : suite complète verte (31 tests sur 31), dont 33-bridge (56 réussis, réponse DHCP de `dhcp_server` vue sur le segment, voisine bloquée) et 35-filtrage-port (61 réussis).
Sign in to join this conversation.
No milestone
No project
No assignees
1 participant
Notifications
Due date
The due date is invalid or out of range. Please use the format "yyyy-mm-dd".

No due date set.

Dependencies

No dependencies set.

Reference
syonad/two#76
No description provided.