Mode bridge sur plusieurs hôtes : interface_ip en conflit, confiner l'ARP et le DHCP de la gateway à son hôte #75

Closed
opened 2026-10-17 20:23:22 +00:00 by nicolas.boufideline · 3 comments

Constat

Campagne du 2026-10-17 (#70, 33-bridge, partie 33b) : le même subnet en mode bridge sur hv1 et hv2, raccordé au segment partagé lan (br-lan), une VM par hôte. La VM t33-a1 ne reçoit ses propres métadonnées que 4 fois sur 5, puis 3 fois sur 5 à la passe suivante : sa résolution ARP de interface_ip part parfois vers l'autre hôte.

Le mode bridge doit fonctionner sur plusieurs hôtes (décision du 2026-10-17 ; cas de la VM route reflector, lançable sur n'importe quel hyperviseur).

Cause (internal/subnet/create.go, mode bridge)

Le netns de chaque hôte pose la même interface_ip sur son br-<id>, avec une MAC propre à l'hôte ; seule DropDHCP est posée (chaîne FORWARD). Trois choses sortent sur le segment partagé :

  1. les requêtes ARP des VM vers interface_ip : tous les hôtes répondent, le dernier à répondre l'emporte ;
  2. l'ARP émis par le netns depuis interface_ip : une VM d'un autre hôte visée par une requête associe interface_ip à la MAC de l'hôte émetteur (vol de cache, mécanisme mesuré dans #57) ;
  3. le DHCP du serveur local : il sort par OUTPUT, et DropDHCP (sur FORWARD) ne l'arrête pas.

Décision (2026-10-17) : confiner interface_ip à son hôte

En mode bridge, sur v-<id>-i, en sortie vers le bridge de l'hôte :

  • bloquer les requêtes ARP vers interface_ip (DropARPToGateway, comme l'ancien modèle vxlan) ;
  • bloquer l'ARP émis depuis interface_ip ;
  • bloquer le DHCP émis depuis interface_ip aussi sur OUTPUT.

Chaque VM ne voit que le netns de son hôte (gateway, métadonnées, DHCP), sans rien changer à l'adressage. Retrait des règles à la suppression du subnet.

Ce qui ne change pas : le trafic entre VM du même subnet, sur le même hôte ou sur des hôtes différents, n'est pas concerné ; les règles ne visent que l'ARP lié à interface_ip et le DHCP émis depuis interface_ip. Par conception, une VM ne joint pas le netns d'un autre hôte.

À faire

  • internal/subnet (création/suppression en mode bridge) et internal/ebtables : les trois règles, avec tests unitaires.
  • Watchdog : présence des trois règles pour les subnets bridge.
  • e2e 33-bridge :
    • réécrire « a1 joint b1 » en passant par la VM elle-même (aujourd'hui depuis le netns de hv2, qui parle depuis interface_ip : la réponse repart vers son propre hôte) ;
    • compter les MAC qui répondent pour interface_ip depuis la VM (le comptage actuel ne relève rien) ;
    • ajouter : une seule MAC, celle de l'hôte local ; aucune trame DHCP de l'hôte sur br-lan.
  • Doc : docs/concepts/modes-reseau.rst, section bridge.

Critère de clôture

33-bridge vert en lab : métadonnées toujours servies par l'hôte local (5/5), trafic entre VM des deux hôtes, aucune fuite ARP ni DHCP liée à interface_ip sur br-lan.

## Constat Campagne du 2026-10-17 (#70, `33-bridge`, partie 33b) : le même subnet en mode `bridge` sur hv1 et hv2, raccordé au segment partagé `lan` (`br-lan`), une VM par hôte. La VM `t33-a1` ne reçoit ses propres métadonnées que **4 fois sur 5**, puis **3 fois sur 5** à la passe suivante : sa résolution ARP de `interface_ip` part parfois vers l'autre hôte. Le mode bridge doit fonctionner sur plusieurs hôtes (décision du 2026-10-17 ; cas de la VM route reflector, lançable sur n'importe quel hyperviseur). ## Cause (`internal/subnet/create.go`, mode bridge) Le netns de **chaque** hôte pose la même `interface_ip` sur son `br-<id>`, avec une MAC propre à l'hôte ; seule `DropDHCP` est posée (chaîne `FORWARD`). Trois choses sortent sur le segment partagé : 1. **les requêtes ARP des VM vers `interface_ip`** : tous les hôtes répondent, le dernier à répondre l'emporte ; 2. **l'ARP émis par le netns depuis `interface_ip`** : une VM d'un autre hôte visée par une requête associe `interface_ip` à la MAC de l'hôte émetteur (vol de cache, mécanisme mesuré dans #57) ; 3. **le DHCP du serveur local** : il sort par `OUTPUT`, et `DropDHCP` (sur `FORWARD`) ne l'arrête pas. ## Décision (2026-10-17) : confiner `interface_ip` à son hôte En mode bridge, sur `v-<id>-i`, en sortie vers le bridge de l'hôte : - bloquer les requêtes ARP **vers** `interface_ip` (`DropARPToGateway`, comme l'ancien modèle vxlan) ; - bloquer l'ARP émis **depuis** `interface_ip` ; - bloquer le DHCP émis depuis `interface_ip` aussi sur `OUTPUT`. Chaque VM ne voit que le netns de son hôte (gateway, métadonnées, DHCP), sans rien changer à l'adressage. Retrait des règles à la suppression du subnet. **Ce qui ne change pas :** le trafic entre VM du même subnet, sur le même hôte ou sur des hôtes différents, n'est pas concerné ; les règles ne visent que l'ARP lié à `interface_ip` et le DHCP émis depuis `interface_ip`. Par conception, une VM ne joint pas le netns d'un autre hôte. ## À faire - `internal/subnet` (création/suppression en mode bridge) et `internal/ebtables` : les trois règles, avec tests unitaires. - Watchdog : présence des trois règles pour les subnets bridge. - e2e `33-bridge` : - réécrire « a1 joint b1 » en passant par la VM elle-même (aujourd'hui depuis le netns de hv2, qui parle depuis `interface_ip` : la réponse repart vers son propre hôte) ; - compter les MAC qui répondent pour `interface_ip` depuis la VM (le comptage actuel ne relève rien) ; - ajouter : une seule MAC, celle de l'hôte local ; aucune trame DHCP de l'hôte sur `br-lan`. - Doc : `docs/concepts/modes-reseau.rst`, section bridge. ## Critère de clôture `33-bridge` vert en lab : métadonnées toujours servies par l'hôte local (5/5), trafic entre VM des deux hôtes, aucune fuite ARP ni DHCP liée à `interface_ip` sur `br-lan`.
Author
Owner

Marqueurs d'échec connu dans la suite e2e (#70)

En attendant ce correctif, ces contrôles de la suite e2e sont marqués comme échec connu rattaché à ce ticket (branche feature-70) :

Fichier Contrôle Marqueur
test/e2e/suite/33-bridge.sh deux hôtes : t33-a1 (hv1) joint t33-b1 (hv2) sur le segment lan known
test/e2e/suite/33-bridge.sh deux hôtes : une seule MAC répond pour interface_ip 10.33.0.1 known
test/e2e/suite/33-bridge.sh deux hôtes : t33-a1 reçoit toujours ses propres métadonnées (5 essais, cache ARP vidé) known_flaky
test/e2e/suite/33-bridge.sh deux hôtes : t33-b1 (hv2) reçoit toujours ses propres métadonnées (5 essais, cache ARP vidé) known_flaky

À retirer avec ce correctif : remplacer le marqueur (known "#75" ou known_flaky "#75", suivi de la description) par check dans les fichiers ci-dessus, puis vérifier en lab que les contrôles passent.

  • known : tant que l'échec persiste, le contrôle sort en CONNU sans faire échouer le test ; dès qu'il passe, il sort en INATTENDU et fait échouer le test — c'est le rappel automatique de retirer le marqueur.
  • known_flaky (échec intermittent) : aucun rappel automatique, le contrôle sort en RÉUSSI quand l'échec ne se reproduit pas. Le retrait doit être fait à la main en fermant ce ticket.

Les deux contrôles known (« t33-a1 joint t33-b1 », « une seule MAC répond ») sont aussi à réécrire selon ce ticket : passer par la VM elle-même et compter les MAC depuis la VM.

run.sh --connus compte les contrôles connus comme des échecs, pour voir l'état brut.

## Marqueurs d'échec connu dans la suite e2e (#70) En attendant ce correctif, ces contrôles de la suite e2e sont marqués comme échec connu rattaché à ce ticket (branche `feature-70`) : | Fichier | Contrôle | Marqueur | |---|---|---| | `test/e2e/suite/33-bridge.sh` | deux hôtes : t33-a1 (hv1) joint t33-b1 (hv2) sur le segment lan | `known` | | `test/e2e/suite/33-bridge.sh` | deux hôtes : une seule MAC répond pour interface_ip 10.33.0.1 | `known` | | `test/e2e/suite/33-bridge.sh` | deux hôtes : t33-a1 reçoit toujours ses propres métadonnées (5 essais, cache ARP vidé) | `known_flaky` | | `test/e2e/suite/33-bridge.sh` | deux hôtes : t33-b1 (hv2) reçoit toujours ses propres métadonnées (5 essais, cache ARP vidé) | `known_flaky` | **À retirer avec ce correctif** : remplacer le marqueur (`known "#75"` ou `known_flaky "#75"`, suivi de la description) par `check` dans les fichiers ci-dessus, puis vérifier en lab que les contrôles passent. - `known` : tant que l'échec persiste, le contrôle sort en `CONNU` sans faire échouer le test ; **dès qu'il passe, il sort en `INATTENDU` et fait échouer le test** — c'est le rappel automatique de retirer le marqueur. - `known_flaky` (échec intermittent) : **aucun rappel automatique**, le contrôle sort en `RÉUSSI` quand l'échec ne se reproduit pas. Le retrait doit être fait à la main en fermant ce ticket. Les deux contrôles `known` (« t33-a1 joint t33-b1 », « une seule MAC répond ») sont aussi à **réécrire** selon ce ticket : passer par la VM elle-même et compter les MAC depuis la VM. `run.sh --connus` compte les contrôles connus comme des échecs, pour voir l'état brut.
Author
Owner

Lab du 2026-10-23 : 33-bridge vert

Campagne du 2026-10-23 (evpn-3hv, labctl 0.2.0) sur l'arbre combiné main + feature-56 (qui contient feature-74) + feature-75, suite complète run.sh --continue all : tout vert sauf un contrôle de 12-etats (socket monitor de t12-err restée, intermittent connu, 28/28 au rejeu).

33-bridge : 52/52, sans marqueur known :

  • les 4 règles de confinement de 10.33.0.1 sont posées sur v-t33a-i ;
  • une seule MAC répond pour interface_ip, celle de br-t33a de hv1 ;
  • t33-a1 et t33-b1 reçoivent toujours leurs propres métadonnées (5/5, cache ARP vidé) ;
  • les VM se joignent entre les deux hôtes.

Aucune fuite : avec br-t33a sans apprentissage (ageing_time 0) le temps de la capture, 0 trame ARP et 0 trame DHCP depuis 10.33.0.1 sortent vers le segment (v-t33a-e). Les témoins prouvent que la capture fonctionne : t33-a1 reçoit 2 ARP et 1 DHCP de 10.33.0.1, et 3 ARP émis par t33-a1 sont vus sur v-t33a-e.

Watchdog : une règle OUTPUT ARP retirée à la main est signalée (« ebtables rule missing in netns vp-t33 »), puis reposée.

Également validé : l'attente de cloud-init dans 23-metadonnees et 27-reboot (18/18).

Reste avant clôture : fusion de feature-75.

## Lab du 2026-10-23 : `33-bridge` vert Campagne du 2026-10-23 (evpn-3hv, labctl 0.2.0) sur l'arbre combiné main + feature-56 (qui contient feature-74) + feature-75, suite complète `run.sh --continue all` : tout vert sauf un contrôle de `12-etats` (socket monitor de t12-err restée, intermittent connu, 28/28 au rejeu). `33-bridge` : 52/52, sans marqueur `known` : - les 4 règles de confinement de `10.33.0.1` sont posées sur `v-t33a-i` ; - une seule MAC répond pour `interface_ip`, celle de `br-t33a` de hv1 ; - t33-a1 et t33-b1 reçoivent toujours leurs propres métadonnées (5/5, cache ARP vidé) ; - les VM se joignent entre les deux hôtes. **Aucune fuite** : avec `br-t33a` sans apprentissage (`ageing_time 0`) le temps de la capture, **0** trame ARP et **0** trame DHCP depuis `10.33.0.1` sortent vers le segment (`v-t33a-e`). Les témoins prouvent que la capture fonctionne : t33-a1 reçoit 2 ARP et 1 DHCP de `10.33.0.1`, et 3 ARP émis par t33-a1 sont vus sur `v-t33a-e`. **Watchdog** : une règle `OUTPUT` ARP retirée à la main est signalée (« ebtables rule missing in netns vp-t33 »), puis reposée. Également validé : l'attente de cloud-init dans `23-metadonnees` et `27-reboot` (18/18). Reste avant clôture : fusion de `feature-75`.
Author
Owner

Clôture

Fusionné dans main (a729cf8). Validé en lab le 2026-10-23 : 33-bridge 52/52, avec 0 trame ARP et 0 trame DHCP de la gateway sur le segment, témoins compris (1229).

Livré :

  • quatre règles ebtables par subnet bridge (ARP vers et depuis interface_ip, DHCP en FORWARD et en OUTPUT) ;
  • une suppression qui ne retire que les règles présentes ;
  • un contrôle des règles manquantes par le watchdog ;
  • pas de réparation au démarrage : les subnets existants sont à recréer.

Au passage : l'attente de cloud-init dans les scénarios 23 et 27.

## Clôture Fusionné dans `main` (`a729cf8`). Validé en lab le 2026-10-23 : `33-bridge` 52/52, avec 0 trame ARP et 0 trame DHCP de la gateway sur le segment, témoins compris (1229). Livré : - quatre règles ebtables par subnet bridge (ARP vers et depuis `interface_ip`, DHCP en `FORWARD` et en `OUTPUT`) ; - une suppression qui ne retire que les règles présentes ; - un contrôle des règles manquantes par le watchdog ; - pas de réparation au démarrage : les subnets existants sont à recréer. Au passage : l'attente de cloud-init dans les scénarios 23 et 27.
Sign in to join this conversation.
No milestone
No project
No assignees
1 participant
Notifications
Due date
The due date is invalid or out of range. Please use the format "yyyy-mm-dd".

No due date set.

Dependencies

No dependencies set.

Reference
syonad/two#75
No description provided.