VM multi-NIC : les interfaces secondaires n'obtiennent pas de bail, le network-config servi ne vise que eth0 #73
Labels
No labels
bug fix
feature implementation
new feature
No project
No assignees
1 participant
Notifications
Due date
No due date set.
Dependencies
No dependencies set.
Reference
syonad/two#73
Loading…
Add table
Add a link
Reference in a new issue
No description provided.
Delete branch "%!s()"
Deleting a branch is permanent. Although the deleted branch may continue to exist for a short time before it actually gets removed, it CANNOT be undone in most cases. Continue?
Constat
Campagne du 2026-10-17 (#70, evpn-3hv) : une VM à deux NIC (
25-multi-nic) n'obtient d'adresse que surens3;ens4reste sans bail DHCP, dans les deux passes.Cause probable
Le modèle
internal/metadata/templates/network-config.tmplsert :Or
03-imagerelève queens3est configurée par/run/systemd/network/10-netplan-ens3.network: si cloud-init avait appliqué ce document, il existerait une configuration poureth0. Lenetwork-configservi par two n'est pas appliqué ; cloud-init retombe sur sa configuration par défaut, qui ne fait du DHCP que sur la première interface.À confirmer dans
cloud-init.logà la prochaine session de lab : la configuration réseau est vraisemblablement lue avant que le serveur de métadonnées soit joignable.Le serveur DHCP de two est déjà prêt : pour une NIC non primaire, il envoie une option 121 sans route par défaut (vérifié dans le code). Il ne manque qu'un client DHCP sur les interfaces secondaires.
Décision (2026-10-17)
Faire du DHCP sur toutes les interfaces Ethernet est une exigence de l'image.
docs/deploiement/image-qcow2.rst: exigence documentée (règle networkd ou netplan sur toutes les interfaces Ethernet, par exempleen*,DHCP=ipv4), avec la raison (VM multi-NIC) ; vaut aussi pour l'image Rocky 10 (#53).two_image(test/e2e/lib/vm.sh) applique cette règle à l'image Debian de test.network-config.tmplréécrit pour couvrir toutes les interfaces Ethernet au lieu deeth0, au cas où il serait lu.Critère de clôture
25-multi-nicvert en lab :ens4obtient son bail du serveur de son subnet, une seule route par défaut, via la primaire ; cause confirmée danscloud-init.log.Marqueurs d'échec connu dans la suite e2e (#70)
En attendant ce correctif, ces contrôles de la suite e2e sont marqués comme échec connu rattaché à ce ticket (branche
feature-70) :test/e2e/suite/25-multi-nic.shknowntest/e2e/suite/25-multi-nic.shknowntest/e2e/suite/25-multi-nic.shknowntest/e2e/suite/25-multi-nic.shknownÀ retirer avec ce correctif : remplacer le marqueur (
known "#73"ouknown_flaky "#73", suivi de la description) parcheckdans les fichiers ci-dessus, puis vérifier en lab que les contrôles passent.known: tant que l'échec persiste, le contrôle sort enCONNUsans faire échouer le test ; dès qu'il passe, il sort enINATTENDUet fait échouer le test — c'est le rappel automatique de retirer le marqueur.run.sh --connuscompte les contrôles connus comme des échecs, pour voir l'état brut.Essais en lab (2026-10-19, evpn-3hv, hv3, Debian 12 genericcloud, cloud-init 22.4.2)
VM à deux NIC : ens3 sur
10.73.1.0/24(primaire), ens4 sur10.73.2.0/24.Cause confirmée, avec une correction
Ce n'est pas un problème d'ordre : cloud-init 22.4.2 ne demande jamais
network-configparseedfrom.read_seeded()ne construit que les URLmeta-data,user-dataetvendor-data(seules requêtes visibles danscloud-init.log), alors que two sert biennetwork-config(curl→ 200). cloud-init applique donc sa configuration de repli, limitée à la première interface, et la réapplique même après avoir chargé la source :Dans la VM : netplan et
/run/systemd/network/ne concernent qu'ens3 ;networkctl:ens4 ether off unmanaged. Même lu, lenetwork-configactuel (eth0) ne correspondrait à aucune interface sous nommageens*.Règle networkd
Name=en*,DHCP=ipv4(/etc/systemd/network/90-all-en.network) : corrigeADDRESS=10.73.2.20,SERVER_ADDRESS=10.73.2.254, sans routeur ; routes classless : métadonnées et VPC seulement.10-netplan-ens3.network(préfixe 10 avant 90).1.1.1.1et8.8.8.8enscope linksur ens4 (RoutesToDNS, DNS annoncés sans routeur), sans effet aujourd'hui (métrique 1024 contre 100) ;RoutesToDNS=noles supprimerait (non testé).net.ifnames=0: ne suffit pas seulInterfaces
eth0/eth1, mais même repli limité à la première interface :eth1resteunmanaged, sans bail. Avec une règleName=eth*, même résultat que ci-dessus. Les deux voies demandent une règle networkd générique ;en*s'en passe sans toucher au noyau ni à GRUB.Conséquences
en*), appliquée partwo_imagedans le lab.network-configservi par two n'est lu par aucune image actuelle ; s'il doit servir (IPv6, #63), il faudra une autre voie queseedfromen HTTP (seed NoCloud localcidata, lu en init-local) ou une version de cloud-init qui le lit. Essai Debian 13 à suivre.Non vérifié : tenue de la règle après redémarrage de la VM, VM à plus de deux NIC,
RoutesToDNS=no.Essai Debian 13 (2026-10-19, hv3, debian-13-genericcloud, cloud-init 25.1.4)
Même image préparée que
two_image(seed NoCloudseedfrom: http://169.254.169.254:80/), VM à deux NIC : ens310.73.1.12(primaire), ens410.73.2.22.cloud-init 25.1.4 lit et applique le
network-configde twoCe fichier vise
eth0, qui n'existe pas sous nommageens*. Premier démarrage :/etc/netplan/50-cloud-init.yaml:eth0: dhcp4: true;/run/systemd/network/:10-netplan-eth0.networkseul ;networkctl:ens3 routable unmanaged,ens4 off unmanaged, aucun bail actif ;valid_lftdécroissant) : perte attendue à l'expiration du bail (~12 h, déduit, non attendu) ;Redémarrage :
network-configrelu mais non réappliqué (Event Denied: scopes=['network'] EventType=boot-legacy,No network config applied. Neither a new instance nor datasource network update allowed) ; le repli reprend : ens3 retrouve un vrai bail, ens4 reste non configurée.Conclusions
Sur Debian 12 (cloud-init 22.4.2), le
network-configest ignoré ; sur Debian 13, il est appliqué et casse le DHCP de la NIC primaire au premier démarrage. Le modèle actuel (eth0) doit être corrigé quelle que soit la suite.Proposition : depuis #62, two connaît la MAC de chaque NIC ; générer un
network-configpar VM qui vise chaque interface par sa MAC, indépendamment de son nom :appliqué par les images qui le lisent, support naturel d'IPv6 (#63) ; l'exigence d'image « règle
en*» reste pour celles qui ne le lisent pas (Debian 12).Limite : le
network-confign'est appliqué qu'au premier démarrage d'une instance ; l'ajout d'une NIC à chaud (#40) ne serait pas pris en compte sans autoriser l'événementbootde cloud-init.Non vérifié : expiration réelle de l'adresse d'ens3 ; application effective d'un
network-configpar MAC (essai à suivre).Essai
network-configpar MAC, Debian 13 (2026-10-19, hv3, cloud-init 25.1.4)Agent modifié (branche
feature-73) :network-configgénéré par VM, une entrée par NIC visée par sa MAC :VM
t73-n: ens310.73.1.13(primaire), ens410.73.2.23.Premier démarrage : fonctionne
nic0,nic1;/run/systemd/network/10-netplan-nic{0,1}.network(PermanentMACAddress=…) ; pas de renommage, les interfaces restentens3/ens4.networkctl: ens3 et ens4routable configured; baux servis par10.73.1.254et10.73.2.254(ens4 sans routeur) ; une seule route par défaut, via10.73.1.254;10.73.2.23joignable depuis le netns.RouteMetric=100sur les deux NIC ;10.73.0.0/16et169.254.169.254/32existent via ens3 et via ens4 à métrique égale — le trafic intra-VPC et les métadonnées peuvent sortir par la NIC secondaire selon l'ordre d'insertion (non mesuré).Redémarrage : ens4 perd sa configuration
La source n'étant trouvée qu'en init-network (
seedfromHTTP), init-local réapplique le repli (ens3 seule) à chaque démarrage, et la configuration de la source n'est réappliquée qu'au premier démarrage d'une instance. Résultat : netplan ne vise plus qu'ens3,ens4 off unmanaged, sans bail.Conséquences
network-configpar MAC corrige le premier démarrage (le modèleeth0actuel le casse sur Debian 13) mais ne tient pas seul au redémarrage : l'exigence d'image « règleen*» reste nécessaire.dhcp4-overrides: {route-metric: …}), pour que la primaire l'emporte toujours.updates: network: when: [boot]dans la configuration cloud-init de l'image ; source NoCloud locale (cidata) lue en init-local.Non fait : même VM en Debian 12 (lab supprimé en cours d'essai), joignabilité de 10.73.2.23 après redémarrage.
Implémentation et test de lab à prévoir
Branche
feature-73(depuis main,450d0c8, poussée) :network-configgénéré par VM, une entréeeth<index>par NIC visée par sa MAC (match: macaddress),dhcp4: true,dhcp4-overrides.route-metricà 100 pour la primaire et 200, 300… pour les secondaires dans l'ordre (routes VPC et métadonnées de la primaire toujours prioritaires).Clé
eth<index>: netplan et network-manager font correspondre par MAC (la clé n'est qu'un identifiant) ; d'après une conversion hors ligne (cloud-init devel net-convert, 25.1.4 Debian et 24.4 Rocky), sysconfig renommerait l'interface vers la clé (règle udev) et le renderer networkd de cloud-init ajouteName=<clé>au[Match](ne correspond qu'aux imagesnet.ifnames=0).Test de lab à faire (Debian 13, VM à deux NIC,
network-configpar MAC) :/etc/netplan/50-cloud-init.yaml(les deux NIC attendues) ;/etc/cloud/cloud-init.disabled, redémarrer : cloud-init ne doit plus tourner,50-cloud-init.yamldoit rester celui du premier démarrage, et les deux NIC garder leur configuration et leur bail (attendu : la perte d'ens4 au redémarrage vient de la réécriture du repli par cloud-init, qui ne tourne plus) ;cloud-init.disabled,50-cloud-init.yamlaprès redémarrage (repli, première NIC seule — constaté le 2026-10-19) ;ip route), y compris sous Debian 12 avec la règleen*;updates: network: when: [boot]dans la configuration cloud-init de l'image (événementbootaccepté par NoCloud ? visible danscloud-init.log).Métrique et nommage selon le renderer de cloud-init (vérification hors ligne, 2026-10-20)
Méthode :
cloud-init devel net-convertdans des conteneurs (Debian 13 : cloud-init 25.1.4, netplan 1.1.2, systemd 257, NM 1.52 ; Rocky 10.2 : cloud-init 24.4, NM 1.56). Aucune VM démarrée : conclusions tirées des fichiers générés et du code de cloud-init.dhcp4-overrides.route-metric(100 primaire, 200… secondaires)[DHCP] RouteMetric=100/200[DHCPv4] RouteMetric=100/200network_manager.pyn'écritroute-metricque pour une route explicite (_add_route, l. 252-254) ; les deux NIC prendraient la métrique automatique de NM (même valeur), donc les routes VPC et métadonnées resteraient en doubleIPV4_ROUTE_METRIC=100/200— mais indisponible sur Rocky 10 (NM n'y lit plus les ifcfg)dhcp4-overridesne suffit donc pas à supprimer le doublon de routes sur Rocky 10. Option côté two, à trancher : le serveur DHCP n'envoie plus les routes du VPC ni des métadonnées sur les NIC secondaires (seulement le subnet connecté) — efficace quel que soit l'invité, au prix d'un routage asymétrique possible (réponse par la primaire à du trafic reçu sur une secondaire, selonrp_filterde l'invité).Nommage avec la clé
eth<index>+match: macaddress, sansset-namePermanentMACAddress=), clé = identifiantmac-address=, pas d'interface-nameMACAddress=+Name=<clé>; sur une vraie VM, cloud-init remplace la clé par le nom trouvé via la MAC (network_state.py:736-748, déduit du code)DEVICE=<clé>+ règle udevNAME=<clé>cloud-init ne renomme rien de lui-même sans
set-name(extract_physdevs).Piège pour les essais futurs :
net-convert -O netplanignore-dquand l'API Python de netplan est installée et écrit dans le vrai/etc/netplan/50-cloud-init.yaml.Décision (2026-10-20)
Suite aux essais en lab (1164, 1166, 1170) et à la vérification hors ligne des renderers (1179) :
network-config:dhcp4-overrides.route-metricest retiré. Le réglage des routes et des métriques de la VM relève de son utilisateur ; lesuser-data, appliqués après le réseau, sont là pour ça.eth<index>par NIC, visée par sa MAC (match: macaddress), sansset-name.Reste au ticket : exigence d'image (DHCP sur toutes les interfaces Ethernet, règle
en*ou équivalent, pour les images qui ne lisent pas lenetwork-configou au-delà du premier démarrage), application danstwo_imagedu lab, test de lab noté en 1173 (cloud-init.disabled, état de/etc/netplan/50-cloud-init.yaml), retrait des marqueursknown "#73"de25-multi-nic.Lab du 2026-10-22 : branche
feature-73(e2e8b0b) validéeArbre testé : main + feature-73 + feature-74 (passe unique, binaires de l'arbre courant), evpn-3hv, labctl 0.2.0.
Suite e2e
01,02,03,21,23,24,25,26: verts.25-multi-nicpasse entièrement sans marqueurknown: ens4 obtient son bail (servi par10.25.2.254), l'adresse est posée, la VM est joignable sur sa seconde adresse, et il n'y a toujours qu'une route par défaut.03-imagevérifie que lenetwork-configvise la MAC de la NIC.27-reboot: un échec, sans lien avec ce ticket.runcmdn'avait pas encore tourné au moment où SSH répondait. Au rejeu, 16/16.Essais du commentaire 1173 (Debian 13, cloud-init 25.1.4, VM à deux NIC)
50-cloud-init.yaml= lenetwork-configservi (eth0/eth1,match: macaddress). ens3 et ens4 sont configurées (10-netplan-eth1.networkpour ens4), sans renommage.cloud-init.disabledpuis redémarrage :cloud-init status: disabled,50-cloud-init.yamlinchangé (même somme), ens4 garde son adresse et la VM répond sur sa seconde adresse.cloud-init.disabled:50-cloud-init.yamlest réécrit avec le repli (ens3seule,set-name: ens3, et aussidhcp6: true). ens4 reste configurée par90-all-en.network(exigence d'image) et reste joignable.90-all-en.network(métrique 1024, routes1.1.1.1/8.8.8.8en scope link, sans effet).À noter pour #61 / #63 : sous Debian 13, la configuration de repli de cloud-init active
dhcp6: truesur la première interface.Reste avant clôture : fusion de
feature-73(conflit simple attendu surdocs/developpement/lab.rstavecfeature-74, lignes voisines du tableau des scénarios).Lab du 2026-10-23 :
25-multi-nicvert, et le network-config réappliqué à chaque démarrageCampagne du 2026-10-23 (evpn-3hv, labctl 0.2.0) sur l'arbre combiné main + feature-56 (qui contient feature-74) + feature-75, suite complète
run.sh --continue all: tout vert sauf un contrôle de12-etats(socket monitor de t12-err restée, intermittent connu, 28/28 au rejeu).25-multi-nic: 20/20, sans marqueurknown.03-image: 14/14 (network-config visé par la MAC).Essai : réappliquer le network-config au redémarrage (Debian 13, cloud-init 25.1.4, image sans la règle
en*)updates: network: when: [boot-new-instance, boot]ne suffit pas. Au redémarrage, l'étape locale applique le repli (ens3 seule), puis l'étape réseau émet l'événementboot-legacy, refusé :Event Denied: scopes=['network'] EventType=boot-legacy. ens4 resteunmanaged.when: [boot-new-instance, boot, boot-legacy]:Event Allowed: scope=network EventType=boot-legacy, puisApplying network configuration from ds. Résultat :50-cloud-init.yamlcontienteth0/eth1par MAC ;user_datanon rejoué (runcmdexécuté une seule fois).updates) : ens4 sans adresse après redémarrage.boot-legacy.Le réglage est ajouté à l'exigence d'image (
image-qcow2.rst), au concept (metadata-cloud-init.rst) et àtwo_imagedu lab, surfeature-80(non commité). La règleen*reste nécessaire pour cloud-init 22.4 (Debian 12), qui ne lit pas le network-config.Clôture
Fusionné dans
main(f76f8a2). Validé en lab le 2026-10-23 :25-multi-nic20/20,03-image14/14 (1227).Livré :
network-configpar VM, avec une entréeeth<index>par NIC visée par sa MAC,dhcp4: true, sans métrique ;en*), appliquée partwo_image;metadata-cloud-init.rst,image-qcow2.rst).Suite : le réglage cloud-init
updates: network: when: [boot-new-instance, boot, boot-legacy], qui réapplique lenetwork-configà chaque démarrage (validé sous Debian 13), est surfeature-80, avec #80.