diff --git a/docs/developpement/lab.rst b/docs/developpement/lab.rst index 3e88e6f..79c0052 100644 --- a/docs/developpement/lab.rst +++ b/docs/developpement/lab.rst @@ -282,6 +282,30 @@ supprime ses VM, ses subnets puis ses VPC, et vérifie que l'hôte est revenu à configuration FRR et ``frr.conf``, fichiers de ``/run/two``, ``dnsmasq.d`` et des volumes, unités ``two-vm-*``, processus dnsmasq et QEMU). Aucun test ne dépend d'un autre : n'importe lequel se lance seul. +**Image des VM de test (#82).** ``VM_IMAGE`` choisit l'image des VM que lancent les tests ; +``run.sh`` la transmet à chaque nœud : + +* ``debian12`` (défaut) : Debian 12 ``genericcloud``, téléchargée par chaque hyperviseur et + vérifiée par SHA-512, puis adaptée à two (source NoCloud ``169.254.169.254``, DHCP sur ``en*`` + par systemd-networkd, liens ``/dev/xvdX``) ; +* ``rocky10`` : image du dépôt ``two-images`` (NetworkManager), construite sur le serveur de lab + par ``two-images/build.sh rocky10`` puis déposée avec son ``SHA512SUMS`` dans + ``/var/tmp/two-images/`` de chaque hyperviseur. Le harnais la vérifie et ne la télécharge ni ne + la modifie : les exigences two sont dans l'image. + +.. code-block:: text + + VM_IMAGE=rocky10 test/e2e/run.sh --continue all + +Le harnais ne suppose pas le gestionnaire réseau de l'invité : ``vm_lease`` lit les mêmes clés +(``ADDRESS``, ``SERVER_ADDRESS``, ``DNS``, ``NTP``, ``MTU``) dans le bail de systemd-networkd ou +dans ``nmcli -g DHCP4``, ``vm_lease_mtime`` date le bail, et ``vm_renew`` le renouvelle +(``networkctl renew``, ou ``nmcli device modify ipv4.dhcp-timeout N`` avec une valeur qui +change à chaque appel ; mesuré sur Rocky 10 : ``nmcli device connect`` désactive l'interface et +retire l'adresse le temps du renouvellement, ``nmcli device reapply`` sans modification ne relance +pas le DHCP, ``device modify`` relance le client DHCP en gardant l'adresse). Les interfaces gardent leurs noms ``ens3``, ``ens4``… sur les deux +images : two place les cartes aux mêmes slots PCI (mesuré sur Rocky 10). + **Plages.** Le test ``NN`` nomme ses ressources ``vp-tNN*``, ``sn-tNN*`` et ``tNN-*``, et utilise ``10.NN.0.0/16`` et les VNI ``NN00`` à ``NN99`` : aucune collision entre tests. @@ -313,9 +337,9 @@ Générée par ``test/e2e/run.sh --matrice`` à partir des en-têtes ; à régé - hv1 hv2 hv3 - #70 * - ``03-image`` - - hypothèses sur l'image de VM — outils (curl, python3), nom d'interface, effet réel de network-config, forme du compte verrouillé + - hypothèses sur l'image de VM — outils (curl, python3), nom d'interface, gestionnaire réseau attendu pour VM_IMAGE (systemd-networkd ou NetworkManager), effet réel de network-config, forme du compte verrouillé - hv1 - - #70, #73 + - #70, #73, #82 * - ``11-validation`` - validation de l'API — refus synchrones (400, 409, 422) des VPC, subnets et VM, sans trace en base - hv1 @@ -361,7 +385,7 @@ Générée par ``test/e2e/run.sh --matrice`` à partir des en-têtes ; à régé - hv1 hv2 - #56 * - ``29-dns-ntp`` - - DNS et NTP des VM par two-hostsvc — options DHCP 6 et 42 = interface_ip, redirection vers 169.254.169.253 dans le VPC (vxlan et bridge), seuls 53 et 123 servis, alertes du watchdog, VPC en error si two-hostsvc ne répond pas + - DNS et NTP des VM par two-hostsvc — options DHCP 6 et 42 = interface_ip, redirection vers 169.254.169.253 dans le VPC (vxlan et bridge), seuls 53 et 123 servis, alertes du watchdog, VPC en error si two-hostsvc ne répond pas ; chrony de la VM sur la seule gateway (images avec chrony) - hv1 - #86 * - ``31-gateway`` diff --git a/release_notes/0.3.0.md b/release_notes/0.3.0.md index a50aaba..c577260 100644 --- a/release_notes/0.3.0.md +++ b/release_notes/0.3.0.md @@ -123,6 +123,13 @@ scripts, units), sans télécharger de release ; `test/e2e/build.sh --release ` garde la qualification d'une release publiée +**Suite e2e : VM de test en Rocky 10 (#82)** + +- `VM_IMAGE=rocky10 test/e2e/run.sh …` lance les VM de test sur l'image Rocky 10 de two-images, + déposée sur chaque hyperviseur et vérifiée par SHA-512 ; `debian12` reste le défaut. Le harnais + lit le bail, sa date et le renouvelle selon le gestionnaire réseau de l'invité + (systemd-networkd ou NetworkManager) + **Connaissance de l'hôte (#39)** - `GET /register` : hostname, CPU (fabricant, modèle, sockets, cœurs, threads), RAM totale, OS diff --git a/test/e2e/lib/core.sh b/test/e2e/lib/core.sh index 9002402..af54f23 100644 --- a/test/e2e/lib/core.sh +++ b/test/e2e/lib/core.sh @@ -1,8 +1,22 @@ set -u API=http://127.0.0.1:8080 -IMAGE_URL=https://cloud.debian.org/images/cloud/bookworm/latest -IMAGE_FILE=debian-12-genericcloud-amd64.qcow2 -TWO_IMAGE=/var/tmp/deb-two.qcow2 +VM_IMAGE="${VM_IMAGE:-debian12}" +case "${VM_IMAGE}" in + debian12) + IMAGE_URL=https://cloud.debian.org/images/cloud/bookworm/latest + IMAGE_FILE=debian-12-genericcloud-amd64.qcow2 + TWO_IMAGE=/var/tmp/deb-two.qcow2 + ;; + rocky10) + IMAGE_DIR=/var/tmp/two-images + IMAGE_FILE=rocky10.qcow2 + TWO_IMAGE=/var/tmp/rocky10-two.qcow2 + ;; + *) + echo "VM_IMAGE inconnue : ${VM_IMAGE} (debian12, rocky10)" >&2 + exit 1 + ;; +esac VM_KEY=/root/.ssh/lab-vm VOLUMES=/var/lib/two/volumes diff --git a/test/e2e/lib/vm.sh b/test/e2e/lib/vm.sh index badc4c7..59baeb3 100644 --- a/test/e2e/lib/vm.sh +++ b/test/e2e/lib/vm.sh @@ -1,5 +1,22 @@ two_image () { [ -f "${TWO_IMAGE}" ] && return 0 + case "${VM_IMAGE}" in + rocky10) two_image_built ;; + *) two_image_debian ;; + esac +} + +two_image_built () { + local want got + [ -f "${IMAGE_DIR}/${IMAGE_FILE}" ] || { echo "image: ${IMAGE_DIR}/${IMAGE_FILE} absente, à déposer depuis two-images" >&2; return 1; } + want=$(awk -v f="${IMAGE_FILE}" '$2 == f {print $1}' "${IMAGE_DIR}/SHA512SUMS") + [ -n "${want}" ] || { echo "image: ${IMAGE_FILE} absente de ${IMAGE_DIR}/SHA512SUMS" >&2; return 1; } + got=$(sha512sum < "${IMAGE_DIR}/${IMAGE_FILE}" | cut -d' ' -f1) || return 1 + [ "${got}" = "${want}" ] || { echo "image: somme SHA-512 incorrecte" >&2; return 1; } + cp "${IMAGE_DIR}/${IMAGE_FILE}" "${TWO_IMAGE}.part" && mv "${TWO_IMAGE}.part" "${TWO_IMAGE}" +} + +two_image_debian () { local work work=$(mktemp -d) curl -fsSL -o "${work}/${IMAGE_FILE}" "${IMAGE_URL}/${IMAGE_FILE}" || return 1 @@ -60,7 +77,7 @@ vm_ssh () { local vpc="${1}" ip="${2}" shift 2 ip netns exec "${vpc}" ssh -i "${VM_KEY}" -o StrictHostKeyChecking=no -o UserKnownHostsFile=/dev/null \ - -o LogLevel=ERROR -o ConnectTimeout=3 -o BatchMode=yes -n "syonad@${ip}" "$@" + -o LogLevel=ERROR -o ConnectTimeout=3 -o BatchMode=yes -o GSSAPIAuthentication=no -n "syonad@${ip}" "$@" } vm_wait () { @@ -148,8 +165,27 @@ vm_has_ip () { vm_ssh "${1}" "${2}" 'ip -4 -o addr show' | grep -q " ${3}/" } +VM_NM='command -v nmcli >/dev/null' + +lease_value () { + awk -v k="${1}" ' + BEGIN { nm["ADDRESS"] = "ip_address"; nm["SERVER_ADDRESS"] = "dhcp_server_identifier"; nm["DNS"] = "domain_name_servers"; nm["NTP"] = "ntp_servers"; nm["MTU"] = "interface_mtu" } + { sub(/^DHCP4:/, ""); gsub(/\\:/, ":") } + index($0, k "=") == 1 { print substr($0, length(k) + 2); exit } + (i = index($0, " = ")) > 0 { n = substr($0, 1, i - 1); gsub(/^ +| +$/, "", n); if (n == nm[k]) { v = substr($0, i + 3); gsub(/ +$/, "", v); print v; exit } } + ' +} + vm_lease () { - vm_ssh "${1}" "${2}" "sudo cat /run/systemd/netif/leases/\$(cat /sys/class/net/${4:-ens3}/ifindex)" | sed -n "s/^${3}=//p" + vm_ssh "${1}" "${2}" "if ${VM_NM}; then nmcli -g DHCP4 device show ${4:-ens3} | tr '|' '\\n'; else sudo cat /run/systemd/netif/leases/\$(cat /sys/class/net/${4:-ens3}/ifindex); fi" | lease_value "${3}" +} + +vm_lease_mtime () { + vm_ssh "${1}" "${2}" "if ${VM_NM}; then f=\$(sudo sh -c 'ls /var/lib/NetworkManager/internal-*-${3:-ens3}.lease'); else f=/run/systemd/netif/leases/\$(cat /sys/class/net/${3:-ens3}/ifindex); fi; sudo stat -c %Y \"\${f}\"" +} + +vm_renew () { + vm_ssh "${1}" "${2}" "if ${VM_NM}; then sudo nmcli device modify ${3:-ens3} ipv4.dhcp-timeout \$(( 300 + \$(date +%s) % 600 )); else sudo networkctl renew ${3:-ens3}; fi" } vm_meta () { @@ -157,7 +193,12 @@ vm_meta () { } vm_cloud_init_done () { + local rc vm_ssh "${1}" "${2}" "timeout ${3:-300} cloud-init status --wait" + rc=$? + [ "${rc}" -eq 0 ] && return 0 + echo "code ${rc}, $(vm_ssh "${1}" "${2}" 'cloud-init status --long' 2>&1 | sed -n '/^extended_status:/,$p' | tr -s '\n ' ' ')" + return "${rc}" } vm_boot_id () { @@ -183,7 +224,7 @@ lease_renewed () { local t0 i t0=$(date +%s) sleep 1 - vm_ssh "${1}" "${2}" "sudo networkctl renew ${3:-ens3}" || return 1 + vm_renew "${1}" "${2}" "${3:-ens3}" || return 1 for i in $(seq 1 15); do [ "$(dhcp_acks "${t0}" "${2}")" -gt 0 ] && return 0 sleep 2 diff --git a/test/e2e/run.sh b/test/e2e/run.sh index a825dec..acd94ce 100755 --- a/test/e2e/run.sh +++ b/test/e2e/run.sh @@ -26,6 +26,8 @@ un échec, ou INATTENDU (compté comme un échec) s'il passe : retirer alors le compte les CONNU comme des échecs. known_flaky (échec intermittent) donne RÉUSSI, annoté, s'il passe. Une ligne RÉUSSI ou ÉCHOUÉ par vérification ; code de sortie 1 si une vérification échoue ou si aucune n'a été faite. +VM_IMAGE choisit l'image des VM de test : debian12 (défaut) ou rocky10 (déposée au préalable +dans /var/tmp/two-images/ de chaque hyperviseur, avec son SHA512SUMS). USAGE exit 2 } @@ -34,6 +36,7 @@ on () { local node="${1}" assignment lib shift { + printf 'export VM_IMAGE=%q\n' "${VM_IMAGE:-debian12}" for assignment in "$@"; do printf 'export %q=%q\n' "${assignment%%=*}" "${assignment#*=}" done diff --git a/test/e2e/run_test.sh b/test/e2e/run_test.sh index c4b301a..cc04f31 100755 --- a/test/e2e/run_test.sh +++ b/test/e2e/run_test.sh @@ -58,6 +58,54 @@ test_on_sends_assignments_library_and_block_to_the_node () { teardown } +test_on_sends_the_vm_image_to_the_node () { + setup "on : VM_IMAGE transmise au nœud, debian12 par défaut" + printf '%s\n' "on hv1 <<'NODE'" 'true' 'NODE' > "${WORK}/scenarios/t1.sh" + FAKE_OUT='RÉUSSI: un' run t1 >/dev/null + [[ $(bash -c "$(grep '^export VM_IMAGE=' "${WORK}/payload.1"); echo \"\${VM_IMAGE}\"") == debian12 ]] || fail "défaut : $(grep '^export VM_IMAGE' "${WORK}/payload.1")" + rm -f "${WORK}/payload."* + VM_IMAGE=rocky10 FAKE_OUT='RÉUSSI: un' run t1 >/dev/null + [[ $(bash -c "$(grep '^export VM_IMAGE=' "${WORK}/payload.1"); echo \"\${VM_IMAGE}\"") == rocky10 ]] || fail "rocky10 : $(grep '^export VM_IMAGE' "${WORK}/payload.1")" + teardown +} + +test_two_image_built_checks_the_sum_before_copying () { + setup "two_image (rocky10) : image déposée vérifiée par SHA512SUMS puis copiée, refus sinon" + local d="${WORK}/images" out + mkdir -p "${d}" && printf 'qcow2\n' > "${d}/rocky10.qcow2" + (cd "${d}" && sha512sum rocky10.qcow2 > SHA512SUMS && printf '%s debian13.qcow2\n' "$(printf 'x' | sha512sum | cut -d' ' -f1)" >> SHA512SUMS) + built () { bash -c "VM_IMAGE=rocky10; $(printf ". '%s'; " "${DIR}"/lib/{core,vm}.sh)IMAGE_DIR='${d}'; TWO_IMAGE='${WORK}/two.qcow2'; ${1}" 2>&1; } + out=$(built 'two_image && cat "${TWO_IMAGE}"') || fail "image conforme refusée : ${out}" + [[ ${out} == qcow2 ]] || fail "copie : ${out}" + rm -f "${WORK}/two.qcow2" + printf 'autre\n' >> "${d}/rocky10.qcow2" + out=$(built 'two_image') && fail "image modifiée acceptée" + [[ ${out} == *"somme SHA-512 incorrecte"* ]] || fail "message : ${out}" + [[ ! -e "${WORK}/two.qcow2" ]] || fail "image modifiée copiée" + rm -f "${d}/rocky10.qcow2" + [[ $(built 'two_image') == *"absente, à déposer depuis two-images"* ]] || fail "image absente : $(built 'two_image')" + [[ $(bash -c "VM_IMAGE=ubuntu; . '${DIR}/lib/core.sh'; echo suite" 2>&1) == *"VM_IMAGE inconnue : ubuntu"* ]] || fail "image inconnue acceptée" + teardown +} + +test_lease_value_reads_networkd_and_networkmanager () { + setup "lease_value : mêmes clés lues dans un bail networkd et dans nmcli -g DHCP4" + local nd="${WORK}/networkd" nm="${WORK}/nm" k + printf '%s\n' '# This is private data. Do not parse.' 'ADDRESS=10.21.1.10' 'NETMASK=255.255.255.0' 'ROUTER=10.21.1.254' \ + 'SERVER_ADDRESS=10.21.1.254' 'DNS=10.21.1.254' 'NTP=10.21.1.254' 'MTU=1450' 'CLIENTID=ffb6220feb' > "${nd}" + printf '%s\n' 'DHCP4:dhcp_client_identifier = 01\:52\:54\:00\:82\:00\:0a ' ' dhcp_lease_time = 86400 ' \ + ' dhcp_server_identifier = 10.21.1.254 ' ' domain_name_servers = 10.21.1.254 ' ' expiry = 1793566056 ' \ + ' interface_mtu = 1450 ' ' ip_address = 10.21.1.10 ' ' ntp_servers = 10.21.1.254 ' ' requested_ntp_servers = 1 ' \ + ' routers = 10.21.1.254 ' > "${nm}" + for k in ADDRESS:10.21.1.10 SERVER_ADDRESS:10.21.1.254 DNS:10.21.1.254 NTP:10.21.1.254 MTU:1450; do + [[ $(node "lease_value ${k%%:*} < '${nd}'") == "${k#*:}" ]] || fail "networkd ${k%%:*} : $(node "lease_value ${k%%:*} < '${nd}'")" + [[ $(node "lease_value ${k%%:*} < '${nm}'") == "${k#*:}" ]] || fail "NetworkManager ${k%%:*} : $(node "lease_value ${k%%:*} < '${nm}'")" + done + [[ -z $(node "lease_value ROUTER < '${nm}'") ]] || fail "clé sans correspondance NetworkManager lue" + [[ -z $(node "lease_value ADDRESS < /dev/null") ]] || fail "bail vide : valeur inventée" + teardown +} + test_scenario_result_counts_and_exit_codes () { local CASE for CASE in ok fail none; do @@ -490,11 +538,24 @@ test_vm_lease_reads_one_field_of_the_interface_lease () { teardown } +test_vm_ssh_skips_gssapi () { + setup "vm_ssh : clé du lab, sans GSSAPI (sshd de Rocky l'accepte, le login attend alors jusqu'à 40 s)" + local out + out=$(node 'ip () { echo "$*"; }; vm_ssh vp 1.2.3.4 true') + [[ ${out} == "netns exec vp ssh "*" -o GSSAPIAuthentication=no "*"syonad@1.2.3.4 true" ]] || fail "GSSAPI non désactivé : ${out}" + teardown +} + test_vm_cloud_init_done_waits_with_a_bound () { setup "vm_cloud_init_done : attend la fin de cloud-init, avec un délai borné, et en rend le code" [[ $(node 'vm_ssh () { echo "$1 $2 $3"; }; vm_cloud_init_done vp 1.2.3.4') == "vp 1.2.3.4 timeout 300 cloud-init status --wait" ]] || fail "commande par défaut" [[ $(node 'vm_ssh () { echo "$3"; }; vm_cloud_init_done vp 1.2.3.4 60') == "timeout 60 cloud-init status --wait" ]] || fail "délai fourni" - [[ $(node 'vm_ssh () { return 2; }; vm_cloud_init_done vp 1.2.3.4 || echo NON') == NON ]] || fail "cloud-init en erreur accepté" + [[ $(node 'vm_ssh () { return 2; }; vm_cloud_init_done vp 1.2.3.4 || echo NON') == *NON ]] || fail "cloud-init en erreur accepté" + local out + out=$(node 'vm_ssh () { case "$3" in *--wait) echo "status: done"; return 2 ;; *--long) printf "%s\n" "status: done" "extended_status: degraded done" "detail: DataSourceNoCloud" "errors: []" "recoverable_errors:" "WARNING:" " - Unable to find a system nic for eth0" ;; esac; }; vm_cloud_init_done vp 1.2.3.4; echo "rc=$?"') + [[ ${out} == *"code 2, extended_status: degraded done detail: DataSourceNoCloud errors: [] recoverable_errors: WARNING: - Unable to find a system nic for eth0"* ]] || fail "diagnostic absent : ${out}" + [[ $(printf '%s\n' "${out}" | tail -n 2 | head -n 1) == "code 2, "*"system nic for eth0"* ]] || fail "diagnostic sur plusieurs lignes, check n'en garde que la dernière : ${out}" + [[ ${out} == *"rc=2" ]] || fail "code perdu : ${out}" teardown } @@ -519,7 +580,12 @@ test_lease_renewed_requires_a_server_ack () { local f f=$(mktemp) [[ $(node "sleep () { :; }; dhcp_acks () { echo 1; }; vm_ssh () { echo \"\$3\" >> '${f}'; }; lease_renewed vp ip && echo OUI") == OUI ]] || fail "renouvellement non vu" - grep -qx 'sudo networkctl renew ens3' "${f}" || fail "renouvellement non demandé : $(cat "${f}")" + [[ $(bash -c "sudo () { \"\$@\"; }; date () { echo 1000; }; nmcli () { echo \"NM \$*\"; }; networkctl () { echo \"ND \$*\"; }; $(cat "${f}")") == "NM device modify ens3 ipv4.dhcp-timeout 700" ]] \ + || fail "NetworkManager : $(cat "${f}")" + [[ $(bash -c "sudo () { \"\$@\"; }; date () { echo 1001; }; nmcli () { echo \"NM \$*\"; }; $(cat "${f}")") == "NM device modify ens3 ipv4.dhcp-timeout 701" ]] \ + || fail "NetworkManager : même valeur d'une seconde à l'autre, rien à réappliquer" + [[ $(bash -c "sudo () { \"\$@\"; }; networkctl () { echo \"ND \$*\"; }; PATH=/nonexistent; $(cat "${f}")") == "ND renew ens3" ]] \ + || fail "systemd-networkd : $(cat "${f}")" [[ $(node "sleep () { :; }; dhcp_acks () { echo 0; }; vm_ssh () { :; }; lease_renewed vp ip 2>&1 || echo NON") == *NON ]] || fail "aucun ACK accepté" rm -f "${f}" teardown diff --git a/test/e2e/suite/03-image.sh b/test/e2e/suite/03-image.sh index 6fcc2ba..07f4601 100644 --- a/test/e2e/suite/03-image.sh +++ b/test/e2e/suite/03-image.sh @@ -1,6 +1,6 @@ -# fonctionnalité: hypothèses sur l'image de VM — outils (curl, python3), nom d'interface, effet réel de network-config, forme du compte verrouillé +# fonctionnalité: hypothèses sur l'image de VM — outils (curl, python3), nom d'interface, gestionnaire réseau attendu pour VM_IMAGE (systemd-networkd ou NetworkManager), effet réel de network-config, forme du compte verrouillé # hôtes: hv1 -# tickets: #70, #73 +# tickets: #70, #73, #82 on hv1 <<'NODE' KEY=$(vm_key) @@ -14,11 +14,23 @@ done check "t03-a : interface ens3 présente (nom supposé par la suite)" vm_ssh vp-t03 10.3.1.10 'test -e /sys/class/net/ens3' check "t03-a : aucune interface eth0" vm_ssh vp-t03 10.3.1.10 '! test -e /sys/class/net/eth0' check "network-config servi à t03-a : entrée eth0 visée par la MAC de sa NIC" vm_grep vp-t03 10.3.1.10 'curl -fsS http://169.254.169.254/network-config' "macaddress: \"$(mac_for_ip 10.3.1.10)\"" -NETFILE=$(vm_ssh vp-t03 10.3.1.10 'networkctl status ens3' | sed -n 's/^ *Network File: *//p') -info "t03-a : ens3 configurée par ${NETFILE:-aucun fichier networkd}" -check "t03-a : ens3 configurée par systemd-networkd (fichier : ${NETFILE:-aucun})" test -n "${NETFILE}" -not_eth0_file () { case "${NETFILE}" in ""|*eth0*) return 1 ;; esac; } -check "hypothèse : ens3 tient sa configuration du repli de cloud-init, qui ne lit pas network-config sous Debian 12 (fichier : ${NETFILE:-aucun})" not_eth0_file +MGR=$(vm_ssh vp-t03 10.3.1.10 "if ${VM_NM}; then echo NetworkManager; else echo systemd-networkd; fi") +case "${VM_IMAGE}" in rocky10) WANT=NetworkManager ;; *) WANT=systemd-networkd ;; esac +check "t03-a : gestionnaire réseau de l'image ${VM_IMAGE} : ${WANT} (lu : ${MGR:-illisible})" test "${MGR}" = "${WANT}" +case "${MGR}" in + systemd-networkd) + NETFILE=$(vm_ssh vp-t03 10.3.1.10 'networkctl status ens3' | sed -n 's/^ *Network File: *//p') + info "t03-a : ens3 configurée par ${NETFILE:-aucun fichier networkd}" + check "t03-a : ens3 configurée par systemd-networkd (fichier : ${NETFILE:-aucun})" test -n "${NETFILE}" + not_eth0_file () { case "${NETFILE}" in ""|*eth0*) return 1 ;; esac; } + check "hypothèse : ens3 tient sa configuration du repli de cloud-init, qui ne lit pas network-config sous Debian 12 (fichier : ${NETFILE:-aucun})" not_eth0_file + ;; + NetworkManager) + CONN=$(vm_ssh vp-t03 10.3.1.10 'nmcli -g GENERAL.CONNECTION device show ens3') + info "t03-a : ens3 configurée par la connexion NetworkManager ${CONN:-aucune}" + check "t03-a : ens3 configurée par NetworkManager (connexion : ${CONN:-aucune})" test -n "${CONN}" + ;; +esac SHADOW=$(vm_ssh vp-t03 10.3.1.10 "sudo awk -F: '\$1 == \"syonad\" {print substr(\$2, 1, 1)}' /etc/shadow") check "t03-a : compte syonad verrouillé (lock_passwd), champ de /etc/shadow commençant par « ! » (forme lue par 23 ; lu : « ${SHADOW} »)" test "${SHADOW}" = '!' NODE diff --git a/test/e2e/suite/21-dhcp-two.sh b/test/e2e/suite/21-dhcp-two.sh index b83fe07..5418655 100644 --- a/test/e2e/suite/21-dhcp-two.sh +++ b/test/e2e/suite/21-dhcp-two.sh @@ -24,13 +24,13 @@ for vm in 10.21.1.10:10.21.1.254 10.21.1.11:10.21.1.254 10.21.2.10:10.21.2.254 1 ip=${vm%%:*}; gw=${vm#*:} check "${ip} joignable" vm_wait vp-t21 "${ip}" check "${ip} : adresse de son propre subnet" has_addr vp-t21 "${ip}" - check "${ip} : bail DHCP tenu par systemd-networkd" vm_ssh vp-t21 "${ip}" 'ls /run/systemd/netif/leases/ | grep -q .' + check "${ip} : bail DHCP tenu par le gestionnaire réseau de l'image (adresse du bail)" test "$(vm_lease vp-t21 "${ip}" ADDRESS)" = "${ip}" check "${ip} : bail servi par la gateway ${gw} (server-id)" test "$(vm_lease vp-t21 "${ip}" SERVER_ADDRESS)" = "${gw}" check "${ip} : route par défaut via ${gw}" route_via vp-t21 "${ip}" default "${gw}" check "${ip} : route vers le VPC via ${gw}" route_via vp-t21 "${ip}" 10.21.0.0/16 "${gw}" check "${ip} : route /32 vers les métadonnées via ${gw}" route_via vp-t21 "${ip}" 169.254.169.254 "${gw}" done -check "10.21.1.10 : bail renouvelé (networkctl renew)" lease_renewed vp-t21 10.21.1.10 +check "10.21.1.10 : bail renouvelé (renouvellement DHCP demandé par l'invité)" lease_renewed vp-t21 10.21.1.10 check "10.21.1.10 : même adresse après le renouvellement" has_addr vp-t21 10.21.1.10 check "10.21.1.10 : renouvellement servi par la gateway" test "$(vm_lease vp-t21 10.21.1.10 SERVER_ADDRESS)" = 10.21.1.254 check "VM t21-m : MAC 02:de:ad:be:ef:01 fournie, sans lien avec son adresse 10.21.1.12" vm_launch t21-m --nic sn-t21a=10.21.1.12=02:de:ad:be:ef:01 --sshkey "${KEY}" diff --git a/test/e2e/suite/22-dhcp-dnsmasq.sh b/test/e2e/suite/22-dhcp-dnsmasq.sh index eb4c90c..03adc22 100644 --- a/test/e2e/suite/22-dhcp-dnsmasq.sh +++ b/test/e2e/suite/22-dhcp-dnsmasq.sh @@ -29,13 +29,13 @@ for vm in 10.22.1.10:10.22.1.254 10.22.1.11:10.22.1.254 10.22.2.10:10.22.2.254 1 ip=${vm%%:*}; gw=${vm#*:} check "${ip} joignable" vm_wait vp-t22 "${ip}" check "${ip} : adresse de son propre subnet" has_addr vp-t22 "${ip}" - check "${ip} : bail DHCP tenu par systemd-networkd" vm_ssh vp-t22 "${ip}" 'ls /run/systemd/netif/leases/ | grep -q .' + check "${ip} : bail DHCP tenu par le gestionnaire réseau de l'image (adresse du bail)" test "$(vm_lease vp-t22 "${ip}" ADDRESS)" = "${ip}" check "${ip} : bail servi par la gateway ${gw} (server-id)" test "$(vm_lease vp-t22 "${ip}" SERVER_ADDRESS)" = "${gw}" check "${ip} : route par défaut via ${gw}" route_via vp-t22 "${ip}" default "${gw}" check "${ip} : route vers le VPC via ${gw}" route_via vp-t22 "${ip}" 10.22.0.0/16 "${gw}" check "${ip} : route /32 vers les métadonnées via ${gw}" route_via vp-t22 "${ip}" 169.254.169.254 "${gw}" done -check "10.22.1.10 : bail renouvelé (networkctl renew)" lease_renewed vp-t22 10.22.1.10 +check "10.22.1.10 : bail renouvelé (renouvellement DHCP demandé par l'invité)" lease_renewed vp-t22 10.22.1.10 check "10.22.1.10 : même adresse après le renouvellement" has_addr vp-t22 10.22.1.10 check "10.22.1.10 : renouvellement servi par la gateway" test "$(vm_lease vp-t22 10.22.1.10 SERVER_ADDRESS)" = 10.22.1.254 vm_host () { echo "$(vm_ssh vp-t22 "${1}" 'cat /sys/class/net/ens3/address'),${1}"; } diff --git a/test/e2e/suite/25-multi-nic.sh b/test/e2e/suite/25-multi-nic.sh index 751a7a4..fbd8ca7 100644 --- a/test/e2e/suite/25-multi-nic.sh +++ b/test/e2e/suite/25-multi-nic.sh @@ -12,7 +12,7 @@ check "API : deux interfaces, une seule primaire" test "$(curl -fsS "${API}/vms/ check "t25-m joignable sur sa primaire 10.25.1.10" vm_wait vp-t25 10.25.1.10 check "t25-m : deux interfaces réseau (ens3, ens4)" vm_ssh vp-t25 10.25.1.10 'test -e /sys/class/net/ens3 && test -e /sys/class/net/ens4' check "t25-m : 10.25.1.10 sur ens3" vm_grep vp-t25 10.25.1.10 'ip -4 -o addr show dev ens3' ' 10.25.1.10/' -check "t25-m : ens4 obtient un bail DHCP de systemd-networkd" test "$(vm_lease vp-t25 10.25.1.10 ADDRESS ens4)" = 10.25.2.20 +check "t25-m : ens4 obtient un bail DHCP du gestionnaire réseau de l'image" test "$(vm_lease vp-t25 10.25.1.10 ADDRESS ens4)" = 10.25.2.20 check "t25-m : 10.25.2.20 sur ens4" vm_grep vp-t25 10.25.1.10 'ip -4 -o addr show dev ens4' ' 10.25.2.20/' check "t25-m joignable sur sa seconde adresse 10.25.2.20" vm_wait vp-t25 10.25.2.20 check "t25-m : une seule route par défaut" test "$(vm_ssh vp-t25 10.25.1.10 'ip -4 route show default' | wc -l)" -eq 1 diff --git a/test/e2e/suite/27-reboot.sh b/test/e2e/suite/27-reboot.sh index 797dd28..bcdf9fc 100644 --- a/test/e2e/suite/27-reboot.sh +++ b/test/e2e/suite/27-reboot.sh @@ -21,7 +21,9 @@ check "t27-r : cloud-init terminé après le redémarrage" vm_cloud_init_done vp check "t27-r : toujours running pour l'API" test "$(api_state vms/t27-r)" = running check "t27-r : même processus QEMU (redémarrage invité, pas de recréation)" test "$(pgrep -f "${VOLUMES}/t27-r.qcow2" | sort | tr '\n' ' ')" = "${QEMU}" check "t27-r : même adresse 10.27.1.10" has_addr vp-t27 10.27.1.10 -check "t27-r : nouveau bail obtenu après le démarrage" vm_ssh vp-t27 10.27.1.10 'f=/run/systemd/netif/leases/$(cat /sys/class/net/ens3/ifindex); sudo test -f "$f" && [ "$(sudo stat -c %Y "$f")" -ge "$(( $(date +%s) - $(cut -d. -f1 /proc/uptime) ))" ]' +BOOTED=$(vm_ssh vp-t27 10.27.1.10 'echo $(( $(date +%s) - $(cut -d. -f1 /proc/uptime) ))') +LEASED=$(vm_lease_mtime vp-t27 10.27.1.10) +check "t27-r : nouveau bail obtenu après le démarrage (bail ${LEASED:-illisible}, démarrage ${BOOTED:-illisible})" test "${LEASED:-0}" -ge "${BOOTED:-1}" check "t27-r : bail servi par la gateway" test "$(vm_lease vp-t27 10.27.1.10 SERVER_ADDRESS)" = 10.27.1.254 check "t27-r : user_data non rejoué (même instance-id, une seule ligne)" test "$(vm_ssh vp-t27 10.27.1.10 'wc -l < /var/tmp/t27-runcmd')" -eq 1 NODE diff --git a/test/e2e/suite/29-dns-ntp.sh b/test/e2e/suite/29-dns-ntp.sh index 941fe83..1a4c553 100644 --- a/test/e2e/suite/29-dns-ntp.sh +++ b/test/e2e/suite/29-dns-ntp.sh @@ -1,4 +1,4 @@ -# fonctionnalité: DNS et NTP des VM par two-hostsvc — options DHCP 6 et 42 = interface_ip, redirection vers 169.254.169.253 dans le VPC (vxlan et bridge), seuls 53 et 123 servis, alertes du watchdog, VPC en error si two-hostsvc ne répond pas +# fonctionnalité: DNS et NTP des VM par two-hostsvc — options DHCP 6 et 42 = interface_ip, redirection vers 169.254.169.253 dans le VPC (vxlan et bridge), seuls 53 et 123 servis, alertes du watchdog, VPC en error si two-hostsvc ne répond pas ; chrony de la VM sur la seule gateway (images avec chrony) # hôtes: hv1 # tickets: #86 @@ -48,6 +48,12 @@ ntp_ok () { out=$(vm_py "${1}" "${2}" ntp_py "${3}") || { echo "pas de réponse NTP de ${3}"; return 1; } echo "${out}" | grep -qE '^mode=4 origin=ok li=[0-3] stratum=[0-9]+ offset=[0-4]$' || { echo "${out}"; return 1; } } +has_chrony () { [ "${VM_IMAGE}" = rocky10 ] || vm_ssh "${1}" "${2}" 'command -v chronyc' >/dev/null; } +chrony_only () { + local got + got=$(vm_ssh "${1}" "${2}" 'chronyc -n -c sources' | awk -F, '{print $3}' | sort | tr '\n' ' ') + [ "${got}" = "${3} " ] || { echo "sources de chrony : ${got:-aucune}"; return 1; } +} no_answer () { ! vm_py "${1}" "${2}" dns_py "${3}" udp deb.debian.org "${4}" >/dev/null 2>&1; } served_ports () { ip netns exec "${1}" ss -Hlntu | awk '$5 ~ /^169\.254\.169\.253:/ {print $1, $5}' | sort | tr '\n' ' '; } rules () { ip netns exec "${1}" nft list chain ip two hostsvc | sed -n '/^\t\t/s/^\t\t//p'; } @@ -91,6 +97,11 @@ for vm in vp-t29:10.29.1.10 vp-t29b:10.33.0.129; do check "${ip} : DNS en TCP via ${GW}" dns_ok "${vpc}" "${ip}" "${GW}" tcp check "${ip} : NTP via ${GW}, réponse serveur, origine vérifiée, écart < 5 s" ntp_ok "${vpc}" "${ip}" "${GW}" info "${ip} : NTP $(vm_py "${vpc}" "${ip}" ntp_py "${GW}" 2>&1)" + if has_chrony "${vpc}" "${ip}"; then + check "${ip} : chrony n'a pour source que la gateway ${GW} (option 42)" chrony_only "${vpc}" "${ip}" "${GW}" + else + info "${ip} : pas de chronyc dans l'image ${VM_IMAGE}, sources NTP de la VM non contrôlées" + fi info "${ip} : résolveur système : $(vm_ssh "${vpc}" "${ip}" 'getent hosts deb.debian.org' 2>&1 | head -1)" check "${ip} : port 5353 de la gateway non redirigé (aucune réponse)" no_answer "${vpc}" "${ip}" "${GW}" 5353 done diff --git a/test/e2e/suite/33-bridge.sh b/test/e2e/suite/33-bridge.sh index b03faa5..e5f9e9c 100644 --- a/test/e2e/suite/33-bridge.sh +++ b/test/e2e/suite/33-bridge.sh @@ -40,12 +40,18 @@ NODE on hv1 <<'NODE' own_meta () { - local n ok=0 + local n ok=0 out seen why="" for n in 1 2 3 4 5; do vm_ssh vp-t33 "${1}" 'sudo ip neigh flush dev ens3' >/dev/null 2>&1 - vm_grep vp-t33 "${1}" 'curl -fsS -m 3 http://169.254.169.254/meta-data' "^instance-id: ${2}\$" && ok=$((ok + 1)) + out=$(vm_ssh vp-t33 "${1}" 'curl -fsS -m 3 http://169.254.169.254/meta-data 2>&1; echo "curl=$?"; ip neigh show dev ens3 | tr "\n" ";"' 2>&1) + if grep -q "^instance-id: ${2}\$" <<<"${out}"; then + ok=$((ok + 1)) + continue + fi + seen=$(grep -E '^instance-id:|^curl|lladdr' <<<"${out}" | tr '\n' ' ') + why="${why} [essai ${n} : ${seen:-$(tail -n 1 <<<"${out}")}]" done - [ "${ok}" -eq 5 ] || { echo "${2} : ${ok}/5 réponses avec ses propres métadonnées"; return 1; } + [ "${ok}" -eq 5 ] || { echo "${2} : ${ok}/5 réponses avec ses propres métadonnées${why}"; return 1; } } check "hv1 : quatre règles de confinement de 10.33.0.1 sur v-t33a-i" test "$(nft_rules vp-t33 v-t33a-i | grep -c '10.33.0.1 ')" -eq 4 RESPONDERS=$(vm_frames vp-t33 10.33.0.21 arp-who ens3 10.33.0.21 10.33.0.1 2) @@ -63,7 +69,7 @@ vm_sniff_start "${S}/arp.temoin" vp-t33 10.33.0.21 ens3 16 arp-from 10.33.0.1 vm_sniff_start "${S}/dhcp.temoin" vp-t33 10.33.0.21 ens3 16 udp-from 10.33.0.1 67 ip -n vp-t33 neigh flush dev br-t33a ip netns exec vp-t33 ping -c 2 -W 1 10.33.0.21 >/dev/null 2>&1 -vm_ssh vp-t33 10.33.0.21 'sudo networkctl renew ens3' >/dev/null 2>&1 +vm_renew vp-t33 10.33.0.21 >/dev/null 2>&1 vm_frames vp-t33 10.33.0.21 arp ens3 10.33.0.21 10.33.0.99 3 >/dev/null 2>&1 wait check "br-t33a : apprentissage rétabli (ageing_time ${AGEING})" ip netns exec vp-t33 ip link set br-t33a type bridge ageing_time "${AGEING}" @@ -83,13 +89,20 @@ NODE on hv2 <<'NODE' own_meta () { - local n ok=0 + local n ok=0 out seen why="" for n in 1 2 3 4 5; do vm_ssh vp-t33 "${1}" 'sudo ip neigh flush dev ens3' >/dev/null 2>&1 - vm_grep vp-t33 "${1}" 'curl -fsS -m 3 http://169.254.169.254/meta-data' "^instance-id: ${2}\$" && ok=$((ok + 1)) + out=$(vm_ssh vp-t33 "${1}" 'curl -fsS -m 3 http://169.254.169.254/meta-data 2>&1; echo "curl=$?"; ip neigh show dev ens3 | tr "\n" ";"' 2>&1) + if grep -q "^instance-id: ${2}\$" <<<"${out}"; then + ok=$((ok + 1)) + continue + fi + seen=$(grep -E '^instance-id:|^curl|lladdr' <<<"${out}" | tr '\n' ' ') + why="${why} [essai ${n} : ${seen:-$(tail -n 1 <<<"${out}")}]" done - [ "${ok}" -eq 5 ] || { echo "${2} : ${ok}/5 réponses avec ses propres métadonnées"; return 1; } + [ "${ok}" -eq 5 ] || { echo "${2} : ${ok}/5 réponses avec ses propres métadonnées${why}"; return 1; } } +info "MAC de br-t33a : hv2 $(ip -n vp-t33 link show br-t33a | awk '/ether/ {print $2}')" check "deux hôtes : t33-b1 (hv2) reçoit toujours ses propres métadonnées (5 essais, cache ARP vidé)" own_meta 10.33.0.23 t33-b1 check "deux hôtes : t33-b1 (hv2) joint t33-a2 (hv1)" vm_ssh vp-t33 10.33.0.23 'ping -n -c 3 -W 2 10.33.0.22' NODE diff --git a/test/e2e/suite/41-evpn-l2.sh b/test/e2e/suite/41-evpn-l2.sh index 7062f0d..d79c28a 100644 --- a/test/e2e/suite/41-evpn-l2.sh +++ b/test/e2e/suite/41-evpn-l2.sh @@ -26,7 +26,7 @@ check "t41-p (hv1) joint t41-q (hv2)" vm_ssh vp-t41 10.41.1.10 'ping -c 3 -W 2 1 for i in $(seq 1 24); do vm_ssh vp-t41 10.41.1.10 "timeout 5 bash -c '/dev/null 2>&1 && break; sleep 5; done check "t41-p ouvre une connexion TCP vers t41-q:22" vm_ssh vp-t41 10.41.1.10 "timeout 5 bash -c '/dev/null 2>&1 && break; sleep 2; done +info "10.46.1.10 : premier ping réussi à l'essai ${i}, $(( $(date +%s) - T0 )) s après le début de la capture (fenêtre de 12 s)" check "t46-a (hôte de la passerelle) joint 240.255.0.1 derrière les bordures" vm_ssh vp-t46 10.46.1.10 'ping -n -c 3 -W 2 240.255.0.1' wait info "ICMP sortis du netns par vp-t46-e : depuis 240.0.0.46 $(cat "${S}/public"), depuis 10.46.1.10 $(cat "${S}/private")" diff --git a/test/e2e/suite/47-ip-flottante.sh b/test/e2e/suite/47-ip-flottante.sh index 1bfa638..7e729dc 100644 --- a/test/e2e/suite/47-ip-flottante.sh +++ b/test/e2e/suite/47-ip-flottante.sh @@ -31,7 +31,9 @@ S=$(mktemp -d) sniff_start "${S}/fip" vp-t47-e 12 icmp-from 240.0.0.47 sniff_start "${S}/ng" vp-t47-e 12 icmp-from 240.0.0.57 sniff_start "${S}/private" vp-t47-e 12 icmp-from 10.47.1.10 +T0=$(date +%s) for i in $(seq 1 10); do vm_ssh vp-t47 10.47.1.10 'ping -n -c 1 -W 2 240.255.0.1' >/dev/null 2>&1 && break; sleep 2; done +info "10.47.1.10 : premier ping réussi à l'essai ${i}, $(( $(date +%s) - T0 )) s après le début de la capture (fenêtre de 12 s)" check "t47-a joint 240.255.0.1 derrière les bordures" vm_ssh vp-t47 10.47.1.10 'ping -n -c 3 -W 2 240.255.0.1' wait info "ICMP sortis du netns pendant le ping de t47-a : source 240.0.0.47 $(cat "${S}/fip"), 240.0.0.57 $(cat "${S}/ng"), 10.47.1.10 $(cat "${S}/private")" diff --git a/test/e2e/suite/51-l3vni.sh b/test/e2e/suite/51-l3vni.sh index 4e562f0..5433ae1 100644 --- a/test/e2e/suite/51-l3vni.sh +++ b/test/e2e/suite/51-l3vni.sh @@ -54,7 +54,7 @@ check "hv1 : aucun VXLAN de sn-t51e (VNI 5112) sur hv1" sh -c "! ip link show vx for i in $(seq 1 24); do vm_ssh vp-t51 10.51.1.10 'ping -c 1 -W 2 10.51.2.10' >/dev/null 2>&1 && break; sleep 5; done check "t51-a (sn-t51d, hv1) joint t51-b (sn-t51e, hv2) par le L3VNI, forwarding par interface" vm_ssh vp-t51 10.51.1.10 'ping -c 3 -W 2 10.51.2.10' check "trame pleine taille : 1472 octets en -M do" vm_ssh vp-t51 10.51.1.10 'ping -M do -s 1472 -c 2 -W 2 10.51.2.10' -check "1473 octets refusés localement (MTU 1500)" vm_grep vp-t51 10.51.1.10 'ping -M do -s 1473 -c 1 -W 2 10.51.2.10' 'message too long' +check "1473 octets refusés localement (MTU 1500)" vm_grep vp-t51 10.51.1.10 'ping -M do -s 1473 -c 1 -W 2 10.51.2.10' '[Mm]essage too long' check "TTL 1 : expire à la gateway du subnet, netns de hv1 (10.51.1.254)" vm_grep vp-t51 10.51.1.10 'ping -n -c 3 -i 1.2 -W 2 -t 1 10.51.2.10' 'From 10.51.1.254 .*exceeded' check "TTL 2 : expire dans la VRF de hv1 (169.254.0.1)" vm_grep vp-t51 10.51.1.10 'ping -n -c 3 -i 1.2 -W 2 -t 2 10.51.2.10' 'From 169.254.0.1 .*exceeded' check "TTL 5 : atteint t51-b — quatre routeurs : gateway hv1, VRF hv1, VRF hv2, netns hv2" vm_ssh vp-t51 10.51.1.10 'ping -n -c 1 -W 2 -t 5 10.51.2.10' diff --git a/test/e2e/suite/52-migration.sh b/test/e2e/suite/52-migration.sh index 41e0a3d..8490b3d 100644 --- a/test/e2e/suite/52-migration.sh +++ b/test/e2e/suite/52-migration.sh @@ -59,8 +59,20 @@ check "rr1 : routes EVPN de type 2 reçues (témoin)" sh -c 'echo "$1" | grep -q check "rr1 : aucune route de type 2 pour la MAC anycast de sn-t52s (${MAC}), présente sur hv1 et hv2" sh -c '! echo "$1" | grep -qi "$2"' _ "${R}" "${MAC}" NODE on hv1 <<'NODE' +no_dup_mac () { + local dups mac why + dups=$(vtysh -c "show evpn mac vni ${1} duplicate" | grep -oiE '([0-9a-f]{2}:){5}[0-9a-f]{2}' | sort -u) + [ -z "${dups}" ] && return 0 + why="MAC de t52-m3 : $(curl -fsS "${API}/vms/t52-m3" | jq -r '.interfaces[0].mac')" + for mac in ${dups}; do + why="${why} | en double : ${mac} ; FRR : $(vtysh -c "show evpn mac vni ${1} mac ${mac}" | tr -s ' \n' ' ')" + why="${why} ; fdb vp-t52 : $(ip netns exec vp-t52 bridge fdb show | grep -i "${mac}" | tr '\n' ';')" + done + echo "${why}" + return 1 +} MAC=$(anycast_mac 5211) -check "hv1 : aucune MAC en double sur la VNI 5211" sh -c "! vtysh -c 'show evpn mac vni 5211 duplicate' | grep -qiE '([0-9a-f]{2}:){5}[0-9a-f]{2}'" +check "hv1 : aucune MAC en double sur la VNI 5211" no_dup_mac 5211 check "hv1 : table EVPN de la VNI 5211 non vide (témoin)" sh -c "vtysh -c 'show evpn mac vni 5211' | grep -qiE '([0-9a-f]{2}:){5}[0-9a-f]{2}'" check "hv1 : MAC anycast ${MAC} absente de la table EVPN de la VNI 5211" sh -c '! vtysh -c "show evpn mac vni $1" | grep -qi "$2"' _ 5211 "${MAC}" NODE