Lab : fournir l'image Rocky 10 des VM de test #53

Closed
opened 2026-10-04 19:35:27 +00:00 by nicolas.boufideline · 3 comments

Constat

Le lab de #50 lance ses VM de test avec une Debian genericcloud modifiée sur place (source de
métadonnées NoCloud ajoutée, cf. image-qcow2.rst), faute de pouvoir utiliser l'image Rocky 10
de l'équipe, compatible avec le serveur de métadonnées de two : publiée dans le registre de paquets
Forgejo, son téléchargement depuis le serveur de lab (Scaleway, fr-par) prenait plus d'une heure
— hors de proportion avec une session facturée à l'heure, montée et démontée à chaque campagne.

Conséquence : les scénarios du lab (E5) qualifient two avec une image qui n'est pas celle utilisée
réellement.

Objectif

Une voie pour fournir l'image Rocky 10 au lab, vérifiée (somme de contrôle, comme les autres
images), en quelques minutes au plus depuis le serveur de lab.

Pistes

  • Héberger l'image au plus près du lab (stockage objet dans la même région que le serveur).
  • Réduire sa taille (compression qcow2, image allégée).
  • La construire dans le lab à partir de l'image Rocky du fournisseur, en suivant image-qcow2.rst —
    au prix du temps de construction à chaque session, mais sans transfert.
  • Mettre en cache sur le serveur de lab : sans intérêt tant que le serveur est détruit à chaque
    session.

Ensuite, côté lab

  • Une entrée images de la topologie pointant sur l'image Rocky et sa somme de contrôle — le
    Fetcher de lab vérifie déjà SHA512SUMS.
  • Les scénarios utilisent cette image pour les VM de test au lieu de la Debian modifiée.

Analyse de risque

  • L'image est publique si elle reste hors authentification : elle ne doit contenir ni mot de passe,
    ni clé, ni configuration interne (vérifié le 2026-10-04 : construite selon image-qcow2.rst,
    faite pour être utilisée).
  • Une image hébergée hors de Forgejo doit rester vérifiée par une somme publiée depuis une source
    de confiance.

Lié : #50.

## Constat Le lab de #50 lance ses VM de test avec une **Debian `genericcloud`** modifiée sur place (source de métadonnées NoCloud ajoutée, cf. `image-qcow2.rst`), faute de pouvoir utiliser l'image **Rocky 10** de l'équipe, compatible avec le serveur de métadonnées de two : publiée dans le registre de paquets Forgejo, son téléchargement depuis le serveur de lab (Scaleway, fr-par) prenait **plus d'une heure** — hors de proportion avec une session facturée à l'heure, montée et démontée à chaque campagne. Conséquence : les scénarios du lab (E5) qualifient two avec une image qui n'est pas celle utilisée réellement. ## Objectif Une voie pour fournir l'image Rocky 10 au lab, **vérifiée** (somme de contrôle, comme les autres images), en quelques minutes au plus depuis le serveur de lab. ## Pistes - Héberger l'image au plus près du lab (stockage objet dans la même région que le serveur). - Réduire sa taille (compression qcow2, image allégée). - La construire dans le lab à partir de l'image Rocky du fournisseur, en suivant `image-qcow2.rst` — au prix du temps de construction à chaque session, mais sans transfert. - Mettre en cache sur le serveur de lab : sans intérêt tant que le serveur est détruit à chaque session. ## Ensuite, côté lab - Une entrée `images` de la topologie pointant sur l'image Rocky et sa somme de contrôle — le `Fetcher` de `lab` vérifie déjà `SHA512SUMS`. - Les scénarios utilisent cette image pour les VM de test au lieu de la Debian modifiée. ## Analyse de risque - L'image est publique si elle reste hors authentification : elle ne doit contenir ni mot de passe, ni clé, ni configuration interne (vérifié le 2026-10-04 : construite selon `image-qcow2.rst`, faite pour être utilisée). - Une image hébergée hors de Forgejo doit rester vérifiée par une somme publiée depuis une source de confiance. Lié : #50.
Author
Owner

Plan — images reproductibles dans syonad/two-images (2026-10-24)

Périmètre de ce ticket : construire une image Rocky 10 reproductible, et une Debian 13 qui
remplace la préparation faite aujourd'hui par two_image dans le lab. La mise à disposition des
images au lab est un autre sujet ; la suite e2e complète sous Rocky est #82.

Dépôt : https://git.g3e.fr/syonad/two-images (public), satellite de two.

Décisions

  • Packer, builder qemu, une seule méthode, en amd64 partout (KVM sous Linux, TCG sur le Mac : lent, accepté).
  • Méthode de docs/deploiement/image-qcow2.rst : la VM de construction démarre sur un overlay de l'image
    du fournisseur
    (même distribution que la cible, donc chroot cohérent), avec deux disques en plus :
    la cible, sur laquelle l'image du fournisseur est écrite en brut (qemu-img convert -O raw), et
    un disque de travail (téléchargement). Pas de « VM démarrée puis remplie ».
  • SELinux désactivé (Rocky), comme image-qcow2.rst.
  • Entrées épinglées avec leur somme : Packer 1.16.2, plugin qemu v1.1.7, Rocky 10.2 GenericCloud Base
    20260525.0 (SHA-256 du fournisseur), Debian 13 genericcloud 20261021-2638 (SHA-512). Jamais latest.
  • Images reconstruites à chaque usage, jamais hébergées.

Déroulé d'une construction

  1. packer.sh télécharge Packer épinglé et vérifie sa somme ; une clé SSH éphémère est générée pour la
    VM de construction (seed cloud-init en ISO cidata).
  2. Dans la VM : garde avant écriture (disque cible = celui de la taille attendue, vide), téléchargement
    et vérification de l'image sur le disque de travail, écriture brute sur la cible, montage sur /mnt.
  3. Personnalisation en chroot — commun : 99_metadata.cfg (NoCloud → 169.254.169.254, barre oblique
    finale), 98_network_updates.cfg (boot-legacy), udev 90-two-xvd.rules, DHCP sur toutes les
    interfaces (networkd sous Debian ; équivalent NetworkManager à établir sous Rocky).
    Rocky en plus : sshd, bannière, 20_user.cfg (syonad), fstrim, rpcbind, cockpit, SELinux.
  4. Nettoyage (resolv.conf, caches, /root/.ssh, journaux, /var/lib/cloud, machine-id et clés d'hôte
    SSH
    ), zérotage, démontage.
  5. Sortie : le disque cible compressé en qcow2 + SHA512SUMS ; l'overlay est jeté.

Vérification

  • verify hors démarrage : aucune clé ni identité de construction, fichiers two présents, SELinux.
  • Démarrage local de l'image produite (QEMU, seed NoCloud) : cloud-init done, SSH, DHCP sur 2 NIC, /dev/xvdX.

Hors périmètre : mise à disposition au lab, scénario e2e, #82.

## Plan — images reproductibles dans syonad/two-images (2026-10-24) **Périmètre de ce ticket** : construire une image **Rocky 10** reproductible, et une **Debian 13** qui remplace la préparation faite aujourd'hui par `two_image` dans le lab. La mise à disposition des images au lab est un autre sujet ; la suite e2e complète sous Rocky est #82. **Dépôt** : https://git.g3e.fr/syonad/two-images (public), satellite de two. **Décisions** - Packer, builder `qemu`, **une seule méthode, en amd64** partout (KVM sous Linux, TCG sur le Mac : lent, accepté). - Méthode de `docs/deploiement/image-qcow2.rst` : la VM de construction démarre sur un **overlay de l'image du fournisseur** (même distribution que la cible, donc chroot cohérent), avec deux disques en plus : la **cible**, sur laquelle l'image du fournisseur est écrite en brut (`qemu-img convert -O raw`), et un disque de **travail** (téléchargement). Pas de « VM démarrée puis remplie ». - **SELinux désactivé** (Rocky), comme `image-qcow2.rst`. - Entrées épinglées avec leur somme : Packer 1.16.2, plugin qemu v1.1.7, Rocky 10.2 GenericCloud Base `20260525.0` (SHA-256 du fournisseur), Debian 13 genericcloud `20261021-2638` (SHA-512). Jamais `latest`. - Images reconstruites à chaque usage, jamais hébergées. **Déroulé d'une construction** 1. `packer.sh` télécharge Packer épinglé et vérifie sa somme ; une clé SSH éphémère est générée pour la VM de construction (seed cloud-init en ISO `cidata`). 2. Dans la VM : garde avant écriture (disque cible = celui de la taille attendue, vide), téléchargement et vérification de l'image sur le disque de travail, écriture brute sur la cible, montage sur `/mnt`. 3. Personnalisation en chroot — commun : `99_metadata.cfg` (NoCloud → 169.254.169.254, barre oblique finale), `98_network_updates.cfg` (boot-legacy), udev `90-two-xvd.rules`, DHCP sur toutes les interfaces (networkd sous Debian ; **équivalent NetworkManager à établir** sous Rocky). Rocky en plus : sshd, bannière, `20_user.cfg` (syonad), fstrim, rpcbind, cockpit, SELinux. 4. Nettoyage (resolv.conf, caches, /root/.ssh, journaux, `/var/lib/cloud`, **machine-id et clés d'hôte SSH**), zérotage, démontage. 5. Sortie : le disque cible compressé en qcow2 + `SHA512SUMS` ; l'overlay est jeté. **Vérification** - `verify` hors démarrage : aucune clé ni identité de construction, fichiers two présents, SELinux. - Démarrage local de l'image produite (QEMU, seed NoCloud) : cloud-init `done`, SSH, DHCP sur 2 NIC, `/dev/xvdX`. **Hors périmètre** : mise à disposition au lab, scénario e2e, #82.
Author
Owner

Résultats — syonad/two-images 085882a (2026-10-24)

Images rocky10 (Rocky 10.2 GenericCloud Base 20260525.0, SHA-256 dont la signature Rocky 10
FC22 6859 C086 0BF0 DDB9 5B08 5B10 6C73 6FED FC85 a été vérifiée à l'épinglage) et debian13
(genericcloud 20261021-2638, SHA-512), construites selon le plan ci-dessus.

Construction Test de démarrage
debian13, Mac arm64 (TCG) 1 min 50 OK
debian13, serveur de lab (KVM) 1 min 16 OK
rocky10, Mac arm64 (TCG) 12 min OK
rocky10, serveur de lab (KVM) 6 min 17 OK

Contrôles dans la VM de construction, sur l'image montée : /var/lib/cloud vide, aucune clé d'hôte
SSH ni authorized_keys, machine-id vide, utilisateur de construction absent, aucun journal, fichiers
two présents (NoCloud, 98_network_updates, udev xvd, DHCP toutes interfaces), SELinux et
utilisateur syonad (Rocky).

test.sh démarre l'image produite comme le ferait l'agent : métadonnées servies sur
169.254.169.254 (guestfwd QEMU), 2 interfaces, un disque SCSI de série xvdb. Vérifié, puis
revérifié après redémarrage : cloud-init done, nom d'hôte servi par les métadonnées, bail DHCP
sur les deux interfaces, seconde interface configurée par le fichier de two, /dev/xvdb,
aucune clé de construction, SELinux Disabled (Rocky).

Constats

  • DHCP sur toutes les interfaces sous NetworkManager (point « à établir » de
    image-qcow2.rst) : un profil keyfile /etc/NetworkManager/system-connections/90-all-en.nmconnection
    (0600) — type=ethernet, [match] interface-name=en*, multi-connect=3,
    autoconnect-priority=-100, ipv4.method=auto, ipv6.method=ignore — donne son bail à la seconde
    interface, au premier démarrage et après redémarrage (nmcli : connexion two-all-en).
  • SELinux : SELINUX=disabled dans /etc/selinux/config suffit sous Rocky 10.2 (getenforce →
    Disabled), sans argument noyau.
  • seedfrom sans délai maximal : avec seedfrom dans la configuration de la source, cloud-init
    25.1.4 lit les métadonnées par util.read_seeded(seedfrom, timeout=None) (DataSourceNoCloud.py) ;
    timeout: 5 / max_wait: 10 ne s'appliquent pas à ce chemin. Observé : serveur de métadonnées
    absent → la VM reste bloquée à l'étape réseau de cloud-init, sans SSH. Non reproduit avec un agent two.
  • dnf remove 'cockpit*' de la doc retire aussi 24 dépendances devenues inutiles
    (dracut-network, ethtool, kdump-utils, sos, setroubleshoot-server…). Reproduit tel quel ;
    --setopt=clean_requirements_on_remove=False limiterait la suppression à cockpit.
  • Écart volontaire avec la doc : aucun resolv.conf copié dans l'image (la personnalisation n'a pas
    besoin du réseau ; celui de Debian 13 est un lien symbolique).

Doc mise à jour sur feature-53 (9ad1cdd) : profil NetworkManager, avertissement seedfrom.

Hors périmètre, inchangé : mise à disposition des images au lab, suite e2e sous Rocky (#82).

## Résultats — syonad/two-images `085882a` (2026-10-24) Images `rocky10` (Rocky 10.2 GenericCloud Base `20260525.0`, SHA-256 dont la signature Rocky 10 `FC22 6859 C086 0BF0 DDB9 5B08 5B10 6C73 6FED FC85` a été vérifiée à l'épinglage) et `debian13` (genericcloud `20261021-2638`, SHA-512), construites selon le plan ci-dessus. | | Construction | Test de démarrage | |---|---|---| | debian13, Mac arm64 (TCG) | 1 min 50 | OK | | debian13, serveur de lab (KVM) | 1 min 16 | OK | | rocky10, Mac arm64 (TCG) | 12 min | OK | | rocky10, serveur de lab (KVM) | 6 min 17 | OK | Contrôles dans la VM de construction, sur l'image montée : `/var/lib/cloud` vide, aucune clé d'hôte SSH ni `authorized_keys`, machine-id vide, utilisateur de construction absent, aucun journal, fichiers two présents (NoCloud, `98_network_updates`, udev xvd, DHCP toutes interfaces), SELinux et utilisateur `syonad` (Rocky). `test.sh` démarre l'image produite comme le ferait l'agent : métadonnées servies sur `169.254.169.254` (guestfwd QEMU), 2 interfaces, un disque SCSI de série `xvdb`. Vérifié, puis revérifié après redémarrage : cloud-init `done`, nom d'hôte servi par les métadonnées, bail DHCP sur les deux interfaces, **seconde interface configurée par le fichier de two**, `/dev/xvdb`, aucune clé de construction, SELinux `Disabled` (Rocky). **Constats** - **DHCP sur toutes les interfaces sous NetworkManager** (point « à établir » de `image-qcow2.rst`) : un profil keyfile `/etc/NetworkManager/system-connections/90-all-en.nmconnection` (0600) — `type=ethernet`, `[match] interface-name=en*`, `multi-connect=3`, `autoconnect-priority=-100`, `ipv4.method=auto`, `ipv6.method=ignore` — donne son bail à la seconde interface, au premier démarrage et après redémarrage (`nmcli` : connexion `two-all-en`). - **SELinux** : `SELINUX=disabled` dans `/etc/selinux/config` suffit sous Rocky 10.2 (`getenforce` → `Disabled`), sans argument noyau. - **`seedfrom` sans délai maximal** : avec `seedfrom` dans la configuration de la source, cloud-init 25.1.4 lit les métadonnées par `util.read_seeded(seedfrom, timeout=None)` (`DataSourceNoCloud.py`) ; `timeout: 5` / `max_wait: 10` ne s'appliquent pas à ce chemin. Observé : serveur de métadonnées absent → la VM reste bloquée à l'étape réseau de cloud-init, sans SSH. Non reproduit avec un agent two. - **`dnf remove 'cockpit*'`** de la doc retire aussi 24 dépendances devenues inutiles (`dracut-network`, `ethtool`, `kdump-utils`, `sos`, `setroubleshoot-server`…). Reproduit tel quel ; `--setopt=clean_requirements_on_remove=False` limiterait la suppression à cockpit. - Écart volontaire avec la doc : aucun `resolv.conf` copié dans l'image (la personnalisation n'a pas besoin du réseau ; celui de Debian 13 est un lien symbolique). Doc mise à jour sur `feature-53` (`9ad1cdd`) : profil NetworkManager, avertissement `seedfrom`. Hors périmètre, inchangé : mise à disposition des images au lab, suite e2e sous Rocky (#82).
Author
Owner

Fusionné dans main (aaef16a). Image Rocky 10 (et Debian 13) construite et validée dans syonad/two-images, résultats ci-dessus (1281). Suite e2e sous Rocky : #82 ; mise à disposition des images au lab : sujet à part.

Fusionné dans main (`aaef16a`). Image Rocky 10 (et Debian 13) construite et validée dans syonad/two-images, résultats ci-dessus (1281). Suite e2e sous Rocky : #82 ; mise à disposition des images au lab : sujet à part.
Sign in to join this conversation.
No milestone
No project
No assignees
1 participant
Notifications
Due date
The due date is invalid or out of range. Please use the format "yyyy-mm-dd".

No due date set.

Dependencies

No dependencies set.

Reference
syonad/two#53
No description provided.