Suppression d'une VM en erreur : sockets QEMU laissés dans /run/two/vms #84

Closed
opened 2026-10-24 12:45:58 +00:00 by nicolas.boufideline · 3 comments

Constat

Campagne de lab du 2026-10-24 (#80, commentaire 1288), scénario 12-etats : la VM t12-err est
démarrée sur un disque absent. QEMU échoue
(Could not open '/var/lib/two/volumes/t12-absent.qcow2': No such file or directory), la VM passe en
error, sa suppression aboutit (DELETE 202 puis 404), mais
/run/two/vms/monitor/t12-err.sock reste sur l'hyperviseur (créé à 11:45:12, l'heure du démarrage
raté). assert_clean le relève. Déjà vu lors de la campagne du 2026-10-23 : l'échec est intermittent.

Analyse (lecture du code, non mesurée)

  • QEMU crée ses sockets -serial, -monitor et -qmp (internal/qemu/args.go) avant d'ouvrir les
    disques ; quand il échoue au démarrage, il peut laisser un ou plusieurs de ces fichiers.
  • vm.StopVM (internal/vm/delete.go) ne supprime jamais les sockets de serial_dir, monitor_dir
    et qmp_dir : sur un arrêt normal, c'est QEMU qui les retire en quittant.
  • Le caractère intermittent n'est pas expliqué : à établir (ordre de création des sockets dans QEMU,
    lequel reste selon le moment de l'échec).

Proposition

À la suppression d'une VM, une fois QEMU arrêté, retirer <serial_dir|monitor_dir|qmp_dir>/<vm>.sock
s'ils existent (test d'existence, erreur de suppression remontée). Test unitaire sur des fichiers
laissés à la main ; 12-etats en lab.

## Constat Campagne de lab du 2026-10-24 (#80, commentaire 1288), scénario 12-etats : la VM `t12-err` est démarrée sur un disque absent. QEMU échoue (`Could not open '/var/lib/two/volumes/t12-absent.qcow2': No such file or directory`), la VM passe en `error`, sa suppression aboutit (DELETE 202 puis 404), mais `/run/two/vms/monitor/t12-err.sock` reste sur l'hyperviseur (créé à 11:45:12, l'heure du démarrage raté). `assert_clean` le relève. Déjà vu lors de la campagne du 2026-10-23 : l'échec est intermittent. ## Analyse (lecture du code, non mesurée) - QEMU crée ses sockets `-serial`, `-monitor` et `-qmp` (`internal/qemu/args.go`) avant d'ouvrir les disques ; quand il échoue au démarrage, il peut laisser un ou plusieurs de ces fichiers. - `vm.StopVM` (`internal/vm/delete.go`) ne supprime jamais les sockets de `serial_dir`, `monitor_dir` et `qmp_dir` : sur un arrêt normal, c'est QEMU qui les retire en quittant. - Le caractère intermittent n'est pas expliqué : à établir (ordre de création des sockets dans QEMU, lequel reste selon le moment de l'échec). ## Proposition À la suppression d'une VM, une fois QEMU arrêté, retirer `<serial_dir|monitor_dir|qmp_dir>/<vm>.sock` s'ils existent (test d'existence, erreur de suppression remontée). Test unitaire sur des fichiers laissés à la main ; 12-etats en lab.
Author
Owner

Plan (2026-10-25), branche feature-84

QEMU est lancé par systemd-run --scope … -daemonize (internal/qemu) et crée ses trois sockets en initialisant ses chardevs, avant d'ouvrir les disques ; quand le démarrage échoue, il sort sans son nettoyage habituel et peut les laisser. vm.StopVM ne les retire jamais.

  1. internal/vm/delete.go : removeQEMUSockets(cfg, name) appelée dans StopVM juste après la phase d'arrêt de QEMU (QMP), avant le nettoyage réseau ; retire <serial_dir|monitor_dir|qmp_dir>/<vm>.sock, un fichier absent n'est pas une erreur, toute autre erreur est remontée (la VM reste en deleting, puis error par le dispatcher).
  2. Tests unitaires : trois fichiers retirés, absence tolérée, fichier d'une autre VM intact, erreur de suppression remontée.
  3. e2e 12-etats rendu déterministe : avant la suppression de t12-err, poser à la main les t12-err.sock absents dans les trois répertoires, puis vérifier qu'aucun ne reste.
  4. Notes de version 0.3.0.

Hors périmètre : la cause de l'intermittence (pourquoi seul monitor restait, et pas à chaque fois) — le correctif retire les trois dans tous les cas.

## Plan (2026-10-25), branche `feature-84` QEMU est lancé par `systemd-run --scope … -daemonize` (`internal/qemu`) et crée ses trois sockets en initialisant ses chardevs, avant d'ouvrir les disques ; quand le démarrage échoue, il sort sans son nettoyage habituel et peut les laisser. `vm.StopVM` ne les retire jamais. 1. `internal/vm/delete.go` : `removeQEMUSockets(cfg, name)` appelée dans `StopVM` juste après la phase d'arrêt de QEMU (QMP), avant le nettoyage réseau ; retire `<serial_dir|monitor_dir|qmp_dir>/<vm>.sock`, un fichier absent n'est pas une erreur, toute autre erreur est remontée (la VM reste en `deleting`, puis `error` par le dispatcher). 2. Tests unitaires : trois fichiers retirés, absence tolérée, fichier d'une autre VM intact, erreur de suppression remontée. 3. e2e 12-etats rendu déterministe : avant la suppression de `t12-err`, poser à la main les `t12-err.sock` absents dans les trois répertoires, puis vérifier qu'aucun ne reste. 4. Notes de version 0.3.0. Hors périmètre : la cause de l'intermittence (pourquoi seul `monitor` restait, et pas à chaque fois) — le correctif retire les trois dans tous les cas.
Author
Owner

Lab du 2026-10-25 (evpn-3hv, binaires de feature-84 + #81 + #79)

12-etats 38/38. Cette fois, QEMU a réellement laissé deux sockets après son démarrage raté sur un disque absent :

t12-err : sockets laissés par QEMU : /run/two/vms/monitor/t12-err.sock /run/two/vms/qmp/t12-err.sock
(serial absent)

Les sockets manquants ont été posés à la main (contrôle déterministe), puis la suppression de t12-err les a tous retirés : aucun fichier t12-err.sock ne reste, assert_clean vert. Suite complète verte par ailleurs.

## Lab du 2026-10-25 (evpn-3hv, binaires de `feature-84` + #81 + #79) **12-etats** 38/38. Cette fois, QEMU a réellement laissé deux sockets après son démarrage raté sur un disque absent : ``` t12-err : sockets laissés par QEMU : /run/two/vms/monitor/t12-err.sock /run/two/vms/qmp/t12-err.sock (serial absent) ``` Les sockets manquants ont été posés à la main (contrôle déterministe), puis la suppression de `t12-err` les a tous retirés : aucun fichier `t12-err.sock` ne reste, `assert_clean` vert. Suite complète verte par ailleurs.
Author
Owner

Fusionné dans main (aeb5ddc), validé en lab le 2026-10-25 (voir plus haut). Fermeture.

Fusionné dans main (`aeb5ddc`), validé en lab le 2026-10-25 (voir plus haut). Fermeture.
Sign in to join this conversation.
No milestone
No project
No assignees
1 participant
Notifications
Due date
The due date is invalid or out of range. Please use the format "yyyy-mm-dd".

No due date set.

Dependencies

No dependencies set.

Reference
syonad/two#84
No description provided.