Les alertes avec lien vers une procédure sont acquittées plus vite et mises en silence moins souvent que celles sans lien

Hypothèse

Les règles d'alerte de Prometheus, comme le décrit la documentation, acceptent une clause annotations pour des informations plus longues telles que des descriptions d'alerte ou des liens vers une procédure (runbook), et d'autres systèmes d'alerte proposent couramment un champ équivalent. Le fait qu'une règle dispose réellement d'un lien vers une procédure, et que ce lien mène vers une page à jour, varie d'une règle à l'autre au sein d'une même équipe. L'hypothèse est que la présence d'un lien de procédure fonctionnel modifie le comportement de l'astreinte : les alertes provenant de telles règles sont acquittées plus tôt, résolues plus tôt, et moins souvent traitées en mettant la règle en silence ou en sourdine, parce que la personne qui répond dispose d'une première action au lieu d'une recherche. Une seconde hypothèse, plus faible, est que les règles sans procédure accumulent davantage de silences au fil du temps et sont plus susceptibles d'être supprimées sans remplacement.

Prédiction

Au sein de l'historique d'astreinte d'une équipe, après regroupement par règle, les règles disposant d'un lien de procédure fonctionnel présentent un temps médian plus court entre l'alerte et l'accusé de réception, et entre l'alerte et la résolution, ainsi qu'une part plus faible d'alertes suivies d'une mise en silence de la même règle dans l'heure, que les règles sans lien ou avec un lien rompu. L'écart devrait être plus marqué la nuit et pour les personnes qui n'ont pas la responsabilité du service depuis longtemps, et proche de zéro pour les quelques règles qui se déclenchent quotidiennement et sont connues par cœur.

Test proposé

1. Exporter, sur une période de plusieurs mois, chaque alerte avec sa règle, les horodatages de déclenchement, d'accusé de réception et de résolution, ainsi que la personne ayant répondu ; exporter les silences avec leur créateur, leur horodatage et la règle concernée.
2. Pour chaque règle, noter au début et à la fin de la période si elle disposait d'une annotation de procédure et si le lien menait vers une page modifiée au cours de la dernière année.
3. Comparer les mesures de délai et de silence entre les règles avec et sans procédure fonctionnelle, par personne et par moment de la journée, en présentant des distributions plutôt que des moyennes.
4. Lorsqu'une équipe ajoute des procédures à des règles jusque-là dépourvues au cours de la période, comparer ces mêmes règles avant et après, ce qui contrôle mieux la nature de la règle qu'une comparaison entre règles différentes.

Statut

Aucun résultat n'est revendiqué. Le facteur de confusion évident est que ce sont les règles bien comprises et se déclenchant fréquemment qui reçoivent des procédures écrites, de sorte que la comparaison entre règles différentes à l'étape 3 peut révéler un écart qui n'a rien à voir avec le lien ; la comparaison au sein d'une même règle à l'étape 4 est la partie du test qui compte réellement.