TP : Écrire, tester et mesurer des recording rules

Des requêtes coûteuses aux séries enregistrées #

Contexte. Votre tableau de bord recalcule les mêmes agrégats à chaque actualisation. Vous allez les enregistrer dans des séries dédiées, sur les métriques de Prometheus lui-même, sans aucune autre dépendance.

Prérequis : Docker Compose, curl et jq  ·  Durée estimée : 40 min

Créez un dossier de travail pour ce TP.

1. 1. Démarrer Prometheus

   Pourquoi ? Prometheus se collecte lui-même : vous disposez aussitôt de métriques HTTP réelles.

   Écrivez docker-compose.yml et prometheus.yml. Activez le rechargement à chaud et référencez un fichier rules.yml.

2. 2. Enregistrer un premier agrégat

   Pourquoi ? Une agrégation par étapes évite de relire les séries brutes à chaque niveau.

   Créez rules.yml avec le débit par job et handler, puis le débit par job réutilisant la règle précédente. Créez aussi un fichier tests.yml vide (touch tests.yml), vérifiez, démarrez et interrogez la nouvelle série après une minute.

3. 3. Ajouter un ratio d'erreurs robuste et un percentile

   Pourquoi ? Sans précaution, le ratio est vide tant qu'aucune erreur n'existe.

   Ajoutez le débit d'erreurs 5xx, le ratio d'erreurs (qui doit valoir 0 sans erreur) et le percentile 95 de la durée. Rechargez et vérifiez la santé des règles.

4. 4. Écrire les tests unitaires

   Pourquoi ? Une règle fausse donne un tableau de bord plausible mais faux : seul un test le révèle.

   Dans tests.yml, couvrez deux cas : 10 % d'erreurs (ratio de 0,1) et aucune erreur (ratio de 0). Lancez les tests, puis retirez la partie or ... * 0 du ratio et constatez l'échec du second test avant de la remettre.

5. 5. Mesurer le gain

   Pourquoi ? Une optimisation se mesure.

   Comparez le nombre d'échantillons lus par la requête d'origine et par la série enregistrée, puis repérez la durée d'évaluation de vos règles avec la métrique prometheus_rule_group_last_duration_seconds. Vous devez observer un seul échantillon pour la série enregistrée, et plusieurs centaines pour la requête d'origine (la valeur dépend de votre instance).

Niveau de difficulté : ●●●○○ (3/5)