← Back to the forum · 📚 Questions about courses
Alerter sur un SLO de 99,9 % sans être réveillé pour rien
-
Nous avons un SLO de disponibilité de 99,9 % sur 30 jours. Une alerte sur « taux d'erreur > 0,1 % » sonne tout le temps. Comment faire mieux ?
-
✓ Accepted answer
Alertez sur la vitesse de consommation du budget d'erreur (burn rate), sur deux fenêtres pour éviter les faux positifs :
( sum(rate(http_requests_total{code=~"5.."}[1h])) / sum(rate(http_requests_total[1h])) > (14.4 * 0.001) ) and ( sum(rate(http_requests_total{code=~"5.."}[5m])) / sum(rate(http_requests_total[5m])) > (14.4 * 0.001) )Un burn rate de 14,4 consomme 2 % du budget mensuel en une heure : cela mérite une page. Un burn rate de 6 sur 6 h (5 % du budget) peut ouvrir un ticket.
flowchart LR E[Erreurs] --> BR1[Burn rate 1h > 14,4] --> AND{ET} E --> BR2[Burn rate 5m > 14,4] --> AND AND --> PAGE[Page d'astreinte]La fenêtre courte confirme que le problème est toujours en cours : l'alerte se résout vite après le correctif.