RousselTMLEARNING

← Back to the forum · 📚 Questions about courses

Alerter sur un SLO de 99,9 % sans être réveillé pour rien

✓ Solved 📚 SRE in practice: SLIs, SLOs and error budgets

  1. Nous avons un SLO de disponibilité de 99,9 % sur 30 jours. Une alerte sur « taux d'erreur > 0,1 % » sonne tout le temps. Comment faire mieux ?

    👍 0
  2. ✓ Accepted answer

    Alertez sur la vitesse de consommation du budget d'erreur (burn rate), sur deux fenêtres pour éviter les faux positifs :

    (
      sum(rate(http_requests_total{code=~"5.."}[1h])) / sum(rate(http_requests_total[1h])) > (14.4 * 0.001)
    )
    and
    (
      sum(rate(http_requests_total{code=~"5.."}[5m])) / sum(rate(http_requests_total[5m])) > (14.4 * 0.001)
    )

    Un burn rate de 14,4 consomme 2 % du budget mensuel en une heure : cela mérite une page. Un burn rate de 6 sur 6 h (5 % du budget) peut ouvrir un ticket.

    flowchart LR
      E[Erreurs] --> BR1[Burn rate 1h > 14,4] --> AND{ET}
      E --> BR2[Burn rate 5m > 14,4] --> AND
      AND --> PAGE[Page d'astreinte]

    La fenêtre courte confirme que le problème est toujours en cours : l'alerte se résout vite après le correctif.

    👍 0

Reply

Support us

♥ SUPPORT US

Support RousselTM Learning

Courses, articles, labs and certificates stay free with no intrusive ads. A voluntary contribution, of any amount you choose, pays for hosting, lab environments and new content.

Contribute with PayPal Any amount · card or PayPal accountLearn more
QR code PayPal
Or scan this QR code with your phone

Thank you, every contribution counts!