Le chemin de lecture

1. Le parcours d'une requête #

Du dashboard aux blocs.

Schéma #

1. Grafana envoie une requête PromQL à /prometheus/api/v1/query_range.
2. Le query-frontend la découpe par intervalle de temps (24 h par défaut) et, si possible, par shard ; il sert depuis son cache les morceaux déjà calculés.
3. Les sous-requêtes passent par la file du query-scheduler, qui garantit l'équité entre tenants.
4. Un querier évalue chaque sous-requête : il lit les données récentes dans les ingesters et l'historique via les store-gateways.
5. Le query-frontend assemble les résultats et les met en cache.

Qui sert quelles données ? #

Erreur Courante : Ces trois valeurs sont liées. Si vous réduisez la rétention locale des ingesters sans réduire query_ingesters_within, une partie des données récentes devient invisible.

2. Store-gateway et caches #

Lire le stockage objet sans le saturer.

Le store-gateway #

Le store-gateway ne télécharge pas les blocs entiers : il garde localement un index-header (une petite partie de l'index de chaque bloc) et ne lit à distance que les portions utiles. Les blocs sont répartis entre store-gateways via leur propre ring, avec réplication (3 par défaut).

Il s'appuie sur le bucket index, un fichier par tenant maintenu par le compactor qui liste les blocs : inutile de lister le bucket à chaque requête.

Les quatre caches #

blocks_storage:
  bucket_store:
    index_cache:
      backend: memcached
      memcached: { addresses: dns+memcached-index.mimir.svc:11211 }
    chunks_cache:
      backend: memcached
      memcached: { addresses: dns+memcached-chunks.mimir.svc:11211 }
    metadata_cache:
      backend: memcached
      memcached: { addresses: dns+memcached-metadata.mimir.svc:11211 }
frontend:
  results_cache:
    backend: memcached
    memcached: { addresses: dns+memcached-results.mimir.svc:11211 }
  cache_results: true

Bonne Pratique : En production, les caches font souvent la différence entre une requête de 30 s et une requête de 300 ms. Le chart Helm sait déployer les quatre memcached.

3. Protéger le chemin de lecture #

Limites de requêtes.

Limites utiles #

Ces limites se règlent globalement dans limits et par tenant dans la configuration d'exécution (voir la leçon sur le multi-tenant).