RousselTMLEARNING

Article · Cribl : de la découverte à l'expertise

Archiver, rejouer et rechercher

1. Archiver sur stockage objet #

Le socle du rejeu.

Une destination S3 bien partitionnée #

Stocker et interroger
Bucket:               archive-telemetrie
Key prefix:           cribl
Partitioning expr.:   `${C.Time.strftime(_time ? _time : Date.now()/1000, '%Y/%m/%d/%H')}/${sourcetype}/${host}`
Data format:          JSON   (ou Parquet)
Compression:          gzip
Max file size:        32 MB   ·   Max file open time: 300 s
  • Le partitionnement par date puis par type permet de rejouer une heure d'un type de log sans lire tout le reste.
  • Parquet (format colonne) se compresse mieux et s'interroge directement par Cribl Search, Athena ou ClickHouse ; JSON gzip reste le plus simple à relire.
  • Une règle de cycle de vie du bucket (passage en classe froide, expiration) fixe la rétention et le coût.

2. Rejouer #

Réinjecter une période précise.

Collecteur et rejeu #

Rejeu
  1. Créez un collecteur S3 qui pointe sur l'archive, avec un chemin qui reprend le partitionnement : /cribl/${_time:%Y}/${_time:%m}/${_time:%d}/${_time:%H}/${sourcetype}/${host}/.
  2. Lancez-le à la demande (Run) en précisant la période et un filtre (host=="srv-42") : Cribl ne lit que les partitions concernées grâce aux variables du chemin.
  3. Les événements rejoués passent par les routes comme les autres : ajoutez un champ (replayed=true) pour les router vers le SIEM et les distinguer.
  4. Le mode Preview du collecteur montre un échantillon avant de lancer la collecte complète.
Bonne Pratique : Planifiez aussi des collectes régulières (Schedule) pour les API qui ne poussent pas leurs données : audit SaaS, inventaires, métriques cloud.

3. Cribl Lake et Cribl Search #

Stocker et interroger sans réingérer.

Cribl Lake #

Cribl Lake est un stockage géré dans Cribl.Cloud : on y crée des jeux de données (datasets) avec leur rétention, et une destination Cribl Lake y écrit depuis Stream ou Edge, sans gérer de bucket ni de format.

Cribl Search #

Cribl Search interroge les données là où elles sont : Cribl Lake, buckets S3, et certaines API, avec un langage proche de Kusto (KQL). Depuis la version 4.17, une destination Cribl Search permet aussi d'y envoyer directement des données depuis Stream ou Edge.

dataset="archive_fw" action="deny"
| summarize count() by src_ip
| sort by count_ desc
| limit 10
À savoir : La syntaxe exacte et les jeux de données disponibles dépendent de votre espace Cribl.Cloud : partez des requêtes d'exemple proposées par l'interface.

Quand utiliser quoi #

BesoinSolution
Garder tout au moindre coûtarchive S3 + règles de cycle de vie
Réinjecter une période dans le SIEMcollecteur S3 et rejeu
Chercher une aiguille sans réingérerCribl Search
Stockage géré, sans bucket à administrerCribl Lake

Commandes à connaître #

Commandes à connaître
  • C.Time.strftime(_time, '%Y/%m/%d/%H') : partitionner par heure
  • /${_time:%Y}/${_time:%m}/${_time:%d}/ : variables de chemin d'un collecteur
  • aws s3 ls s3://archive/cribl/2026/11/17/ --recursive | head : vérifier l'archive
  • dataset="…" | summarize count() by host : requête Cribl Search

Sources #

Vérifié en novembre 2026 (Cribl 4.20) : Cribl publie une version mineure environ tous les deux mois, consultez les notes de version avant de vous appuyer sur un détail.

📄 Archiver, rejouer et rechercher : S3, Replay, Cribl Lake et Cribl Search →

Mon suivi

  • ⏱ Durée estimée : ≈ 5 min

Connectez-vous pour suivre votre progression et prendre des notes. Se connecter

💬 Questions sur cette leçon

Aucune question pour l'instant : soyez le premier à demander de l'aide ou à partager votre configuration.

Poser une question sur cette leçon →

Articles recommandés

Bindplane : gérer ses pipelines de télémétrie OpenTelemetry

Comprendre Bindplane : plan de contrôle des collecteurs OpenTelemetry via OpAMP, BDOT Collector, ...

OpenTelemetry Collector, Grafana Alloy et Bindplane : comparer trois approches des pipelines de télémétrie

Comparatif détaillé de trois façons de gérer des pipelines de télémétrie : l'OpenTelemetry Collec...

RUM et Synthetic Monitoring avec Datadog : synthetic transaction monitoring et expérience utilisateur

Mesurer l'expérience utilisateur avec Datadog : RUM navigateur et mobile, Core Web Vitals, Sessio...

Dynatrace : Gestion du RGPD et protection de la vie privée (Data Privacy)

Apprenez à configurer Dynatrace pour respecter le RGPD, masquer les données sensibles et activer ...

Bonnes pratiques Bindplane

Check-list pour exploiter Bindplane : organisation par labels et fleets, réduction mesurée, masqu...

Logs avancés avec OpenPipeline : traitement, masquage, buckets et rétention

Gérer les logs dans Dynatrace avec OpenPipeline : ingestion, routage, traitement DQL (parsing, en...

Logs Datadog avancés : index, filtres d'exclusion, Flex Logs, archives et Sensitive Data Scanner

Maîtriser coût et conformité des logs Datadog : pipelines et processeurs, index et rétention, fil...

Logs dans Datadog : collecte, pipelines, index et maîtrise du volume

Collecter les logs avec l'agent, les structurer avec pipelines et processeurs (grok), utiliser fa...

Le trilemme de l'observabilité : coût, exhaustivité et performance, et comment les solutions le résolvent

Comprendre le trilemme de l'observabilité (coût, exhaustivité des données, performance des requêt...

Soutenir

♥ SOUTENIR

Soutenez RousselTM Learning

Les formations, articles, TP et attestations restent gratuits et sans publicité intrusive. Une contribution libre, du montant de votre choix, finance l’hébergement, les environnements de TP et l’écriture de nouveaux contenus.

Contribuer avec PayPal Montant libre · carte bancaire ou compte PayPalEn savoir plus
QR code PayPal
Ou scannez ce QR code avec votre téléphone

Merci, chaque contribution compte !