RousselTMLEARNING

TP · Cribl : de la découverte à l'expertise

TP : Parser, enrichir et masquer des logs Apache

Ce que vous allez apprendre dans ce TP
  • Configurer une source HEC
  • Extraire des champs avec Regex Extract
  • Enrichir avec Lookup
  • Masquer avec Mask
  • Tester dans l'aperçu et brancher la route

Introduction #

Ce que vous allez apprendre dans cette section
  • Configurer une source HEC
  • Extraire des champs avec Regex Extract
  • Enrichir avec Lookup
  • Masquer avec Mask
  • Tester dans l'aperçu et brancher la route

Contexte. Les logs d'accès du site marchand contiennent l'adresse e-mail des clients dans les URL. Le SIEM ne doit plus la recevoir en clair, et les analystes veulent une catégorie lisible pour chaque code HTTP.

Prérequis : un poste avec Docker et Docker Compose (4 Go de mémoire libre), curl et jq, l'instance du TP 1  ·  Durée estimée : 50 min

Un pipeline qui transforme une ligne Apache brute en événement structuré, enrichi et sans donnée personnelle en clair.

Mise en place #

Étapes guidées, avec leur correction.

  1. 1. Source HEC et données

    Pourquoi ? HEC est le protocole HTTP de Splunk, très utilisé par les applications.

    Créez une source Splunk HEC in_hec sur le port 8088 avec le jeton tp2-hec-token, puis envoyez 100 lignes Apache.
  2. 2. Capturer un échantillon

    Pourquoi ? Le pipeline se construit sur de vraies lignes.

    Capturez 100 événements de in_hec et enregistrez-les comme échantillon apache_access.log. Créez le pipeline pl_apache et chargez l'échantillon dans l'aperçu.
  3. 3. Extraire les champs

    Pourquoi ? Des champs structurés permettent de filtrer, agréger et router.

    Ajoutez une fonction Regex Extract sur _raw qui crée client, method, uri, status et bytes, puis Numerify pour convertir status et bytes en nombres.
  4. 4. Enrichir

    Pourquoi ? Une catégorie lisible évite à chaque analyste de mémoriser les codes HTTP.

    Créez la table http_status.csv dans Processing › Knowledge › Lookups, puis une fonction Lookup qui ajoute status_category.
  5. 5. Masquer les e-mails

    Pourquoi ? Le haché permet encore de compter les clients distincts, sans révéler leur adresse.

    Ajoutez une fonction Mask sur _raw et uri qui remplace la valeur de email= par son SHA-256, puis un Eval qui ajoute env='prod'.
  6. 6. Brancher et vérifier

    Pourquoi ? L'aperçu prouve la logique, la sortie prouve le branchement.

    Vérifiez dans l'aperçu (OUT) qu'aucune adresse en clair ne subsiste. Ajoutez une route apache (filtre sourcetype=='apache:access', pipeline pl_apache, destination out_files), renvoyez des données et contrôlez les fichiers.

Niveau de difficulté : ●●●○○ (3/5)

Mon suivi

  • ⏱ Durée estimée : ≈ 50 min

Connectez-vous pour suivre votre progression et prendre des notes. Se connecter

💬 Questions sur cette leçon

Aucune question pour l'instant : soyez le premier à demander de l'aide ou à partager votre configuration.

Poser une question sur cette leçon →

Articles recommandés

Pipelines et fonctions : parser, enrichir, masquer

Construire des pipelines Cribl Stream : pré-traitement, traitement et post-traitement, catalogue ...

Réduire, masquer et router la télémétrie avec Bindplane

Réduire les coûts d'ingestion avec Bindplane : filtres de sévérité, déduplication, échantillonnag...

Sources, destinations et routes dans Cribl Stream

Recevoir et envoyer des données avec Cribl Stream : sources push, pull, collecteurs et internes, ...

Logs dans Datadog : collecte, pipelines, index et maîtrise du volume

Collecter les logs avec l'agent, les structurer avec pipelines et processeurs (grok), utiliser fa...

Logstash : enrichir, tester, superviser et déployer sur Kubernetes

Enrichir avec translate, geoip et elasticsearch, consommer Kafka, tester ses pipelines, supervise...

Réduire, transformer et optimiser les volumes avec Cribl

Réduire le volume envoyé aux SIEM et outils d'observabilité sans perdre d'information utile : Dro...

Cribl : le pipeline de données pour l'observabilité et la sécurité

Découvrir Cribl : pourquoi un pipeline de données de télémétrie, la suite Cribl (Stream, Edge, La...

Fluent Bit : parsers et filters, structurer et transformer les logs

Structurer et transformer les logs dans Fluent Bit : parsers (json, regex, logfmt, ltsv), parsers...

Cribl Edge : collecter au plus près des sources

Déployer Cribl Edge sur Linux, Windows et Kubernetes : rôle de l'agent, flottes et sous-flottes, ...

Soutenir

♥ SOUTENIR

Soutenez RousselTM Learning

Les formations, articles, TP et attestations restent gratuits et sans publicité intrusive. Une contribution libre, du montant de votre choix, finance l’hébergement, les environnements de TP et l’écriture de nouveaux contenus.

Contribuer avec PayPal Montant libre · carte bancaire ou compte PayPalEn savoir plus
QR code PayPal
Ou scannez ce QR code avec votre téléphone

Merci, chaque contribution compte !