TP : Installer OpenObserve et ingérer ses premiers logs avec correction

Ce que vous allez apprendre dans ce TP

• Déployer OpenObserve
• Ingérer du JSON
• Interroger en SQL

Introduction #

Ce que vous allez apprendre dans cette section

• Déployer OpenObserve
• Ingérer du JSON
• Interroger en SQL

Contexte. Votre équipe cherche une plateforme de logs plus légère qu'un cluster Elasticsearch. Vous montez une maquette en quelques minutes.

Prérequis : Docker Compose, curl, jq  ·  Durée estimée : 30 min

Une plateforme prête à recevoir des données.

Mise en place #

Étapes guidées, avec leur correction.

1. 1. Démarrer OpenObserve

   Pourquoi ? Un seul conteneur suffit : c'est l'atout principal du produit.

   Écrivez le Compose, démarrez-le et vérifiez /healthz.
   Voir la correction

   services:
     openobserve:
       image: public.ecr.aws/zinclabs/openobserve:latest
       ports:
         - "5080:5080"
       environment:
         ZO_DATA_DIR: /data
         ZO_ROOT_USER_EMAIL: root@example.com
         ZO_ROOT_USER_PASSWORD: Complexpass#123
       volumes:
         - o2-data:/data
   
   volumes:
     o2-data:

   docker compose up -d
   curl http://localhost:5080/healthz

2. 2. Envoyer des événements

   Pourquoi ? Aucun schéma n'est à déclarer : le flux naît à la première écriture.

   Envoyez trois événements dans le flux commandes, et lisez le corps de la réponse.
   Voir la correction

   curl -u 'root@example.com:Complexpass#123' \
     -H 'Content-Type: application/json' \
     http://localhost:5080/api/default/commandes/_json \
     -d '[
       {"level":"error","service":"paiement","message":"timeout vers la banque","duree_ms":3100},
       {"level":"info","service":"paiement","message":"ok","duree_ms":120},
       {"level":"info","service":"panier","message":"ok","duree_ms":40}
     ]'
   # {"code":200,"status":[{"name":"commandes","successful":3,"failed":0}]}

3. 3. Les retrouver en SQL

   Pourquoi ? La requête demande toujours une période, en microsecondes.

   Calculez le nombre d'événements et la durée moyenne par service. Patientez quelques secondes si le résultat est vide.
   Voir la correction

   NOW=$(date +%s)
   curl -s -u 'root@example.com:Complexpass#123' \
     -H 'Content-Type: application/json' \
     http://localhost:5080/api/default/_search \
     -d "{\"query\":{
           \"sql\":\"SELECT service, count(*) AS n, avg(duree_ms) AS moy FROM commandes GROUP BY service ORDER BY n DESC\",
           \"start_time\":$(( (NOW-3600)*1000000 )),
           \"end_time\":$(( (NOW+60)*1000000 )),
           \"from\":0,\"size\":10}}" | jq .hits

4. 4. Observer les transformations

   Pourquoi ? Ces règles expliquent bien des requêtes qui ne renvoient rien.

   Envoyez [{"Level":"INFO","http":{"status":500}}] dans un flux essai, puis retrouvez-le dans l'interface. Comment s'appellent désormais les champs ?
   Voir la correction

   Les champs deviennent level (minuscules) et http_status (aplati).

   curl -u 'root@example.com:Complexpass#123' -H 'Content-Type: application/json' \
     http://localhost:5080/api/default/essai/_json -d '[{"Level":"INFO","http":{"status":500}}]'

Niveau de difficulté : ●○○○○ (1/5)