ZB.
← Retour aux projets

PROJET PERSONNEL / OBSERVABILITÉ

Monitoring & Observabilité.

Mise en place d'une infrastructure de supervision pour observer le fonctionnement de mes services, suivre les ressources système et centraliser la gestion des alertes.

PrometheusGrafanaAlertmanagerNode ExportercAdvisorDocker Compose

01 / CONTEXTE

Comprendre l'état de mon infrastructure.

Pour superviser mon Raspberry Pi 5 et mes conteneurs Docker, j'utilise une stack d'observabilité reposant sur Prometheus, Grafana, Alertmanager, Node Exporter et cAdvisor.

02 / ARCHITECTURE

Une stack de supervision complète.

Les outils de collecte, de stockage et de visualisation remplissent chacun un rôle distinct dans l'observabilité de mon infrastructure.

MONITORING / STACK
01 / SOURCES

Exporters

Exposition des métriques du système et des conteneurs Docker.

Node Exporter

cAdvisor

02 / MÉTRIQUES

Prometheus

Interroge les endpoints de métriques et stocke les séries temporelles.

Port 9090

03 / VISUALISATION

Grafana

Interroge les sources de métriques pour construire des tableaux de bord.

Port 3000

PrometheusExporters

Interrogation des endpoints HTTP pour collecter les métriques.

GrafanaPrometheus

Requêtes vers la source de données pour visualiser les métriques.

PrometheusAlertmanager

Transmission des alertes lorsque des règles d'alerte sont configurées.

Alertmanager

Composant dédié au regroupement, au filtrage et à l'acheminement des alertes produites par les règles de supervision.

Port 9093 · Docker

VUE LOGIQUE SIMPLIFIÉE

03 / ALERTING

Surveiller et anticiper les incidents.

Ma configuration Prometheus comprend neuf règles d'alerte portant sur la disponibilité des services et l'utilisation des ressources système.

Disponibilité des services

Six règles chargées dans Prometheus.

NextcloudAppDown
NextcloudDatabaseDown
NextcloudRedisDown
PortfolioCaddyDown
GrafanaDown
PrometheusTargetDown

Ressources système

Trois règles chargées dans Prometheus.

HighCPUUsage
HighMemoryUsage
RootDiskAlmostFull

CONFIGURATION RÉELLE

Exemples de règles PromQL

Trois expressions extraites de ma configuration Prometheus pour surveiller les ressources du Raspberry Pi 5.

CPU

HighCPUUsage

> 85 %5 minutes

Déclenchement lorsque l'utilisation moyenne du CPU dépasse 85 % pendant 5 minutes. Le calcul utilise une fenêtre de mesure de 5 minutes.

Voir l'expression PromQL
(100 - (avg by (instance) (rate(node_cpu_seconds_total{job="raspberry-pi",mode="idle"}[5m])) * 100)) > 85

MÉMOIRE

HighMemoryUsage

> 85 %5 minutes

Déclenchement lorsque l'utilisation de la mémoire dépasse 85 % pendant 5 minutes. Le calcul repose sur la mémoire disponible et la mémoire totale du système.

Voir l'expression PromQL
(1 - (node_memory_MemAvailable_bytes{job="raspberry-pi"} / node_memory_MemTotal_bytes{job="raspberry-pi"})) * 100 > 85

DISQUE

RootDiskAlmostFull

> 85 %10 minutes

Déclenchement lorsque l'occupation du système de fichiers racine (/) dépasse 85 % pendant 10 minutes. Les systèmes de fichiers temporaires et overlay sont exclus du calcul.

Voir l'expression PromQL
(1 - (node_filesystem_avail_bytes{fstype!~"tmpfs|overlay",job="raspberry-pi",mountpoint="/"} / node_filesystem_size_bytes{fstype!~"tmpfs|overlay",job="raspberry-pi",mountpoint="/"})) * 100 > 85

Prometheus et Alertmanager

Prometheus dispose d'une instance Alertmanager active dans sa configuration. Lors de la vérification, les neuf règles étaient inactives. La transmission des alertes et leur notification de bout en bout restent à valider.

04 / TABLEAUX DE BORD

Observer mon infrastructure en pratique.

Deux tableaux de bord Grafana me permettent de suivre les ressources du Raspberry Pi et le fonctionnement des conteneurs Docker.

Tableau de bord Grafana présentant les métriques système du Raspberry Pi 5

SUPERVISION LINUX

Node Exporter Full

Supervision des ressources de mon Raspberry Pi 5 : utilisation CPU, mémoire, espace disque et trafic réseau.

Node ExporterPrometheusGrafana
Agrandir la capture
Tableau de bord Grafana présentant les métriques des conteneurs Docker

SUPERVISION DOCKER

Docker Containers Overview

Observation des conteneurs Docker : consommation CPU et mémoire, opérations disque et activité réseau.

cAdvisorPrometheusGrafana
Agrandir la capture

Captures réelles de mes tableaux de bord Grafana. Les valeurs présentées correspondent à un instant donné et ne constituent pas des métriques en temps réel.