Surveiller l'état des services systemd avec un script bash

Tout serveur n'a pas vocation à embarquer une pile complète Prometheus et Grafana. Sur une petite machine dédiée ou un serveur de rebond, un simple démon critique (Nginx, PostgreSQL, un worker Python ou un tunnel WireGuard) qui s'arrête silencieusement suite à un pic de mémoire (OOM Killer) peut passer inaperçu pendant des heures. Avant même de parler de métriques complexes, systemd offre déjà des mécanismes natifs de redémarrage automatique, qu'il est très facile de coupler à un script Bash léger pour être alerté en temps réel.
Activer le redémarrage automatique dans systemd
La première étape consiste à s'assurer que systemd tente de relancer le service en cas d'échec. En créant un fichier override via `systemctl edit mon-service`, vous pouvez définir `Restart=on-failure` et `RestartSec=5s`. Mais si le service redémarre en boucle (crash loop), vous devez absolument en être informé.
Un script Bash simple et efficace
La commande `systemctl is-active --quiet` renvoie un code de sortie `0` si le service tourne, et un code différent de zéro dans le cas contraire. En bouclant sur une liste de services critiques, un script de quelques lignes exécuté toutes les minutes par cron ou un timer systemd peut envoyer une notification instantanée vers un canal Slack, Discord, Mattermost ou Teams via un simple appel `curl`.
#!/bin/bash
SERVICES=("nginx" "postgresql" "php8.2-fpm")
WEBHOOK_URL="https://hooks.slack.com/services/VOTRE/WEBHOOK/ICI"
for srv in "${SERVICES[@]}"; do
if ! systemctl is-active --quiet "$srv"; then
curl -s -X POST -H 'Content-type: application/json' \
--data "{\"text\":\"[ALERTE] Le service $srv est arrêté sur $(hostname)\"}" \
"$WEBHOOK_URL"
fi
doneUn script de 15 lignes bien testé vaut mieux qu'un outil de supervision complexe que personne n'a le temps de maintenir.
Lire la suite

Fast, Good, Cheap : le triangle de fer appliqué à l'infogérance IT
