Les Watchers de Grafana, des agents qui surveillent en continu

La source

William Dumont, « Run cost-effective, always-on agents to monitor your environment: the engineering behind Watchers », blog de Grafana Labs (l’éditeur de Grafana), 9 novembre 2026, en anglais. https://grafana.com/blog/run-cost-effective-always-on-agents-to-monitor-your-environment-the-engineering-behind-watchers/

Ce qu’elle dit

Les Watchers sont des agents qui tournent en permanence dans Grafana Assistant, l’assistant IA de Grafana. Ils surveillent ce que les règles d’alerte ne savent pas prévoir. On décrit en langage courant ce qu’on veut surveiller et on choisit ses sources de données ; le Watcher apprend ce qui est « normal » et ne se manifeste qu’en cas d’écart, avec son évaluation et les preuves.

Le travail est découpé en trois parties :

un calibrage, fait une seule fois par un modèle d’IA puissant : il part des alertes et des tableaux de bord existants, mesure la semaine passée (cycles du jour et de la semaine compris) et pose des questions à l’utilisateur quand un choix lui revient ;
à chaque passage, du code classique interroge les données et les compare à la référence ;
un petit modèle, appelé une seule fois et sans outils, décide ensuite : tout va bien, avertissement ou critique, et faut-il prévenir ou lancer une enquête.

C’est ce découpage qui fait baisser le prix : un agent qui enquêterait à chaque passage, toutes les 10 minutes, coûterait des milliers de dollars par mois. Chez Grafana, le Watcher médian coûte moins de 5 $ par mois, et le plus cher un peu plus de 20 $, soit moins d’un centime par passage.

L’article ne cache pas les limites : les Watchers ne remplacent pas les règles d’alerte, et ils peuvent se tromper de cause (une panne MySQL bien repérée, mais mal expliquée ; ce sont les ingénieurs qui ont trouvé la vraie). Ils existent sur Grafana Cloud, gratuits jusqu’au 1er décembre 2026, puis facturés à l’usage.

Ce que ça change pour moi

Indirectement, je fais déjà quelque chose de proche dans mon lab : je me sers d’un assistant IA, Claude, pour analyser, diagnostiquer et faire évoluer ma supervision ; la surveillance continue, ce sont Prometheus et Grafana qui la font. Pour moi, cet article montre que la supervision se tourne vers des agents IA dans les infrastructures, pour l’alerte et la réactivité : un complément aux règles d’alerte, pas un remplaçant, et l’humain garde la décision (le Watcher s’est déjà trompé de cause sur une panne). Ça doit aussi limiter les faux positifs, puisque l’IA s’adapte à son environnement ; mais, comme les seuils dynamiques de mon article précédent, elle pourrait aussi s’habituer à une dérive lente.

Le principe « l’IA réfléchit une fois, puis du code simple fait le travail », c’est un peu ce qui se passe déjà dans ma façon de travailler avec Claude.

Je ne le testerai pas : c’est encore un abonnement. Mais ça me donne des idées pour faire la même chose en auto-hébergé et gratuitement, pourquoi pas avec un modèle plus léger. C’est à creuser.