Aller au contenu
Julien LeveneurIngénieur full-stack & IA
← Retour aux projets

Nº 02 — Dashboard BullMQ open source

Better Bull Board

Un dashboard BullMQ moderne : flux de jobs en temps réel, logs, métriques, et un serveur MCP pour que les agents de code interrogent les files.

Nº 02 — Schéma
WorkersBullMQRedisStreamsIngestAppNext.js · MCPPostgresClickHouse
Année
2025
Rôle
Contributeur principal
Pile
Next.jsTypeScriptBullMQRedis StreamsPostgreSQLClickHouseDrizzleMCPKubernetes

01Contexte

Les dashboards BullMQ classiques montrent l'état instantané des files, pas leur histoire : impossible de savoir pourquoi un job a échoué hier, ou quelle file sature depuis une heure.

02Ce que j'ai construit

  • Un ingester qui consomme les événements des jobs par des consumer groups Redis Streams, avec une réconciliation périodique contre l'état de BullMQ.
  • Une interface Next.js : files, planificateurs, exécutions et logs, avec les métriques dans ClickHouse.
  • Un serveur MCP : un agent peut demander quelles files saturent ou pourquoi des jobs échouent, et, avec un accès en écriture, mettre en pause, rejouer ou annuler.
  • Un client publié sur npm, @better-bull-board/client, versionné par semantic-release.

03Décisions techniques

  • Du sondage pour les données durables (files, planificateurs), de l'ingestion pour le volume (jobs, logs) : pas besoin d'envelopper chaque file avec le client.
  • L'application et l'ingester se déploient séparément sur Kubernetes et passent tous deux à l'échelle horizontalement.
  • Une rétention de 30 jours sur les exécutions et les logs.
Projet suivantHydromag