Language for API calls, load tests and MCP server

À propos de Language for API calls, load tests and MCP server

Stampdrill, également désigné sous l’appellation « Language for API calls, load tests and MCP server », est un outil de test d’API qui se distingue par son approche entièrement textuelle. Contrairement aux solutions qui reposent sur une interface graphique pour construire des requêtes, Stampdrill permet de décrire des appels API, des assertions, des plans de test, des tests de charge et des vérifications de serveurs MCP dans un simple fichier texte portant l’extension .stamp. Ce fichier peut être versionné dans Git, exécuté manuellement, par un système d’intégration continue (CI) ou même par un agent d’intelligence artificielle.

L’outil intègre également un serveur MCP (Model Context Protocol) qui expose une interface standardisée. Ce serveur permet à un agent d’interagir avec le dépôt Git et d’exécuter des tests sans quitter l’environnement de développement, en utilisant les flux stdin/stdout. Cette intégration agentique fait de Stampdrill un choix de premier plan pour les équipes qui souhaitent automatiser leurs tests avec l’aide de l’IA, tout en conservant un contrôle strict via des fichiers textes versionnés.

Fonctionnalités principales

Requêtes API polyvalentes : Stampdrill prend en charge les appels HTTP/REST, GraphQL, WebSockets, les protocoles STUN/TURN et les serveurs MCP, qu’ils soient accessibles via HTTP ou par flux stdio. Cette couverture étendue permet de valider une grande diversité d’interfaces.

Assertions évoluées : L’outil permet de définir des vérifications sur le code de statut HTTP, les en-têtes, le contenu JSON de la réponse, ainsi que sur les délais d’exécution. Les valeurs peuvent être extraites d’une requête et réutilisées dans une autre, facilitant l’enchaînement d’étapes dépendantes.

Plans de test complets : Les plans peuvent inclure des étapes séquentielles, des boucles, des conditions, des tentatives répétées (retries), des délais d’attente (timeouts) et une exécution sur une matrice d’environnements. Les données de test peuvent être chargées depuis des fichiers CSV ou JSON, ce qui permet de couvrir de multiples scénarios sans dupliquer le fichier principal.

Tests de charge intégrés : Stampdrill permet de simuler des utilisateurs virtuels avec une montée en charge progressive, un temps de réflexion (think time) et la définition de seuils sur le 95e percentile, le taux d’erreur et le débit. Cela en fait un outil adapté aussi bien pour les tests fonctionnels que pour les tests de performance.

Tests de concurrence : Une fonctionnalité avancée permet de lancer plusieurs acteurs simultanément afin de détecter des situations de compétition, comme les doubles dépenses ou les mises à jour perdues. Ce type de test est essentiel pour valider la fiabilité des systèmes transactionnels.

Intégration agentique : Un agent d’IA peut générer un fichier .stamp, lancer la commande stamp check, examiner les échecs et corriger le fichier de façon itérative, le tout sans intervention humaine. Ce cycle rapide est rendu possible grâce au format textuel simple et à l’exécution reproductible.

Serveur MCP intégré : La commande stamp mcp démarre un serveur MCP qui expose six outils : list_requests, check, run_request, run_plan, run_load et show_environment. Ces outils permettent à un agent de découvrir les requêtes disponibles, d’exécuter des vérifications et de récupérer l’état de l’environnement.

Tarification

Les informations accessibles ne comportent aucune page de tarification officielle pour Stampdrill. Le code source est disponible sur GitHub et l’outil semble distribué sans frais, vraisemblablement sous un modèle ouvert ou gratuit. Aucun plan ni abonnement n’est présenté, ce qui laisse penser que Stampdrill peut être utilisé librement à ce jour. En l’absence de données tarifaires fermes, il est recommandé de surveiller les communications de l’éditeur pour d’éventuelles offres commerciales futures (support technique, hébergement de fichiers de test, fonctions avancées). Pour l’instant, l’utilisation de Stampdrill n’entraîne aucun coût connu.

Cas d’utilisation

• Tests d’API versionnés dans Git : Les équipes de développement peuvent conserver leurs scénarios de test dans le même dépôt que le code source, facilitant la révision, le suivi des modifications et la gestion des versions.
• Intégration continue (CI) : Stampdrill s’exécute dans des pipelines CI pour valider les changements avant déploiement, avec la possibilité d’afficher les différences (diff) dans les demandes de tirage (pull requests).
• Tests pilotés par agent IA : Les agents peuvent générer, exécuter et corriger des tests de manière autonome, ce qui accélère la création de suites de test et valide rapidement les correctifs.
• Validation de serveurs MCP : Grâce aux vérifications MCP intégrées, Stampdrill permet de tester la conformité et la robustesse des serveurs MCP, qu’ils soient locaux (stdio) ou distants (HTTP).
• Tests de charge et de performance : Avec ses capacités de montée en charge et de seuils, Stampdrill convient pour mesurer la résilience et la rapidité des API dans des conditions proches de la production.
• Documentation vivante : Les fichiers .stamp peuvent servir de spécifications exécutables, offrant à la fois une documentation à jour et une validation automatique.

Notre avis

Stampdrill se positionne comme un outil innovant qui combine les avantages du texte brut avec une large gamme de fonctionnalités de test. Son principal atout réside dans son format unifié : un seul fichier .stamp peut contenir des requêtes, des assertions, des plans et des tests de charge, tout en restant parfaitement lisible et versionnable. Cette approche réduit la dispersion des outils et simplifie l’automatisation.

L’intégration avec les agents IA via le serveur MCP est un atout majeur pour les équipes qui explorent le développement assisté par intelligence artificielle. Étant donné que les tests sont écrits en texte, un agent peut les générer, les exécuter et les corriger de façon autonome, ce qui correspond bien aux besoins des workflows modernes.

Du côté des limites, l’outil est résolument technique : il repose sur une syntaxe textuelle et une connaissance de Git. Les utilisateurs moins familiers avec la ligne de commande ou le versionnement pourraient trouver la courbe d’apprentissage plus raide qu’avec des outils à interface graphique. De plus, la documentation sur la tarification est absente, ce qui pourrait freiner les entreprises qui exigent un support officiel ou une garantie de pérennité.

En conclusion, Stampdrill est un choix solide pour les développeurs et les équipes DevOps qui souhaitent centraliser leurs tests API dans un format ouvert, reproductible et compatible avec l’IA. Sa gratuité et sa flexibilité en font un outil à considérer sérieusement pour remplacer ou compléter des solutions plus lourdes. Nous recommandons de l’essayer sur des projets pilotes avant de l’adopter à grande échelle, surtout dans un contexte où la transparence tarifaire et le support professionnel sont importants.