Promptic : évaluation des applications LLM et optimisation des prompts

Promptic aide les équipes qui développent des applications LLM à mesurer et améliorer leurs prompts et agents sur leurs propres exemples. La plateforme relie jeux de tests, traces OpenTelemetry et optimisation afin de comparer la qualité, le coût et le délai de réponse d'une modification.

À quoi sert Promptic, simplement ?

C'est un banc d'essai réutilisable pour une fonction d'IA. Vous apportez des entrées proches de l'usage réel et, si possible, les résultats attendus. Plusieurs prompts, modèles ou configurations d'agent passent les mêmes épreuves. Promptic évalue les sorties suivant vos critères et montre les cas où le parcours échoue. Il s'adresse à un usage professionnel : les conditions excluent l'usage privé, y compris avec l'offre gratuite.

Construire une première évaluation

Créez une organisation, une AI Application et un composant, puis ajoutez des cas représentatifs. Définissez les évaluateurs adaptés à la tâche, lancez une expérience et ouvrez les échecs individuels avant de retenir un score moyen. Comparez les variantes sur le même jeu selon qualité, coût et latence. Le démarrage dans le tableau de bord et le guide d'optimisation des prompts détaillent les étapes. Un jeu de tests incomplet ne garantit pas le comportement en production.

Comprendre les traces et les agents

Les traces enregistrent appels au modèle, appels aux outils, tokens, coût et durée de chaque étape. Pour un agent, Promptic peut comparer plusieurs variantes complètes sur les mêmes cas, puis aider à examiner les parcours qui échouent. Après une correction, relancez le test afin de vérifier le résultat. Le guide d'optimisation des agents décrit ce cycle. Les chiffres de démonstration du site ne prédisent pas les résultats de votre application.

Gratuit, payant et coûts de modèles

Au 27 septembre 2026, la page tarifaire indique Free à €0 pour un utilisateur et une AI Application, 200 000 Promptic Credits par mois et 14 jours de conservation des traces. Team est affiché à €149 par mois et Business à €599 par mois. Il est possible d'utiliser ses propres clés de modèles ; l'usage des modèles gérés peut être facturé séparément. Tenez aussi compte des crédits ou applications supplémentaires.

Vérifier les données avant usage réel

Les prompts, jeux de tests et traces peuvent contenir entrées, sorties et arguments d'outils. Selon les conditions officielles, le client reste propriétaire de son contenu et celui-ci n'entraîne pas les modèles fondamentaux sans autre accord écrit. Les données très sensibles exigent un accord écrit préalable. La région des données de la plateforme ne résume pas les régions d'inférence et règles de conservation de tous les fournisseurs. Commencez avec des données assainies.

Questions fréquentes

Peut-on évaluer un agent complet ?

Oui. Les variantes d'agent peuvent être comparées sur les mêmes cas et leurs traces analysées.

Free convient-il à une étude personnelle ?

Non. Les conditions réservent tous les plans à un usage commercial ou professionnel.

Les appels aux modèles sont-ils compris dans l'abonnement ?

Pas nécessairement. L'apport de clés propres est possible et certains modèles gérés sont facturés en plus.

Ressources officielles

• Documentation produit pour la mise en place et l'API.
• Tarifs actuels pour les quotas.
• Page de contact pour les questions d'entreprise.