Banc d'essai pour agents IA
Mesurez, inspectez et gouvernez vos agents IA
Pivotal Bench évalue chaque réponse de vos agents face à une référence, cartographie leurs instructions, outils et dépendances, et note la qualité de leurs prompts. Premier connecteur : Dust.
Gratuit pendant la phase de bêta-tests
Trois usages, une seule plateforme
Benchmark
Chaque réponse est jugée Correcte, Partielle ou Incorrecte. Comparez les jeux de tests de plusieurs plateformes, annotez les différences et générez des rapports avec classement.
Inspection
Voyez à l'intérieur de la plateforme : quels agents existent, ce qu'on leur demande, quels outils et skills ils utilisent, qui appelle qui.
Gouvernance
Un score Craft.ecQ de 1 à 5 par agent, des espaces partagés par entreprise, des rôles lecteur/éditeur et un historique de rapports.
Ce que vous mesurez
- 3
- verdicts : Correct, Partiel, Incorrect
- 2
- scores : strict et pondéré
- 8
- critères Craft.ecQ par agent
- 1–5
- score de qualité des instructions
Comment ça marche
- STEP_01
Connectez
Ajoutez votre clé API Dust et votre workspace dans un espace.
- STEP_02
Importez
Chargez vos questions et vos réponses attendues en CSV. Les colonnes sont détectées automatiquement.
- STEP_03
Lancez
Les agents répondent en arrière-plan, en parallèle. L'IA juge chaque réponse et une seconde lecture vérifie les verdicts douteux.
- STEP_04
Décidez
Comparez les jeux côte à côte et générez un rapport exécutif avec graphiques et recommandations.
Sécurité & confidentialité
Vos données appartiennent à votre entreprise. Jamais revendues, jamais lues sans votre accord.
Isolées par entreprise
Chaque entreprise ne voit que ses données. Même l'administrateur de la plateforme ne peut pas les lire.
Support sur autorisation
Accès ouvert par votre administrateur : 1 h, 24 h ou 7 jours, lecture ou édition, révocable.
Chiffrées par entreprise
Questions, réponses, instructions des agents et rapports stockés illisibles avec une clé propre à votre entreprise.
Journal d'audit inaltérable
Chaque ouverture, export, lien public et accès du support est tracé, exportable en CSV.
IA sans conservation
Aucun entraînement sur vos données et masquage optionnel des e-mails, téléphones, IBAN et cartes.
Purge avec attestation
Votre administrateur supprime tout à tout moment et reçoit une attestation datée.
L'éditeur
Édité par Pivotal Skills AI, le spécialiste de l'IA générative en entreprise
Pivotal Bench est conçu et édité par Pivotal Skills AI, qui accompagne les entreprises dans le déploiement de l'IA générative. La plateforme est née du terrain : mesurer, comprendre et gouverner les agents IA mis en production chez nos clients.
Découvrir Pivotal Skills AIPlateforme sœur
Digital Skills Analyzer : mesurez l'adoption, les compétences et le ROI de vos agents
Pivotal Bench évalue la qualité de vos agents. Digital Skills Analyzer, l'autre plateforme de Pivotal Skills AI, mesure ce que vos équipes en font réellement — pour piloter la conduite du changement à grande échelle.
- 01
Usages et compétences
Usages réels des utilisateurs et niveau de compétences en IA générative.
- 02
Adoption des agents
Par population, groupe, département, filiale ou business unit.
- 03
Coûts et ROI par agent
Coûts en crédits, tokens ou euros et retour sur investissement de chaque agent.
- 04
Recommandations
Des recommandations concrètes pour conduire le changement à grande échelle.
Questions fréquentes
Qu'est-ce que Pivotal Bench ?
+
Pivotal Bench est une plateforme qui mesure la qualité, la vitesse et le coût des agents IA, inspecte leur configuration (instructions, outils, skills, sous-agents) et aide à les gouverner à l'échelle d'une entreprise.
Quelles plateformes sont supportées ?
+
Dust est le premier connecteur. ChatGPT, Claude et MCP sont prévus. Les résultats de tout autre système (Glean, Copilot…) peuvent déjà être importés en CSV et comparés.
Comment les réponses sont-elles jugées ?
+
Un modèle d'évaluation compare le sens de chaque réponse à la réponse attendue et rend un verdict justifié. Les verdicts Partiel ou Incorrect sont relus à la lumière de la question, et vous pouvez corriger tout verdict à la main.
Qu'est-ce que le score Craft.ecQ ?
+
Craft.ecQ est un cadre d'écriture de prompts en 8 critères : Contexte, Rôle, Actions, Format, Ton, Exemples, Contraintes et contrôle Qualité. Pivotal Bench note les instructions de chaque agent de 1 à 5 et explique chaque critère.
Qui a accès aux résultats ?
+
Tout appartient à votre entreprise, reconnue par son domaine e-mail. Les administrateurs gèrent les membres ; chaque espace est partagé en lecture ou en édition.
Vos agents IA méritent une mesure sérieuse
Connectez votre workspace Dust et obtenez en quelques minutes une première inspection et un premier benchmark.
