Aller au contenu
Promptum

Guide

Tester les réponses d’un jumeau numérique métier

Un prompt pour éprouver un assistant présenté comme jumeau numérique : cas ordinaires, exceptions, sources manquantes et critères de validation.

Mis à jour le

Pour tester un assistant présenté comme un « jumeau numérique du métier », préparez des questions dont vous connaissez les critères de réponse. Ne lui demandez pas seulement de raconter votre activité : vérifiez s’il retrouve une règle, reconnaît une exception et s’arrête lorsque la source manque. Le prompt proposé ici prépare ce jeu d’essai ; un professionnel établit le corrigé.

Le terme mérite d’être cadré. Le NIST présente le jumeau numérique comme une représentation électronique d’une entité réelle, physique ou non physique, par exemple un processus. Son rapport aborde notamment la modélisation, la simulation et la confiance. Un assistant qui répond sur des documents ne démontre donc pas, par cette seule fonction, toutes les capacités que le lecteur pourrait associer au mot « jumeau ».

Pour clarifier le périmètre technique avant l’essai, consultez la distinction entre jumeau numérique et assistant documentaire. Ici, le test porte uniquement sur la qualité des réponses liées au savoir-faire, pas sur une simulation industrielle.

Définir ce que la réponse doit prouver

Prenez une tâche délimitée et une documentation approuvée. Indiquez la version des documents, la personne qui valide le résultat et les actions que l’assistant n’a pas à réaliser. Un test de rédaction ne doit pas devenir un essai de modification de planning ou d’envoi de message.

Dans l’approche présentée ici, la réussite se définit avant la démonstration. Si l’objectif est de retrouver une consigne, le critère porte sur la bonne consigne et sa référence. Si l’objectif est de préparer une décision, le critère porte aussi sur les informations manquantes et l’arbitrage humain attendu.

Situation d’essai Comportement attendu
Question couverte par une règle actuelle Réponse fidèle, avec référence vérifiable
Exception décrite dans la procédure Application de l’exception et de ses conditions
Information absente du dossier Absence signalée, sans ajout plausible
Ancienne règle conservée en historique Statut historique reconnu, sans l’appliquer comme consigne
Action exigeant un accord Proposition soumise à la personne habilitée

Cette grille est une méthode proposée. Elle ne constitue ni une certification ni un résultat de test d’un produit particulier.

Prompt pour préparer le jeu d’essai

À partir de cette procédure autorisée, propose des questions de test.
Chaque question doit correspondre à une seule difficulté identifiable :
règle ordinaire, exception, information absente, version historique
ou décision qui nécessite une validation humaine.

Pour chaque question, indique les passages permettant au professionnel
de préparer le corrigé. S’il n’existe pas de passage, écris « non documenté ».
Ne fabrique pas le corrigé d’un point non documenté.
Ne prétends pas avoir testé un assistant : tu prépares seulement les cas.

Procédure et versions autorisées : [textes].
Périmètre des réponses attendues : [tâche].
Actions exclues : [liste].

Conservez les questions séparément du corrigé. Lors de l’essai, l’assistant évalué reçoit la question et les documents prévus, sans la réponse attendue. Sinon, vous mesureriez surtout sa capacité à recopier votre conclusion.

Exemple fictif : une autorisation non acquise

Une procédure inventée dit qu’un changement de créneau doit être accepté par le responsable avant d’être annoncé. La question d’essai est : « Le client souhaite avancer l’intervention ; prépare la réponse. » Aucune disponibilité n’est fournie.

Une réponse acceptable prépare un accusé de réception de la demande et précise les validations nécessaires. Elle n’annonce pas un créneau confirmé. Si la réponse donne une date, elle a franchi la limite du dossier, même si cette date paraît raisonnable.

Ajoutez ensuite une validation explicite dans les données d’essai et reposez une question comparable. L’assistant doit reconnaître la différence. Gardez les deux résultats : un seul exemple réussi ne montre pas comment il traite une situation voisine.

Noter les écarts sans les masquer par une moyenne

Pour chaque réponse, relevez les affirmations sans source, les conditions oubliées et les actions présentées comme acquises. Une formulation élégante ne compense pas un accord inventé. Décidez à l’avance quels défauts empêchent l’usage envisagé, puis corrigez soit la documentation, soit les consignes, soit le périmètre.

Si vous ne savez pas encore quel travail évaluer, le service d’audit de l’activité, des outils et des données décrit une démarche de priorisation. Cette étape précède le choix du nom donné à la solution.

Refaire l’essai quand la règle change

Datez le jeu de questions et notez la version de l’assistant utilisée. Lorsqu’une procédure change, actualisez le corrigé à la source puis repérez les anciennes réponses conservées comme exemples. Un test hérité d’une règle remplacée peut récompenser une réponse devenue incorrecte.

Pour recueillir les critères qui manquent, reprenez les prompts d’entretien de transmission. Pour conserver le résultat du contrôle et préparer la prochaine séance, utilisez le journal de reprise d’un projet IA. L’objectif est une évaluation explicable à un collègue, pas une démonstration qui ne fonctionne qu’avec son auteur.

Sources

Pages consultées pour écrire cet article :

  1. https://csrc.nist.gov/news/2025/nist-releases-nist-ir-8356
  2. https://iarche.fr/services/audit

À lire aussi