Évaluer, documenter et poursuivre : grille de test, charte d'usage et veille

Votre bibliothèque est écrite. Mais écrire n'est pas valider : un assistant de travail n'a de valeur que si vous savez dans quelles conditions vous pouvez lui faire confiance. Cette dernière leçon vous fait passer de « j'ai de beaux prompts » à « j'ai des prompts évalués, améliorés et encadrés par une charte personnelle ». Elle se termine par des pistes pour continuer à apprendre.

Étape 1 : la grille d'évaluation

Reprenez les critères définis à la leçon de cadrage et traduisez-les en grille. Pour chaque prompt, vous évaluerez les mêmes dimensions, avec une notation simple. Voici une grille type :

Règle de décision : un prompt est validé s'il n'a aucun KO et obtient au moins 6 sur 8 sur les critères notés, sur l'ensemble des cas de test. Vous pouvez adapter ces seuils, mais fixez-les avant de tester pour éviter de vous raconter des histoires.

Étape 2 : exécuter les tests

1. Préparez vos cas : trois à quatre cas fictifs ou anonymisés par tâche (typique, pauvre, riche, piège).
2. Lancez chaque prompt dans une conversation vierge, sans historique.
3. Relancez deux fois les prompts importants pour juger la stabilité.
4. Notez chaque résultat dans un tableau, avec la remarque libre sur ce qui a posé problème.
5. Chronométrez au moins un cas par tâche : temps de préparation, d'attente, de vérification, de retouche, comparé à la méthode actuelle.

Prompt : Notes de réunion en décisions et actions (v1)
Outil : [outil] — date : [date]

Cas        | Fiabilité | Compl. | Format | Ton | Utilité | Total | Remarque
-----------|-----------|--------|--------|-----|---------|-------|----------
Typique    | OK        | 2      | 2      | 2   | 2       | 8     | -
Pauvre     | KO        | 1      | 2      | 2   | 1       | -     | invente un responsable
Riche      | OK        | 1      | 2      | 2   | 1       | 6     | oublie une action
Piège      | OK        | 2      | 1      | 2   | 2       | 7     | tableau mal formé
Temps : 14 min (35 min avant)

Étape 3 : analyser et itérer

Trois lectures de vos résultats :

• Les KO d'abord. Un KO sur la fiabilité est prioritaire : ajoutez ou renforcez le garde-fou (« à préciser », « n'infère rien »), puis rejouez.
• Les schémas récurrents : si le même problème apparaît sur plusieurs prompts (trop long, ton trop formel), le remède est peut-être dans vos instructions personnalisées plutôt que dans chaque prompt.
• Les cas pièges : ils révèlent les limites réelles ; inscrivez-les dans le champ « Limites » de la fiche.

Appliquez ensuite la règle d'or : une modification à la fois, puis nouveau passage du jeu de tests. Numérotez les versions (v1, v2…) et gardez une ligne sur ce qui a changé et pourquoi. Deux ou trois itérations suffisent généralement ; au-delà, interrogez-vous : la tâche est-elle bien choisie ? faut-il la découper ? vaut-il mieux la faire soi-même ?

Étape 4 : le bilan du projet

Terminez par une synthèse d'une page :

• Quels prompts sont validés, à améliorer, abandonnés ?
• Quel gain de temps mesuré (vérification comprise) ?
• Quels risques sont apparus ? Quelles parades fonctionnent ?
• Qu'avez-vous appris sur votre façon de formuler, de vérifier, d'itérer ?
• Qu'allez-vous changer dans votre façon de travailler ?

Étape 5 : votre charte d'usage personnelle

La charte d'usage personnelle est le document qui transforme vos apprentissages en règles. Courte (une page), concrète, relue régulièrement, elle répond à cinq questions :

1. Pour quoi j'utilise l'IA : mes cas d'usage autorisés.
2. Ce que je n'y mets jamais : données personnelles de tiers, secrets, identifiants, contenu que je n'ai pas le droit de partager.
3. Ce que je ne lui délègue pas : décisions concernant des personnes, avis professionnels (médical, juridique, financier), apprentissages que je dois acquérir moi-même.
4. Comment je vérifie : méthode selon l'enjeu, sources fiables, contrôle des chiffres et des références.
5. Comment je suis transparent : quand et comment je mentionne l'usage de l'IA, dans le respect des règles de mon organisation.

Exemple de charte

MA CHARTE D'USAGE DE L'IA (version 1, révisée tous les 6 mois)

1. J'utilise l'IA pour : premiers jets, reformulations, résumés de
   documents que j'ai le droit de partager, fiches de révision,
   planification.
2. Je n'y mets jamais : données personnelles de tiers, mots de passe,
   documents confidentiels, informations non anonymisées.
3. Je ne lui délègue pas : les décisions sur des personnes, les avis
   médicaux, juridiques ou financiers, les devoirs que je dois faire
   moi-même.
4. Je vérifie : tout chiffre, nom, date, citation ou source avant de les
   utiliser ; je recoupe avec une source fiable pour les enjeux élevés.
5. Je suis transparent : je mentionne l'usage de l'IA quand le contenu
   est publié ou quand les règles l'exigent.
6. Je reste responsable de tout ce que j'envoie ou publie.
7. Je garde l'esprit critique : je demande des contre-arguments et je
   garde une part de mes tâches sans assistance.

Étape 6 : poursuivre : veille et apprentissage continu

Les outils, les usages et les règles évoluent très vite : une compétence durable est moins de connaître un outil précis que de savoir évaluer et s'adapter. Quelques habitudes pour garder le cap :

• Une veille légère : choisissez deux ou trois sources fiables (organismes officiels, institutions, médias sérieux, ressources de votre secteur) et consacrez-y quelques minutes par semaine. Méfiez-vous des annonces spectaculaires et des promesses miracles.
• Une révision de votre bibliothèque tous les quelques mois : retester les prompts clés quand l'outil change ou quand vous changez d'outil.
• Un suivi des règles : politique de votre organisation, évolutions de la réglementation (par exemple via la CNIL et les textes de l'Union européenne sur EUR-Lex).
• Des essais encadrés : testez les nouvelles fonctions sur des tâches non sensibles avant de les adopter.
• Le partage : échangez vos bonnes pratiques avec des collègues ou des camarades, et comparez vos résultats de tests.

Pistes pour aller plus loin

• Approfondir le prompting pour un domaine précis (enseignement, marketing, droit, santé, ressources humaines), en vous appuyant sur les règles de ce domaine.
• Découvrir l'automatisation et les assistants personnalisés à petite échelle, avec validation humaine.
• Comprendre les données : notions de statistiques et de tableur pour mieux contrôler les analyses.
• S'initier à la programmation pour comprendre ce que font les outils et vérifier ce qu'ils produisent.
• Continuer à développer l'esprit critique : éducation aux médias, vérification de l'information.

À vous de jouer

Exercice final. 1) Évaluez au moins trois prompts de votre bibliothèque avec la grille, sur quatre cas chacun. 2) Améliorez le prompt qui a le plus faibli, en une modification à la fois, et rejouez les tests. 3) Remplissez le champ « Test » de vos fiches. 4) Rédigez votre bilan d'une page. 5) Rédigez votre charte d'usage en cinq à sept points. 6) Notez la date de votre prochaine révision.

Bravo : vous avez parcouru le cours de bout en bout. Il ne vous reste plus qu'à passer l'évaluation finale pour valider vos acquis, puis à utiliser votre assistant personnel de travail.