Comment mesurez-vous si la formation à l’IA a porté ses fruits ?

Comment mesurez-vous la formation à l’IA, en bref ?

Mesurez trois niveaux, dans cet ordre : les collaborateurs savent-ils réaliser la tâche au niveau attendu, le font-ils dans leur travail réel, et un résultat important pour l’entreprise a-t-il évolué ? Les taux de suivi jusqu’au terme et les scores de satisfaction méritent d’être consignés, mais ils montrent que les participants ont suivi et apprécié la formation, pas qu’ils ont appris.

Cela correspond au modèle de Kirkpatrick, largement utilisé, dont les quatre niveaux sont la réaction, l’apprentissage, le comportement et les résultats. Selon ses propres définitions, le niveau 3 désigne la mesure dans laquelle les personnes adoptent les comportements essentiels dans leur environnement, et le niveau 4 la mesure dans laquelle les résultats visés par l’organisation sont atteints. Pour la formation à l’IA, c’est généralement aux niveaux 2 et 3 que se trouvent les éléments probants utiles.

À quoi ressemble un bon référentiel de qualité pour un exemple de travail ?

Un bon référentiel est une courte grille d’évaluation qu’une autre personne pourrait appliquer pour parvenir au même avis. Pour une réponse client rédigée avec l’aide de l’IA, elle pourrait couvrir les critères suivants : utiliser uniquement les faits fournis, répondre à la véritable question du client, respecter le ton de l’entreprise, signaler toute incertitude et ne rien contenir qui nécessiterait une correction avant l’envoi.

Évaluez chaque critère simplement, par exemple avec les mentions satisfait, partiellement satisfait ou non satisfait, et conservez le commentaire de la personne chargée de l’évaluation. Ce commentaire est souvent plus utile que la note, car il indique les points à travailler ensuite.

À quoi ressemble une comparaison avant et après ?

Fernhill Outdoors, une entreprise fictive de vente en ligne de 15 personnes, a formé ses quatre agents du service client. Avant la formation, chacun a rédigé une réponse à une réclamation type à l’aide de ChatGPT. Les réponses étaient généralement polies, mais inventaient un détail des règles de remboursement et ne répondaient pas à la question du client sur les dates de livraison.

Au bout de quatre semaines, chaque agent a rédigé une réponse à une réclamation différente, évaluée selon la même grille de critères. Le responsable du service client a consigné les critères remplis et constaté que trois des quatre brouillons signalaient désormais l’incertitude sur la date de livraison au lieu d’en inventer une. Cela témoigne d’un apprentissage sur une tâche, pour quatre personnes. Cela ne prouve pas que le service client est plus rapide ou que les clients sont plus satisfaits, et la page ne doit pas le prétendre.

Comment savez-vous si les personnes appliquent la compétence dans leurs tâches réelles ?

Observez les pratiques dans le travail quotidien plutôt que de demander aux personnes si elles utilisent l’IA. Parmi les signes utiles : des brouillons réalisés avec l’aide de l’IA et relus dans le dossier partagé, un responsable qui constate moins de corrections du type visé par la formation, et des personnes qui posent des questions sur les informations autorisées avant d’agir.

Les rapports d’utilisation des outils aident à suivre l’accès. Le rapport d’utilisation de Copilot de Microsoft, par exemple, indique les utilisateurs actifs et les dates de dernière activité. L’activité montre que l’outil a été utilisé, pas qu’il a été bien utilisé : complétez donc ces données par un examen du travail réellement produit.

Peut-on calculer le retour sur investissement d’une formation à l’IA ?

Vous pouvez l’estimer, mais soyez prudent dans vos affirmations. Un gain de temps déclaré par les employés est une perception, pas une mesure. Si un résultat compte, chronométrez une tâche comparable avant et après, ou comparez la qualité des productions après vérification, et consignez le nombre de personnes et de tâches sur lequel repose l’estimation.

Évaluez aussi les coûts honnêtement, en incluant le temps d’apprentissage et de vérification. Pour beaucoup de petites équipes, les éléments les plus probants seront un ensemble d’exemples de travaux vérifiés et une pratique que les personnes continuent d’appliquer, plutôt qu’un simple chiffre de retour sur investissement. C’est une base solide pour décider s’il faut continuer.

Quelle place pour Tosheo.ai ?

Tosheo.ai est conçu pour que chaque leçon se termine par une tâche notée selon une grille d’évaluation visible, avec des retours précis, et pour que les apprenants puissent demander le réexamen d’une note qu’ils contestent. Il est prévu que les responsables voient la progression des compétences par métier, ce qui fournit des éléments attestant les acquis. Le produit ne peut pas mesurer vos résultats commerciaux à votre place.

Quand Tosheo.ai n’est-il pas la solution ?

Si vous avez besoin d’une évaluation formelle pour un financeur ou un conseil d’administration, avec des groupes témoins ou des chiffres audités, faites appel à un spécialiste de l’évaluation. Si vous avez surtout besoin de suivre les licences des outils et leur utilisation, les rapports d’administration de votre fournisseur remplissent cette fonction. Tosheo.ai ne s’intègre pas à une plateforme de gestion de la formation au lancement.

Sources et périmètre

Kirkpatrick Partners, Le modèle Kirkpatrick, vérifié le 16 octobre 2026 ↗

Microsoft Learn, rapport d’utilisation de Microsoft Copilot, 14 juillet 2026 ↗