Ce que mesurent réellement les sondages de fin de formation
La corrélation entre satisfaction des apprenants et apprentissage réel se situe à .02. Trois décennies de recherche éclairent ce que mesurent vraiment nos sondages de fin de formation, et ce que la science suggère comme alternative.
Les sondages de satisfaction sont l'outil d'évaluation le plus utilisé en formation. Selon les benchmarks du secteur, environ neuf programmes sur dix sont évalués comme ça, souvent avec un Net Promoter Score en complément. Et ces scores influencent des décisions concrètes : on garde quels programmes, on reconduit quels formateurs, on alloue quels budgets.
Trente ans de recherche disent quelque chose de précis sur ce que ces sondages mesurent vraiment. J'ai compilé l'essentiel dans un dossier NotebookLM accessible plus bas dans l'article.
Un mot sur la corrélation
Avant les chiffres, un mot rapide sur la corrélation. Elle mesure le lien entre deux variables sur une échelle de 0 à 1. Plus on s'approche de 1, plus le lien est fort. Plus on s'approche de 0, moins il y en a. Pour donner un repère, le lien entre la taille des parents et celle de leurs enfants se situe autour de .50, ce qu'on considère comme modéré mais bien réel.
Ce que les sondages de satisfaction mesurent vraiment
En 1997, Alliger et collègues publient une méta-analyse qui devient une référence. La corrélation entre la satisfaction des apprenants et l'apprentissage immédiat ? r = .02. Avec le transfert au travail, r = .07. En 2008, Sitzmann et son équipe répliquent l'exercice avec 27 020 apprenants sur 136 études. La corrélation entre les réactions et la connaissance procédurale différée, qui est le proxy le plus proche du transfert réel, atteint .10.
Autrement dit, la satisfaction et l'apprentissage sont des phénomènes largement indépendants. Ce que les réactions captent vraiment, c'est le style d'enseignement (ρ = .66) et l'interaction humaine pendant la formation (ρ = .56). Les sondages de satisfaction font bien leur travail pour mesurer la qualité perçue de l'expérience. Ils ne mesurent juste pas l'apprentissage ni le transfert.
Hughes et collègues (2020) ajoutent une donnée déterminante : 32 % de la variance du transfert s'explique par le soutien des pairs, du gestionnaire et de l'organisation. Le transfert se joue largement après la formation, dans le milieu de travail.
Le Net Promoter Score en formation
Le NPS vient du marketing. Il a été conçu en 2003 pour mesurer la fidélité commerciale d'une clientèle. La question est simple : sur une échelle de 0 à 10, est-ce que tu recommanderais ce produit ou ce service ? La logique derrière, c'est le bouche à oreille.
Même dans son domaine d'origine, la recherche peer-reviewed est nuancée. Keiningham et collègues (2008) ont montré que le NPS ne fait pas mieux que les mesures de satisfaction moyenne pour prédire la croissance d'une entreprise. Morgan et Rego (2006) sont arrivés à des conclusions similaires sur la performance financière.
En formation, on n'essaie pas de mesurer la fidélité commerciale. On essaie de prédire si l'apprenant va appliquer ce qu'il a appris au travail. Demander à quelqu'un s'il recommanderait la formation à un collègue mesure surtout sa satisfaction immédiate, pas sa capacité future à transférer. C'est pour ça que le NPS comme indicateur d'efficacité reste à valider.
Une approche alignée sur la recherche
Will Thalheimer a développé une méthodologie qui répond directement à ces constats. Ses Performance-Focused Learner Surveys s'articulent autour de quatre piliers de l'efficacité : la compréhension, la mémorisation, la motivation à appliquer, et le soutien post-formation. Chacun cible une variable que la recherche identifie comme prédictive du transfert.
Les échelles de Likert classiques sont remplacées par des choix comportementaux concrets, plus précis et moins biaisés. Le NPS laisse sa place au Net Effectiveness Score, qui demande aux apprenants d'évaluer l'efficacité perçue de la formation plutôt que leur envie de la recommander.
Je vous recommande son livre Performance-Focused Learner Surveys (2e édition, 2023). Il donne tout ce qu'il faut pour construire des sondages alignés sur la recherche : la logique, les questions types, et les principes de déploiement.
Un dossier de recherche complet
J'ai compilé un dossier dans NotebookLM avec 22 sources peer-reviewed qui couvrent 35 ans de recherche sur l'évaluation de la formation. Le format permet de poser des questions précises au corpus selon votre contexte.
Au final, la question devient : qu'est-ce qu'on veut vraiment mesurer ?
Sources
Alliger, G. M., Tannenbaum, S. I., Bennett, W., Traver, H., & Shotland, A. (1997). A meta-analysis of the relations among training criteria. Personnel Psychology, 50(2), 341-358.
Hughes, A. M., Zajac, S., Spencer, J. M., & Salas, E. (2020). The role of work environment in training sustainment: A meta-analysis. Human Factors, 62(1), 166-183.
Keiningham, T. L., Cooil, B., Andreassen, T. W., & Aksoy, L. (2008). A holistic examination of Net Promoter. Journal of Database Marketing & Customer Strategy Management, 15, 79-90.
Morgan, N. A., & Rego, L. L. (2006). The value of different customer satisfaction and loyalty metrics in predicting business performance. Marketing Science, 25(5), 426-439.
Sitzmann, T., Brown, K. G., Casper, W. J., Ely, K., & Zimmerman, R. D. (2008). A review and meta-analysis of the nomological network of trainee reactions. Journal of Applied Psychology, 93(2), 280-295.
Thalheimer, W. (2023). Performance-Focused Learner Surveys (2nd ed.). Work-Learning Press.
