# Évaluer l'impact : contrefactuel, quasi-expérimentation et évaluation participative Travail social & politiques sociales · Master 2 > Évaluation d'impact : contrefactuel, groupe de comparaison, biais et participation. ## Introduction Établir qu'un dispositif a causé un changement est difficile. Il ne suffit pas de constater qu'une situation s'est améliorée : il faut se demander ce qui se serait passé sans l'intervention. C'est le raisonnement contrefactuel. Pour l'approcher, on compare des personnes bénéficiaires à un groupe de comparaison aussi semblable que possible. L'expérimentation aléatoire attribue les personnes au hasard à un groupe d'intervention ou de contrôle, ce qui limite les biais; elle soulève toutefois des questions éthiques et pratiques. Les méthodes quasi-expérimentales, comme la différence de différences ou l'appariement, cherchent à reconstituer une comparaison à partir de données d'observation. Le biais de sélection apparaît lorsque les personnes qui participent diffèrent dès le départ de celles qui ne participent pas. En parallèle, l'évaluation participative associe les destinataires et les professionnel-le-s à la définition des questions et à l'interprétation, et les approches mixtes combinent données chiffrées et récits. Ce deck présente ces options et leurs limites. ## Objectifs d'apprentissage - Expliquer le raisonnement contrefactuel - Comparer expérimentation et méthodes quasi-expérimentales - Identifier un biais de sélection - Discuter l'apport et les limites de l'évaluation participative ## Concepts clés - **Contrefactuel** : Ce qui serait arrivé sans l'intervention : référence pour estimer l'effet. - **Groupe de comparaison** : Personnes similaires non bénéficiaires, qui servent d'étalon. - **Biais de sélection** : Différences préexistantes entre participants et non-participants qui faussent la comparaison. - **Approches complémentaires** : Évaluation participative et méthodes mixtes pour comprendre les mécanismes et les perceptions. ## Conclusion Mesurer l'impact exige de s'interroger sur la causalité et de reconnaître les limites des données disponibles. Aucune méthode n'est parfaite : le choix dépend de la question, du contexte et des contraintes éthiques. Combiner comparaison rigoureuse et compréhension qualitative donne les évaluations les plus utiles aux décideurs et aux équipes. ## Cartes ### Qu'est-ce que le contrefactuel ? La situation qui aurait prévalu sans l'intervention, qu'on cherche à approcher par comparaison. ### Pourquoi un avant-après simple est-il insuffisant ? Parce que d'autres facteurs peuvent expliquer le changement : conjoncture, âge, autres politiques. ### Qu'est-ce qu'une expérimentation aléatoire ? Une évaluation où les personnes sont attribuées au hasard à un groupe d'intervention ou de contrôle. ### Quelle limite éthique des expérimentations ? Priver certaines personnes d'une aide potentiellement utile ou la proposer de manière inégale. ### Qu'est-ce que la différence de différences ? La comparaison de l'évolution d'un groupe bénéficiaire et d'un groupe de comparaison avant et après l'intervention. ### Qu'est-ce que l'appariement ? L'association de bénéficiaires à des non-bénéficiaires présentant des caractéristiques semblables. ### Qu'est-ce que le biais de sélection ? L'écart entre participants et non-participants qui fausse l'estimation de l'effet. ### Qu'apporte l'évaluation participative ? La pertinence des questions, la prise en compte des savoirs d'expérience et l'appropriation des résultats. ### Pourquoi combiner méthodes quantitatives et qualitatives ? Pour mesurer les effets et comprendre comment et pourquoi ils se produisent. ## Glossaire - **Contrefactuel** : Situation hypothétique sans l'intervention. - **Groupe témoin** : Groupe non bénéficiaire servant de comparaison. - **Biais de sélection** : Différence initiale entre groupes qui fausse la comparaison. - **Quasi-expérimentation** : Évaluation sans assignation aléatoire, qui cherche à reconstituer la comparaison. - **Évaluation participative** : Évaluation associant les parties prenantes. - **Approche mixte** : Combinaison de méthodes quantitatives et qualitatives. https://ruvy.ch/decks/-P5C_swf9B7ojVSxoZLw