Évaluation de processus, modèle logique et cadre RE-AIM

Santé publique & épidémiologie · Master 1

Décrire comment une intervention est mise en œuvre et pourquoi elle fonctionne ou non.

Introduction

Savoir si une intervention de santé publique fonctionne ne suffit pas: il faut aussi comprendre comment elle a été appliquée, à qui elle est parvenue et pourquoi elle a produit, ou non, les effets attendus. Une évaluation d'impact négative peut refléter une intervention inefficace, mais aussi une mise en œuvre incomplète ou une mauvaise adaptation au contexte. L'évaluation de processus documente ce qui s'est réellement passé.

Le modèle logique est l'outil de départ: il décrit la chaîne qui va des intrants (ressources) aux activités, aux produits, aux résultats à court et moyen terme, puis à l'impact. Il rend explicite la théorie du changement, c'est-à-dire les hypothèses causales qui relient chaque étape. Il guide le choix des indicateurs à chaque niveau.

Le cadre RE-AIM propose cinq dimensions pour juger de l'impact réel d'un programme dans la population: portée (Reach), efficacité (Effectiveness), adoption (Adoption), mise en œuvre (Implementation) et maintien (Maintenance). Il met l'accent sur la validité externe et la traduction en pratique, souvent négligées par les essais classiques.

Objectifs d'apprentissage

Construire un modèle logique à partir d'une intervention de santé publique
Distinguer évaluation de processus, de résultats et d'impact
Définir les cinq dimensions du cadre RE-AIM et un indicateur pour chacune
Expliquer la notion de fidélité de mise en œuvre et d'adaptation
Utiliser l'évaluation de processus pour interpréter un résultat d'impact nul

Concepts clés

Modèle logique: Représentation schématique reliant les intrants, les activités, les produits (outputs), les résultats (outcomes) à court et moyen terme et l'impact à long terme. Il clarifie la théorie du changement et permet de choisir des indicateurs à chaque maillon, ce qui permet de localiser où la chaîne se rompt.
Évaluation de processus: Elle documente le déroulement réel: activités réalisées, population atteinte, dose reçue, fidélité au protocole, obstacles et facilitateurs. Elle combine données quantitatives (registres de participation) et qualitatives (entretiens, observations) et éclaire l'interprétation d'une évaluation d'impact.
Cadre RE-AIM: Reach: proportion et représentativité des personnes atteintes; Effectiveness: effet sur les résultats clés, y compris les effets indésirables; Adoption: proportion de lieux et de professionnels qui adoptent le programme; Implementation: fidélité, coût et adaptations; Maintenance: pérennité au niveau individuel et organisationnel.
Fidélité, dose et adaptation: La fidélité mesure dans quelle mesure l'intervention est appliquée comme prévu; la dose, la quantité effectivement reçue. Une adaptation au contexte local peut améliorer l'acceptation, mais doit être documentée pour distinguer les éléments essentiels du programme de ses éléments modifiables.
Interprétation d'un résultat nul: Un effet nul peut résulter d'un échec de la théorie (l'intervention mal conçue), d'un échec de la mise en œuvre (intervention non appliquée) ou d'un manque de puissance. Seule l'évaluation de processus permet de distinguer ces explications et de décider d'abandonner, d'améliorer ou de poursuivre.

Conclusion

L'évaluation de processus et le cadre RE-AIM déplacent la question de l'efficacité théorique vers l'impact réel d'un programme dans une population: qui est atteint, quels lieux adoptent, comment l'intervention est appliquée et si elle dure. Le modèle logique donne le fil conducteur et permet de choisir des indicateurs à chaque maillon.

Pour les décideurs cantonaux et les équipes de terrain, ces outils transforment un résultat d'impact brut en informations utilisables: améliorer la mise en œuvre, adapter l'intervention au contexte ou la généraliser avec une meilleure connaissance de ses conditions de succès.

Cartes

Que contient un modèle logique ?: Les intrants, les activités, les produits, les résultats à court et moyen terme et l'impact à long terme, reliés par la théorie du changement.
À quoi sert la théorie du changement ?: À expliciter les hypothèses causales expliquant comment et pourquoi les activités devraient produire les résultats attendus.
Quelle est la différence entre un produit et un résultat dans un modèle logique ?: Le produit (output) est ce que l'intervention fournit directement, par exemple le nombre d'ateliers; le résultat (outcome) est le changement chez les bénéficiaires, par exemple une amélioration de la connaissance.
Que documente l'évaluation de processus ?: Ce qui a réellement été fait: activités, personnes atteintes, dose, fidélité, obstacles et facilitateurs.
Pourquoi combine-t-on données quantitatives et qualitatives dans l'évaluation de processus ?: Les premières mesurent l'ampleur (participation, dose), les secondes expliquent les raisons, perceptions et obstacles.
Que signifie le R de RE-AIM ?: Reach, la portée: proportion et représentativité des personnes que l'intervention atteint.
Que mesure la dimension Adoption ?: La proportion et la représentativité des organisations, lieux et professionnels qui acceptent de mettre en œuvre le programme.
Que recouvre la dimension Implementation ?: La fidélité à la conception du programme, les adaptations, la dose délivrée et les coûts de mise en œuvre.
Que recouvre la dimension Maintenance ?: La pérennité des effets chez les individus et la durabilité du programme dans les organisations après la phase de projet.
Pourquoi RE-AIM s'intéresse-t-il à la portée et à l'adoption et pas seulement à l'efficacité ?: Parce que l'impact populationnel dépend à la fois de l'effet chez ceux qui participent et de la proportion de personnes et de lieux atteints.
Qu'est-ce que la fidélité de mise en œuvre ?: Le degré auquel l'intervention est délivrée conformément au protocole initial.
Pourquoi une évaluation d'impact nulle ne signifie-t-elle pas forcément que l'intervention est inefficace ?: Elle peut venir d'une mise en œuvre incomplète, d'une faible dose, d'un mauvais ciblage ou d'un manque de puissance; l'évaluation de processus permet de trancher.

Glossaire

Modèle logique: Schéma qui relie les ressources, activités, produits et résultats d'une intervention selon une théorie du changement.
Théorie du changement: Ensemble d'hypothèses expliquant par quels mécanismes les activités doivent produire les résultats visés.
Portée: Proportion de la population cible effectivement atteinte par l'intervention et sa représentativité.
Fidélité: Degré de conformité de la mise en œuvre au protocole conçu.
Dose délivrée: Quantité d'intervention effectivement fournie ou reçue par les participants.
Adoption: Décision d'une organisation ou d'un professionnel d'utiliser l'intervention.
Pérennisation: Poursuite du programme et de ses effets après la fin du financement initial.