La récolte des effets : une méthode d’évaluation participative pour capter le changement

De nombreux projets de développement social ou d’innovation se déploient dans des environnements complexes, où il est difficile de prévoir à l’avance les résultats précis qui seront atteints. Dans ce contexte, les approches d’évaluation traditionnelles montrent parfois leurs limites.

La méthode de la récolte des effets propose d’observer ce qui s’est réellement passé plutôt que ce qu’on avait prévu, pour mieux comprendre et démontrer l’impact de nos actions.

Dans cet article, nous verrons pourquoi utiliser cette approche, comment se définit un effet et quelles sont les étapes pour déployer cette méthode novatrice.

Qu’est-ce que la récolte des effets ?

La récolte des effets (Outcome Harvesting) est une approche d’évaluation développée par Ricardo Wilson-Grau, évaluateur indépendant et consultant en développement organisationnel, en collaboration avec ses collègues.

En collectant et en analysant collectivement les changements les plus significatifs qui découlent d’un projet, cette méthode participative permet ensuite d’établir les liens de causes à effets entre ces changements observés et les actions qui ont été déployées.

Contrairement aux méthodes d’évaluation conventionnelles qui visent principalement à mesurer l’atteinte d’objectifs prédéfinis, la récolte des effets propose une alternative intéressante pour les projets complexes dans lesquels il est souvent difficile de prévoir quelles seront les retombées d’un projet. En effet, cette méthode permet de se laisser surprendre et de recueillir des changements inattendus !

Pourquoi utiliser cette méthode ?

Chez Dynamo, nous accompagnons des partenaires dans des démarches collaboratives souvent complexes, où les trajectoires sont non linéaires. Les processus d’évaluation ont alors tout intérêt à être participatifs et à s’adapter à la réalité des milieux, afin que les résultats soient réellement utiles et utilisés.

Nous avons testé la méthode de la récolte des effets dans le cadre de plusieurs accompagnements en processus collaboratifs et les résultats ont été concluants !

Cette approche s’avère particulièrement pertinente dans les contextes complexes pour plusieurs raisons :

• Elle valorise l’imprévu et la complexité : nos interventions génèrent souvent des changements inattendus, parfois plus significatifs que ceux anticipés. Cette méthode permet de les capter et de les valoriser.
• Elle renforce la mobilisation : en invitant les partenaires à identifier collectivement les changements observés grâce à leur initiative, la démarche offre un moment d’arrêt pour célébrer les apprentissages et les accomplissements réalisés.
• Elle est simple et adaptable : la méthode peut être ajustée selon le contexte, le temps disponible et les besoins spécifiques de chaque projet.
• Elle documente la contribution plutôt que l’attribution : en reconnaissant que les changements sociaux sont le résultat de multiples facteurs externes en plus de notre intervention, elle permet d’identifier notre contribution, sans prétendre en être l’unique cause.

Qu’est-ce qu’un effet ?

Un effet est défini comme un changement de « comportement » pris dans un sens large (positif ou négatif, prévu ou imprévu) auquel a contribué le projet évalué. Il doit être :

• Factuel et concret : on doit pouvoir le vérifier dans les faits. Les changements peuvent prendre diverses formes et doivent être observables : changements de pratiques, de fonctionnement organisationnel, d’activités, de relations entre individus ou organisations, ou de politiques organisationnelles ou institutionnelles.
• Synthétique et clair : chaque effet doit être formulé en répondant à QUI a fait QUOI, OÙ et QUAND, en mettant l’emphase sur des manifestations concrètes du changement. Par exemple, « Depuis trois ans, on observe dans le quartier une plus grande collaboration au système alimentaire local de la part d’organisations dont la mission première n’est pas en lien avec l’alimentation. »
• Significatif : il faut éviter les changements qui sont plus anecdotiques et tenter d’identifier les plus significatifs. À titre d’exemple : « Deux jeunes ont participé à deux reprises à un atelier sur la communication non-violente » ne serait pas considéré comme un changement significatif puisqu’il s’agit d’un petit échantillon et qu’on ne dispose pas d’information sur l’influence de ces ateliers sur leurs comportements.
• En lien direct avec le projet : le lien de causalité entre le projet déployé et les effets observés doit être important.

Comment utiliser la méthode ?

Les étapes suivantes sont grandement inspirées de la démarche de récolte des effets d’Avenir d’enfants et permettent de planifier et déployer cette méthode. Elles ont été testées par l’équipe de Dynamo lors de plusieurs accompagnements sur le terrain.

Avant l’atelier de récolte

• Préparez les participant·es : envoyez un courriel expliquant ce qu’est un effet et invitant les personnes à réfléchir aux changements les plus significatifs observés.
• Effectuez une recherche documentaire : consultez les rapports, comptes rendus et autres documents du projet pour identifier une première ébauche de quelques changements significatifs.

L’atelier de récolte (environ 2h)

• Introduction (20 min) : introduisez la méthode de la récolte des effets, expliquez la notion d’effet et validez les effets pré-récoltés dans la documentation.
• Récolte individuelle (10 min) : chaque participant·e identifie un à deux changements significatifs (attendus ou inattendus, favorables ou défavorables) en complétant un gabarit simple (énoncé du changement significatif, description des manifestations concrètes).
• Mise en commun (20 min) : en grand groupe, chaque personne présente ses changements et vient les poser au mur, pour qu’ils soient visibles. Regroupez les changements similaires et fusionnez-les au besoin.
• Priorisation (5 min) : chaque participant·e vient prioriser les changements qu’il·elle juge les plus significatifs. Dépendamment du nombre de participant·es et l’ampleur de la récolte souhaitée, on peut les inviter à sélectionner de 3 à 5 changements en y apposant des autocollants ou en y dessinant un cœur.
• Approfondissement (30 min) : en sous-groupes, travaillez sur les changements priorisés à l’aide du gabarit fourni pour analyser si (« lien de contribution » dans le gabarit) et comment (« conditions gagnantes » dans le gabarit) le projet a contribué à ce changement. Il s’agit ici de vérifier s’il existe une relation plausible entre les actions déployées et les effets identifiés et les conditions de succès qui l’ont permis.
• Retour collectif (15 min) : chaque sous-groupe présente son travail pour validation et bonification collective.

Après l’atelier

• Reformulez au besoin : assurez-vous que chaque effet est formulé de façon factuelle, claire et synthétique.
• Bonifiez les effets : ajoutez des données quantitatives ou qualitatives pour venir étoffer chacun des effets, pour qu’ils possèdent une dimension factuelle forte. Une corroboration des effets peut également être faite par d’autres sources, indépendantes du projet, mais bien informées sur les effets et la contribution des personnes ou organisations sur ce changement.
• Compilez et documentez : créez une synthèse des effets récoltés.

Questions clés à se poser

• Quels sont les changements les plus significatifs que nous avons observés, même s’ils n’étaient pas prévus ? Y a-t-il eu des effets défavorables ou inattendus que nous devrions documenter ?
• Ces changements sont-ils formulés de façon factuelle et concrète (Qui, quoi, où, quand) ?
• Quelle est notre contribution spécifique à ces changements, sans surestimer notre rôle ?
• Quelles conditions ont favorisé ces changements ?

Au-delà d’une simple méthode d’évaluation, la récolte des effets offre aussi une occasion d’échange et d’apprentissage collectif qui renforce la culture collaborative. Profitez-en pour célébrer les réussites de vos initiatives en équipe !

Pour aller plus loin

• Avenir d’enfants, une organisation qui a accompagné et soutenu des partenaires en petite enfance à l’échelle locale, régionale et nationale et qui a cessé ses activités en 2020, a adapté la méthode et documenté l’ensemble de son processus de récolte des effets. Notre approche est inspirée de leur adaptation.
• Découvrez d’autres outils dans notre guide d’accompagnement en évaluation participative.
  • Notre équipe peut vous soutenir dans votre processus de récolte des effets ou tout autre type d’évaluation participative.