Qu'est-ce que la démarche d'évaluation d'impact et comment la construire ?

Pendant longtemps, l'évaluation des projets consistait essentiellement à répondre à quelques questions simples : combien de personnes ont été accompagnées ? Combien d'actions ont été réalisées ? Quel budget a été consommé ?

Aujourd'hui, ces informations ne suffisent plus.

Les financeurs, les collectivités, les entreprises de l'économie sociale et solidaire, mais aussi les citoyens souhaitent comprendre ce qui change réellement grâce aux projets soutenus. Ils ne cherchent plus uniquement à savoir ce qui a été fait, mais quels effets durables ont été produits sur les personnes, les organisations et les territoires.

C'est tout l'enjeu de la démarche d'évaluation d'impact.

Pourtant, derrière cette expression largement utilisée se cachent des réalités très différentes. Certaines organisations la vivent comme une obligation administrative supplémentaire, tandis que d'autres en font un véritable levier de transformation et de pilotage.

Chez AC Novation Citoyenne, nous considérons que l'évaluation d'impact n'est pas un exercice de reporting. C'est avant tout une démarche stratégique qui permet de mieux comprendre la valeur créée, d'améliorer l'action collective et d'éclairer les décisions futures.

L'évaluation d'impact : changer de regard sur la performance

L'une des principales difficultés lorsqu'on parle d'impact réside dans la confusion entre plusieurs notions.

Une organisation peut parfaitement être très active sans produire les effets attendus.

À l'inverse, une action de faible ampleur peut générer des transformations profondes.

Prenons un exemple.

Une association organise chaque année 80 ateliers de sensibilisation à l'environnement.

Les indicateurs d'activité répondront aux questions suivantes :

• combien d'ateliers ont été réalisés ?

• combien de participants ont été accueillis ?

• combien d'heures d'animation ont été dispensées ?

Les résultats immédiats permettront ensuite de mesurer :

• les connaissances acquises ;

• le niveau de satisfaction des participants ;

• leur intention de modifier leurs pratiques.

Mais l'impact, lui, cherchera à comprendre :

• les habitants ont-ils réellement changé leurs comportements ?

• les déchets ont-ils diminué ?

• les pratiques de consommation ont-elles évolué ?

• ces changements perdurent-ils plusieurs mois après les ateliers ?

Autrement dit, l'évaluation d'impact ne mesure pas seulement ce qui est produit.

Elle cherche à comprendre ce qui est transformé.

Pourquoi engager une démarche d'évaluation d'impact ?

Les motivations sont nombreuses et dépassent largement les seules demandes des financeurs.

Mieux piloter son projet

Une organisation prend quotidiennement des décisions : développer une nouvelle activité, réorienter une offre de service, renforcer un partenariat ou encore faire évoluer son modèle économique.

Sans données fiables sur les effets réellement produits, ces décisions reposent souvent sur des intuitions.

Une démarche d'impact apporte des éléments objectifs permettant d'arbitrer.

Elle aide à répondre à des questions telles que :

• quelles actions produisent le plus de valeur ?

• quels publics bénéficient réellement du projet ?

• quelles pratiques méritent d'être renforcées ?

• quelles actions peuvent être abandonnées ?

L'évaluation devient alors un outil d'aide à la décision.

Renforcer la crédibilité auprès des partenaires

Les financeurs attendent aujourd'hui davantage qu'un bilan d'activité.

Ils souhaitent comprendre :

• comment les ressources mobilisées créent de la valeur ;

• quelles transformations sont réellement observées ;

• comment l'organisation apprend de son expérience.

Une démarche structurée renforce ainsi la confiance entre les différentes parties prenantes.

D'ailleurs, les pratiques évoluent rapidement. Comme l'a récemment montré un webinaire de l'Avise réunissant une collectivité, une fondation et un investisseur à impact, les financeurs ne cherchent plus seulement à contrôler l'utilisation des fonds : ils souhaitent construire avec les porteurs de projets des référentiels communs, des indicateurs pertinents et un pilotage partagé.

Cette évolution marque un changement profond de culture.

Une démarche avant tout collective

L'une des erreurs les plus fréquentes consiste à confier l'évaluation à une seule personne ou à un cabinet extérieur.

Or, l'impact se construit collectivement.

Les personnes qui connaissent le mieux les transformations produites sont souvent :

• les bénéficiaires ;

• les équipes opérationnelles ;

• les partenaires locaux ;

• les élus ;

• les bénévoles ;

• les financeurs.

Construire une démarche d'évaluation revient donc à créer un espace de dialogue entre ces différentes parties prenantes.

Cette co-construction permet notamment :

• d'identifier les changements réellement significatifs ;

• d'éviter des indicateurs déconnectés du terrain ;

• de favoriser l'appropriation des résultats ;

• de développer une culture commune de l'évaluation.

Les grandes étapes de construction d'une démarche d'évaluation

1. Définir la finalité de l'évaluation

Avant toute chose, une question fondamentale doit être posée :

Pourquoi souhaite-t-on évaluer ?

Cette clarification évite de produire une masse d'informations qui ne seront jamais utilisées.

Selon les situations, l'évaluation peut servir à :

• piloter une stratégie ;

• préparer un changement d'échelle ;

• répondre à un appel à projets ;

• améliorer les pratiques professionnelles ;

• démontrer la pertinence d'une innovation sociale ;

• alimenter un dialogue avec les parties prenantes.

La réponse conditionnera l'ensemble de la démarche.

2. Construire une théorie du changement

Chez AC Novation Citoyenne, cette étape constitue souvent le cœur de l'accompagnement.

La théorie du changement permet de représenter la logique qui relie :

• les besoins identifiés ;

• les ressources mobilisées ;

• les activités mises en œuvre ;

• les résultats immédiats ;

• les effets attendus ;

• les impacts à long terme.

Elle oblige à expliciter les hypothèses qui sous-tendent l'action.

Par exemple :

"Si nous développons des tiers-lieux dans les quartiers prioritaires, alors nous favoriserons la coopération entre habitants, ce qui renforcera progressivement leur pouvoir d'agir."

Cette représentation commune facilite ensuite tout le travail d'évaluation.

3. Identifier les questions évaluatives

Une bonne démarche ne commence pas par des indicateurs.

Elle commence par des questions.

Par exemple :

• En quoi notre action améliore-t-elle la qualité de vie ?

• Quels changements les bénéficiaires perçoivent-ils ?

• Les partenariats développés renforcent-ils réellement le territoire ?

• Les effets sont-ils durables ?

• Existe-t-il des effets inattendus ?

Ces questions guideront ensuite le choix des méthodes.

4. Choisir les méthodes adaptées

L'impact est rarement mesurable par un seul outil.

Les meilleures démarches combinent généralement plusieurs approches.

Les données quantitatives permettent de mesurer l'évolution de certains indicateurs :

• fréquentation ;

• insertion professionnelle ;

• maintien dans l'emploi ;

• création d'activités.

Les méthodes qualitatives permettent de comprendre les mécanismes du changement :

• entretiens ;

• focus groups ;

• récits de vie ;

• observations de terrain ;

• ateliers participatifs.

Cette combinaison offre une vision beaucoup plus riche.

5. Sélectionner des indicateurs utiles

Toutes les données ne sont pas pertinentes.

Chez AC Novation Citoyenne, nous privilégions des indicateurs :

• compréhensibles ;

• robustes ;

• réalistes à collecter ;

• directement reliés aux décisions futures.

Un tableau de bord de quinze indicateurs bien choisis est souvent plus utile qu'une centaine de données jamais exploitées.

6. Organiser la collecte des données

Une démarche d'impact ne repose pas uniquement sur des enquêtes annuelles.

La collecte doit être pensée comme un processus continu.

Cela suppose notamment de définir :

• qui collecte quoi ;

• à quel moment ;

• selon quelles modalités ;

• comment les données sont sécurisées ;

• comment elles sont partagées.

L'objectif est de limiter la charge de travail tout en garantissant la qualité des informations recueillies.

7. Interpréter collectivement les résultats

Les données ne parlent jamais toutes seules.

Deux organisations peuvent obtenir exactement les mêmes résultats et en tirer des conclusions très différentes.

C'est pourquoi les temps d'analyse collective sont essentiels.

Ils permettent :

• de contextualiser les chiffres ;

• d'expliquer certains écarts ;

• d'identifier des signaux faibles ;

• de décider des ajustements nécessaires.

Les erreurs les plus fréquentes

Au fil des accompagnements, plusieurs difficultés reviennent régulièrement.

Vouloir tout mesurer

L'impact est complexe.

Chercher à tout objectiver conduit souvent à produire des dispositifs lourds, coûteux et finalement peu utilisés.

Il vaut mieux accepter qu'une partie des transformations restera qualitative.

Comme le rappellent plusieurs financeurs de l'ESS, il faut accepter que l'on ne puisse pas tout mesurer, notamment à court terme, et reconnaître que le processus d'évaluation lui-même est souvent aussi précieux que les résultats obtenus.

Confondre activité et impact

Le nombre de personnes accompagnées ne constitue pas un impact.

Il s'agit d'un résultat d'activité.

L'impact concerne les changements effectivement produits.

Construire des indicateurs sans les utilisateurs

Un indicateur n'a de valeur que s'il est utilisé.

Associer les équipes, les partenaires et parfois les bénéficiaires à leur définition favorise leur appropriation.

Attendre la fin du projet

L'évaluation doit accompagner le projet tout au long de son développement.

Plus elle est intégrée tôt, plus elle devient utile.

Une évolution des attentes des financeurs

Les financeurs eux-mêmes changent de posture.

Les expériences présentées récemment par la Ville de Grenoble, la Fondation RTE et ESFIN Gestion montrent que l'évaluation évolue vers davantage de coopération : diagnostics partagés, conventions pluriannuelles, entretiens qualitatifs, observations de terrain, référentiels communs ou encore trajectoires d'impact co-définies.

Cette évolution traduit une conviction de plus en plus partagée : une bonne évaluation ne se résume pas à une grille d'indicateurs. Elle se construit dans le dialogue, la confiance et l'apprentissage mutuel.

La vision d'AC Novation Citoyenne

Chez AC Novation Citoyenne, nous accompagnons les organisations publiques, privées et de l'économie sociale et solidaire dans la conception de démarches d'évaluation qui soient réellement utiles.

Notre approche repose sur quatre convictions.

L'évaluation est un levier de transformation. Elle doit aider à mieux agir, pas seulement à rendre des comptes.

L'impact se construit avec les parties prenantes. Les bénéficiaires, les équipes, les partenaires et les financeurs ont chacun une lecture complémentaire des changements observés.

La simplicité est une force. Une démarche appropriée et utilisée vaut mieux qu'un dispositif complexe laissé de côté.

Les résultats doivent nourrir la décision. Une évaluation réussie est celle qui éclaire les choix stratégiques, améliore les pratiques et renforce la capacité d'action des organisations.

Conclusion

Dans un contexte où les exigences de transparence, d'efficacité et de responsabilité se renforcent, la démarche d'évaluation d'impact s'impose comme un véritable outil de gouvernance.

Loin d'être une simple obligation de reporting, elle permet de comprendre les transformations produites, de mobiliser les parties prenantes autour d'une vision commune et de piloter les projets avec davantage de pertinence.

Construite de manière collaborative, adaptée aux réalités du terrain et orientée vers l'apprentissage, elle devient un moteur d'innovation et d'amélioration continue. C'est cette approche, exigeante mais pragmatique, qu'AC Novation Citoyenne met au service des organisations souhaitant faire de leur impact un véritable levier de transformation.