Veille mensuelle française et internationale de l’évaluation d’impact social n°3

Publié parLouis Raynaud de LagePublié dansAccompagnement et financement de projets à impact, Agence Phare, Amnyos, Apprentis d'Auteuil, Avise, Better Evaluation, Croix Rouge Française, Economie circulaire, Eexiste, Emmaüs, Engagement citoyen, ESSEC, Financeurs, Fondation Entreprendre, Formation professionnelle et accès à l’emploi, Groupe SOS, HAATCH, Impact Tank, Improve, Innovation for Poverty Action, JPAL, Kimso, Lien social et lutte contre l'exclusion, Petits Frères des Pauvres, Quadrant Conseil, Restos du Cœur, Santé et autonomie, Stanford Social Innovation Review, TIESS, Veilles mensuelles, Voisin Malin

LA RÉFLEXION DU MOIS : L’ÉVALUATION D’IMPACT SOCIAL, LEVIER PRIVILÉGIÉ D’INNOVATION SOCIALE

L’Avise, la Fonda et le Labo de l’ESS, dans une étude intitulée “ESS et Création de valeur”, encouragent à mettre l’évaluation d’impact social au service de l’innovation sociale. Mais de quoi s’agit-il au juste ?

L’évaluation d’impact social (EIS) peut être définie comme une démarche qui vise, par le biais d’approches et d’outils évaluatifs, à décrire, analyser et objectiver les effets d’une initiative dont la finalité est d’apporter une réponse à des besoins sociaux particuliers identifiés chez des individus ou groupes d’individus.

Quant à l’innovation sociale, selon la loi du 31 juillet 2014 sur l’ESS qui reprend les travaux du Conseil supérieur de l’économie sociale et solidaire (CSESS) conduits en 2011, elle “consiste à élaborer des réponses nouvelles à des besoins sociaux nouveaux ou mal satisfaits dans les conditions actuelles du marché et des politiques sociales, en impliquant la participation et la coopération des acteurs concernés, notamment des utilisateurs et usagers. Ces innovations concernent aussi bien le produit ou service, que le mode d’organisation, de distribution, (…).” Les travaux du CSESS avaient ajouté que ces innovations sociales “passent par un processus en plusieurs démarches: émergence, expérimentation, diffusion, évaluation.”

Il est à noter que dans les travaux du CSESS, l’évaluation est mentionnée comme la quatrième étape du processus d’innovation et apparaît comme devant intervenir a posteriori. Pourtant, nos travaux de ces dernières années nous conduisent à penser que que l’innovation sociale est indissociable d’une démarche d’évaluation et qu’il est nécessaire de la mobiliser dès sa conception, puis tout au long du processus d’expérimentation et de diffusion. En fait il ne faut surtout pas attendre la dernière étape, car, déployée “in itinere”, l’évaluation contribue significativement à la maximisation de l’impact de l’innovation sociale   

L’évaluation peut donc avoir vocation à analyser et valider une solution, prouver qu’une initiative est réellement pertinente et cohérente (caractère adéquat des objectifs et des activités mis en oeuvre par rapport au besoin social identifié), efficace (les résultats sont à la hauteur des objectifs fixés) et/ou efficiente (l’allocation des ressources permet d’optimiser les résultats) en fonction des méthodes adoptées. Évaluer permet donc de questionner, d’analyser et de déterminer le caractère socialement innovant ou non d’une initiative tout au long du processus de son déploiement et jusqu’à sa généralisation éventuelle.

De quoi parle-t-on ?

Quels changements l’utilisation d’outils de communication alternative adaptée engendre-t-elle sur des personnes porteuses d’un handicap ? Quels sont les effets d’un accompagnement en conseil conjugal et familial sur la qualité de relation de couples en difficulté ? Quelles sont les conséquences de l’utilisation d’une monnaie locale sur un territoire ? Ce sont autant de questions abordées dans des évaluations d’impact social le mois dernier et qui viennent mettre en évidence la place croissante des innovations sociales dans notre société.

L’innovation sociale est en effet au cœur des préoccupations de nombreux acteurs, qu’il s’agisse des acteurs de l’ESS, dont le quotidien consiste à répondre à des besoins sociaux, des acteurs publics qui déploient par exemple en ce moment des contrats à impact social (CIS), des startups à qui le BCG et la Boussole recommandent d’intégrer l’impact social comme critère de succès, et même des financeurs, comme en témoigne le récent ouvrage de Sir Ronald Cohen, père du capital-risque britannique, sur l’investissement à impact.

Nous voulons ici développer l’idée que cette question de l’innovation sociale est indissociable de l’évaluation d’impact social à trois titres :

  • L’évaluation d’impact social vient valider et faire la preuve de l’innovation sociale existante (Prove).
  • L’évaluation d’impact social permet le pilotage et l’amélioration de l’innovation sociale en s’adaptant aux phases de développement de celles-ci et en permettant d’affiner la compréhension du besoin social et des conditions pour y répondre (Improve).
  • Sous conditions que les approches, résultats et enseignements soient partagés de manière transparente et large, l’évaluation d’impact social peut devenir le creuset de démarches de recherche & développement sociale, et un moyen de diffuser, d’inspirer et de concevoir de nouvelles innovations sociales. (Inspire)

L’évaluation d’impact social permet de valider et faire la preuve de la pertinence, de l’efficacité et de l’efficience d’innovations sociales préexistantes (Prove)

L’évaluation peut avoir vocation à analyser et valider une solution, prouver qu’une initiative est réellement pertinente et cohérente (caractère adéquat des objectifs et des activités mis en oeuvre par rapport au besoin social identifié), efficace (les résultats sont à la hauteur des objectifs fixés) et/ou efficiente (l’allocation des ressources permet d’optimiser les résultats) en fonction des méthodes adoptées. Évaluer permet donc de questionner, d’analyser et de déterminer le caractère socialement innovant ou non d’une initiative tout au long du processus de son déploiement et jusqu’à sa généralisation éventuelle.

Ainsi ce mois-ci, l’étude réalisée par HAATCH pour le compte du Think Tank Vers Le Haut sur le Conseil Conjugal & Familial (CCF) vient démontrer la pertinence de l’accompagnement d’un couple par un conseiller conjugal et familial sur plusieurs séances. Elle démontre que l’accompagnement conjugal a un impact sur la vie des familles et que cette solution permet de répondre à des besoins de couples en termes de meilleure qualité de relation, de médiation, de meilleure communication et de diminution de la conflictualité.

La Croix Rouge vient elle aussi de publier sa première évaluation d’impact social sur la Communication Alternative Adaptée mise en œuvre au sein de ses établissements accueillant des personnes handicapées. Cette démarche a pour objectif de permettre aux personnes qui présentent des difficultés d’expression ou de compréhension, de communiquer plus facilement et d’être davantage actrices de leur vie. L’étude a ainsi mis en avant le caractère innovant de l’approche pour répondre aux besoins des personnes handicapées et permettre une réduction du stress, une augmentation du plaisir et de la sérénité, une amélioration de la santé et de l’autonomie (Figure 1 ci-dessous : Impact sur les personnes handicapées. Extrait du Rapport d’impact “Communiquons autrement, Déploiement de la Communication Alternative Améliorée dans les établissements handicap de la Croix-Rouge française”)

Aucun texte alternatif pour cette image
Figure 1 : Impact sur les personnes en situation de handicap. Extrait du Rapport d’impact “Communiquons autrement, Déploiement de la Communication Alternative Améliorée dans les établissements handicap de la Croix-Rouge française”

Le Mouvement Sol, en partenariat avec l’Université Lyon Lumière 2, le Réseau des collectivités Territoriales pour une Économie Solidaire (RTES) et le Labo de l’ESS, a, quant à lui, partagé en avril 2021, les résultats d’une évaluation d’impact social sur les monnaies locales. L’étude montre que ces monnaies constituent une innovation sociale dans la mesure où elles contribuent à développer l’économie locale, la solidarité, des dynamiques territoriales, des initiatives écologiques et de nouveaux espaces de citoyenneté.

On le voit, dans ces 3 exemples : la nature des besoins (restaurer l’unité d’un couple, communiquer malgré un handicap, développer la vitalité économique et sociale locale) et la nature de l’innovation sociale (innovation de service, innovation de procédé, innovation d’usage) diffèrent, mais à chaque fois, l’évaluation d’impact social vient valider le fait qu’il y a bien réponse à un besoin peu ou mal satisfait et permet même de qualifier l’intensité de l’impact.

L’évaluation permet ainsi de faire la preuve d’une expérimentation ou d’un modèle existant, répondant à un objectif de “prove” de l’innovation sociale vis-à-vis de certaines parties prenantes. Dans notre premier exemple, il s’agit de démontrer aux autorités publiques l’intérêt de soutenir financièrement le conseil conjugal, en mettant en avant la dimension d’impact et les coûts évités pour la dépense publique. Dans le second cas, l’étude de la Croix Rouge a vocation à faire de son expérimentation un exemple pour les professionnels, les établissements et les associations du secteur. Dans le troisième cas, le Mouvement Sol démontre l’intérêt de l’utilisation des monnaies locales pour favoriser l’usage et le développement de celles-ci parmi les acteurs de l’économie sociale et solidaire et sur de nouveaux territoires.

L’évaluation d’impact social permet de piloter et d’améliorer l’innovation sociale (Improve)

Dans un article paru dans The Conversation, nos collègues Anne-Claire Pache, Professeur à l’Essec, Eleonore Delanoë et Greg Molecke exposent que l’évaluation d’impact social doit s’adapter au cycle de l’innovation. L’évaluation d’impact social est ainsi perçue comme un outil de pilotage et un vecteur d’amélioration de l’innovation. Les auteurs distinguent ainsi quatre phases ou stades d’innovation (expérimentation, modèle économique, changement d’échelle, généralisation) auxquels correspondent des méthodes d’évaluation particulières (Figure 2 ci-dessous : Adapter sa méthode d’évaluation d’impact social au cycle de l’innovation. Extrait de How do we know when social innovation works ? A review and contingency model of social impact assessment, in Handbook of Inclusive Innovation, 2019).

Aucun texte alternatif pour cette image
Figure 2 : Adapter sa méthode  d’évaluation d’impact social au cycle de l’innovation. Extrait de How do we know when social innovation works ? A review and contingency model of social impact assessment, in Handbook of Inclusive Innovation, 2019

Ainsi, dans la phase dite “d’expérimentation” du projet évalué, il s’agit de tester l’innovation pour répondre à une problématique sociale. A ce premier stade, la définition d’une théorie du changement constitue un levier puissant pour améliorer l’innovation sociale. Selon Bruno de Reviers, dans Repères sur la Théorie du Changement, “susciter l’innovation serait même le potentiel le plus remarquable de la Théorie du Changement”.

Ensuite, dans la phase dite “du modèle économique”, il s’agit de prouver le potentiel de l’innovation en quantifiant et potentiellement en monétisant ses impacts. C’est par exemple ce qu’a fait l’hôpital du Bon Secours à Baltimore aux Etats-Unis avec une étude SROI publiée en mars 2021 portant sur un programme de logement social visant à agir sur les déterminants sociaux et environnementaux affectant la santé des bénéficiaires. L’étude démontre ainsi que pour 1$ investi dans le programme, entre 1,3 $ et 1,92 $ de valeur sociale sont générés pour la communauté.

Dans la phase dite “de changement d’échelle”, il s’agit de déployer l’innovation à plus large échelle. Ici peuvent être sollicitées des méthodes expérimentales comme les essais contrôlés randomisés. C’est par exemple ce qu’a fait Innovation for Poverty Action en réalisant l’évaluation randomisée d’un programme d’accompagnement de jeunes par le sport au Libéria.

Enfin, la phase de généralisation vise à institutionnaliser l’innovation. Dans cette phase de maturité, il s’agit de développer des démarches d’évaluation d’impact social visant l’amélioration continue. C’est ce qu’a mis en place Voisin Malin en embauchant une personne en partie sur l’évaluation d’impact social et en poursuivant des travaux avec différents chercheurs.

Cependant, l’innovation sociale ne peut pas toujours s’inscrire dans ce processus long de maturation. Face à la nécessité de formuler des réponses rapides à des problématiques sociales urgentes (dans le cadre de la pandémie actuelle par exemple), la temporalité longue de l’évaluation d’impact social peut être un frein. Pour y remédier, Patricia Rogers, CEO de BetterEvaluation développe l’idée de Real Time Evaluation (RTE), qui repose sur l’idée de collectes de données régulières, en temps réel, de reporting rapide, de boucles d’apprentissages et d’échanges réguliers avec les utilisateurs et autres parties prenantes de la solution évaluée. Cette méthode d’évaluation en temps réel doit ainsi permettre des ajustements plus rapides dans le processus d’innovation.

Partager largement et de manière transparente les approches, résultats et enseignements issus d’évaluations d’impact social permet de diffuser, d’inspirer et de développer l’innovation sociale chez d’autres acteurs

Plus encore que valoriser ou améliorer l’innovation sociale existante, le partage large, au-delà de l’interne, des résultats de évaluation d’impact social constitue un moyen d’amplifier celle-ci, d’inspirer d’autres acteurs et de développer de nouvelles approches dans une logique de recherche & développement social.

L’évaluation d’impact social, telle qu’elle est mise en oeuvre au sein du JPal, de l’International Initiative for Impact Évaluation, ou de l’Innovation for Poverty Action, se fixe ainsi pour finalité l’amplification de l’impact par une approche documentée et fondée sur des preuves (evidence-based) qui doit permettre la diffusion des innovations sociales éprouvées à large échelle en orientant les politiques publiques.

La récente création de l’Impact Tank, Think tank français porté par le Groupe SOS, illustre aussi l’ambition de se servir d’évaluations d’impact social existantes pour identifier des innovations sociales prometteuses et favoriser leur passage à l’échelle. Il s’agit, de manière pragmatique, de valoriser les initiatives qui marchent dans une logique de maximisation de l’impact, en compilant des rapports d’évaluations d’impact social, sur un modèle similaire à l’initiative Whatworks Network au Royaume Uni.

L’Avise développe quant à elle un Centre de Ressources sur l’Évaluation d’impact social afin de favoriser l’appropriation du sujet par les acteurs de l’ESS, mettant notamment à disposition de nombreux rapports mais aussi des études de cas d’évaluations d’impact social réalisés, qui mettent en exergue les acteurs, les méthodes et les résultats des innovations sociales évaluées. Les autres acteurs de l’ESS qui viennent consulter ces publications peuvent ainsi y trouver des sources d’inspiration pour leurs propres actions.

Enfin, l’ESSEC développe des programmes de recherche-action sur l’évaluation d’impact social et déploie des référentiels sectoriels comme celui développé sur les mobilités pour la Fondation Macif.

LES AUTRES ACTUALITÉS, ARTICLES ET OUTILS À SAISIR

Avril 2021

Evénements

En France

A l’international

 Rapports d’impact

 En France

 Travaux d’évaluation d’impact social en cours

Appels à manifestation d’intérêt, appels d’offre, appels à contribution et concours

Autres publications

 Articles dédiés à l’évaluation d’impact social

En France

 A l’international

Ressources méthodologiques et outils

 Newsletters

 Retrouvez tous les mois notre veille internationale sur l’évaluation d’impact social sur la page LinkedIn du Labo. Des questions? Des propositions de contributions ou des solutions pour l’évaluation d’impact social ? Contactez-nous via louis.raynauddelage@essec.edu ou  leclerc@essec.edu

Note de Veille rédigée sous la direction de Thierry Sibieude par Elise Leclerc et Louis Raynaud de Lage, avec les contributions de Clara Cohade et Léo Police.

Laisser un commentaire