Évaluation des Chantiers d’Insertion Présentation de la démarche Octobre 2008

1. Évaluation des Chantiers d’InsertionPrésentation de la démarcheOctobre 2008 Direction de l’Insertion, Cellule Evaluation et démarche Qualité

2. Pourquoi évaluer?Motifs et utilisation de l’évaluation • Mesurer les impacts de la participation financière du Département, du FSE et de l’État sur les actions chantiers d’insertion sur le territoire et sur l’insertion des salariés en chantiers d’insertion. • Apporter des connaissances sur le fonctionnement, les impacts et les effets des actions chantiers d’insertion au regard des objectifs affirmés. • Accroître la visibilité de la DI, de la DDTEFP et des têtes de réseaux sur les actions chantiers d’insertion afin de pouvoir être en mesure de mieux répondre aux besoins des publics bénéficiaires du RMI et d’aider à la prise de décision pour proposer des améliorations plus adaptées et de meilleure qualité. • Encourager l’enrichissement professionnel que représente la mise en oeuvre de cette démarche évaluative. Direction de l’Insertion, Cellule Evaluation et démarche Qualité

3. Le champ de l’évaluation • Le champ: les actions chantiers d’insertion co-financées par le Département et par l’État de l’année 2008. • Comment? Prise en compte des différentes dimensions de ces actions, afin de ne pas tout résumer à une évaluation de « résultats » déconnectées des conditions de leur production et de leur mise en œuvre. Ces dimensions sont interactives, et la faiblesse de l’une peut expliquer des difficultés dans le processus d’accompagnement, dans l’atteinte de certains objectifs, etc. • Dimension d’accompagnement des chantiers, • Dimension développement local, • Dimension partenariale, • Dimension organisation interne des associations porteuses de chantiers d’insertion. Direction de l’Insertion, Cellule Evaluation et démarche Qualité

4. Les conditions de réussite d’une évaluation • L’évaluation est pluraliste et partenariale : l’évaluation doit veiller à ce que les différents points de vue des acteurs soient pris en compte. Cette association permet de mesurer la nature et l’intensité du partenariat, et favorise également le partage d’informations. • L’évaluation est participative et apprenante : l’évaluation doit avoir le souci d’associer l’ensemble de la chaîne des acteurs concernés. • L’évaluation est transparente, notamment au regard de la méthode. L’évaluation affiche le protocole de travail retenu, ainsi que les modalités de diffusion des travaux. Direction de l’Insertion, Cellule Evaluation et démarche Qualité

5. Dispositif d’organisation de l’évaluation COMITÉ DE PILOTAGE de l’évaluation Décide et participe COMITE TECHNIQUE d’évaluation S’implique (Concertation, expertise, échange…) Cellule Technique Réalise Le suivi et la mise en œuvre de l’évaluation Sociogramme: les acteurs du dispositif Chantiers Autres publics Direction de l’Insertion, Cellule Evaluation et démarche Qualité

6. La composition des diverses instances • Comité de pilotage: DDTEFP, Région, CHANTIER école Haute-Normandie, Coorace Haute Normandie, FNARS, URIOPSS, UTAS, la direction de l’insertion du Département (service Insertion professionnelle, cellule Évaluation et démarche Qualité), cellule Évaluation des politiques publiques du Département • Comité technique: DDTEFP, Région, CHANTIER école, Coorace Haute Normandie, FNARS, URIOPSS, ADI, la direction de l’insertion du Département (service Insertion professionnelle, cellule Évaluation et démarche Qualité), cellule Évaluation des politiques publiques du Département • Cellule technique: la cellule Évaluation et démarche Qualité de la Direction de l’Insertion du Département, service Insertion professionnelle de la Direction de l’Insertion du Département Direction de l’Insertion, Cellule Evaluation et démarche Qualité

7. Phase I: La construction du référentiel • Quatre réunions de travail avec le comité technique (entre mars et octobre 2007) • Objectifs : • Décrire la logique d’intervention des chantiers d’insertion et préciser les acteurs impliqués • Définir le référentiel de l’évaluation • Choix des indicateurs et d’un système d’évaluation • Validation du plan de travail, des échéances et de la méthodologie • Rendus • Le protocole d’évaluation • Les questions évaluatives et les indicateurs • Le bilan annuel retravaillé et informatisé • Un questionnaire spécifique pour l’évaluation et à destination des Chantiers Direction de l’Insertion, Cellule Evaluation et démarche Qualité

8. Les questions évaluatives Direction de l’Insertion, Cellule Evaluation et démarche Qualité

9. Phase II: la collecte et l’analyse des données • Collecte des données quantitatives : • Bilan annuel : Échéance - 31 mars 2009 • Test du questionnaire évaluation (vers décembre) et envoi du document vers février 2009. Date de réception : fin mars 2009 Les agents de développement de l’insertion (ADI-Département) seront en assistance sur le remplissage du bilan annuel, ainsi que sur le document spécifique évaluation. • Collecte des données qualitatives : • Certaines données qualitatives seront collectées dans les documents envoyés aux associations. Elles seront complétées par des entretiens qualitatifs de groupe auprès des structures porteuses des chantiers d’insertion. • Enquête auprès des salariés en insertion: il s’agira de recueillir des informations qualitatives sur les parcours, et sur l’apport de leur passage en Chantier dans leur insertion  • Analyse partagée des données collectées et production d’un rapport intermédiaire Direction de l’Insertion, Cellule Evaluation et démarche Qualité

10. Phase III: Conclusions et recommandations • Objectif : • Répondre aux questions évaluatives • Formuler des conclusions • Formuler des recommandations • Mettre en évidence les facteurs de réussite et les facteurs de blocage des actions des chantiers d’insertion par l’apport de l’évaluation • Déroulement : • Restitution et mise en débat des résultats et production des conclusions au sein du comité technique d’évaluation • Restitution et mise en débat des conclusions et production des recommandations au comité de pilotage • Rédaction du rapport final • Communication large • Rendus : • Le rapport final • La synthèse Direction de l’Insertion, Cellule Evaluation et démarche Qualité

11. Les prochaines étapes de l’évaluation • Comité technique en Novembre/Décembre autour de l’enquête des bénéficiaires • Comité de pilotage en Décembre/Janvier • Collecte des données entre février et avril 2009 • Analyse des données entre avril et septembre 2009 • Conclusions et recommandations en septembre et octobre 2009 • Diffusion des résultats de l’évaluation en novembre 2009 Direction de l’Insertion, Cellule Evaluation et démarche Qualité

12. Synthèse de la méthode et du déroulement Direction de l’Insertion, Cellule Evaluation et démarche Qualité