CIRESE - cabinet d’ingénierie sociale membre du réseau

1. cirese@wanadoo.fr

2. CIRESE - cabinet d’ingénierie socialemembre du réseau • Deux équipes opérationnelles :PARISet TOULOUSE • un domaine de compétence: les QUESTIONS DE SOCIETE • (éducation, justice, insertion, culture, • emploi, politiques de la ville, etc ...) • trois métiers :EVALUATION des POLITIQUES PUBLIQUES • INGENIERIE de PROJETS • DEVELOPPEMENT SOCIAL des TERRITOIRES cirese@wanadoo.fr

3. www.sfe.asso.fr cirese@wanadoo.fr

4. - 1 -de l’outil à l’usageA QUOI SERT L’EVALUATION ? cirese@wanadoo.fr

5. UNE EVALUATION ce n’est pas ... • un AUDIT de conformité ou d’organisation • un CONTRÔLE de légalité • un rapport d’ACTIVITE • un BILAN financier • c’est … cirese@wanadoo.fr

6. QUOI EVALUER ?les SIX REGISTRES D’EVALUATION • la cohérence • la pertinence • l’efficacité • la faisabilité • l’efficience • l’attractivité cirese@wanadoo.fr

7. L ’ARTICULATION des REGISTRES D’EVALUATION cohérence diagnostic les divers acteurs objectifs attractivité budget pertinence PROJET institutionnel impacts résultats + effets efficience efficacité + faisabilité cirese@wanadoo.fr

8. UNE EVALUATION PEUT SERVIR à de multiple choses ... • à CONTRÔLER le bon usage des fond publics • à MESURER l’efficacité des actions • à APPRECIER l’IMPACT du centre social • à AMELIORER son fonctionnement • à DONNER du SENS (= relier les actions aux orientations politiques du projet ) • à PRODUIRE du CHANGEMENT SOCIAL • à MOBILISER les acteurs (participation , responsabilisation..) • à MIEUX COMMUNIQUER sur ce qu’on fait cirese@wanadoo.fr

9. Des méthodes différentes suivant les finalités • CONTRÔLER • MESURERl’efficacité • AMELIORER le fonctionnement • APPRECIER l’IMPACT • DONNER du SENS • PRODUIRE du CHANGEMENT • MOBILISER les acteurs • MIEUX COMMUNIQUER • AUDIT • référentiel QUALITE • démarche QUALITE • ENQUÊTE, DEBAT • PAROLE, DEBAT • IMPLICATION COLLECTIVE • PARTICIPATION+PROJET • ce qui se conçoit bien, s’énonce clairement cirese@wanadoo.fr

10. CE REFERENTIEL d’EVALUATION peut servir à : • définir les principes structurantLE PROJET d’un Centre Social • évaluer la réalisation des objectifs affichés dans un contrat de projet • identifier les principales conditions de succès • évaluer un des aspects d’un centre social (projet, organisation, impacts, rapport au territoire, ... • …… c’est un OUTIL à utiliser à la carte cirese@wanadoo.fr

11. L’ EVALUATION d’EFFICACITEentre QUALITE etPROJET Cohérence du résultat visé avec les valeurs associatives ou politiques Résultats visésRésultats atteints Mesure des écarts analyse des causesde ces écarts traitementdes causes Projet QUALITE Pertinence du résultat visé pour traiter le problème posé Conditions de faisabilité cirese@wanadoo.fr

12. EVALUER un CENTRE SOCIAL :une nécessaire pratique participative • 4 caractéristiques : • un processus dynamique collectif, qui suppose: • l’implication des acteurs • la diversité des positions (opérateur, usager, financeur) • la pluralité des points de vue cirese@wanadoo.fr

13. - 2 -la démarche d’élaboration de ce référentiel d’évaluationCOMMENT et POURQUOI a-t-il été construit ? cirese@wanadoo.fr

14. Les cinq étapes méthodologiques l’outil d’évaluation a été construit en 5 temps: 1. un recensement des outils utilisés par les CAF 2. la mise en place d’un groupe de travail inter-CAF 3. une enquête par questionnaire sur les pratiques d’évaluation des CAF  4. la définition participative des caractéristiques techniques du futur référentiel 5. la finalisation de l’outil par le CIRESE cirese@wanadoo.fr

15. Les attentes : un support méthodologique adapté aux centres sociaux urbains et ruraux Une mise en œuvre simple, lisible et accessible aux partenaires Un outil « à la carte » que les centres sociaux et les CAF s’approprieront localement Les objectifs : Analyser les modalités de mise en oeuvre du projet contractualisé Étudier la pertinence de l’implantation Questionner la participation des habitants Examiner la réalité de l’animation globale Le cahier des charges cirese@wanadoo.fr

16. Le cahier des charges (suite) • Le projet du centre social est construit en réponse à un diagnostic partagé, aussi … • l’outil d’évaluation des projets centres sociaux sera-t-il un outil partagé avec les partenaires du projet. • L’évaluation est un élément de lecture prospective du développement des centres sociaux : c’est un temps de réflexion sur la dynamique d’évolution du projet. cirese@wanadoo.fr

17. Les principes méthodologiques et techniques retenus l’outil d’évaluation proposé doit  pouvoir : • Etre utilisé “ à la carte ” • Prendre systématiquement en compte la dimension “ Projet ” du centre social • Etre d’un usage simple et pratique • Tenir compte de la temporalité du “ Projet ” du centre social  cirese@wanadoo.fr

18. Mobiliser les ressources internes au réseau des Caisses d’allocations familiales travailler le projet de référentiel sur un mode participatif, invitant les CAF à mutualiser leurs travaux et leurs expériences. Résultats … une vingtaine de CAF ont participé aux trois “séminaires” de travail 76 CAF sur 118 ont répondu à la démarche d’enquête (2 questionnaires) 16 CAF ont transmis une documentation ou des outils La méthodologie institutionnelle : la participation active des CAF cirese@wanadoo.fr

19. Quel était l’état des lieux en matière de pratique d’évaluation au sein du réseau des CAF fin 2000 ? (50% du réseau CAF a répondu à cette question) En niveau 1(un outil d’évaluation + une procédure écrite de contractualisation ) 22 CAF En niveau 2 (absence d’outil formalisé d’évaluation mais gestion concertée dans le cadre d’une relation contractuelle) 20 CAF En niveau 3 (pas de pratiques d’évaluation ni de relations contractuelles) 11 CAF La pratique de l’évaluation dans les CAF cirese@wanadoo.fr

20. Pour les CAF Mettre en place un suivi des projets Animer un partenariat Soutenir le diagnostic partagé Négocier des axes clairs de projet Outiller le centre social en indicateurs de résultat Définir une organisation de l’évaluation Pour les Centres sociaux Définir un projet social Avoir une organisation professionnelle Maîtriser la méthodologie de développement social Développer la négociation Former les bénévoles Les rôles et les tâches préparant l’évaluation du projet cirese@wanadoo.fr

21. la finalisation de l’outil par le CIRESE 1. Un guide méthodologique d’usage facile 2. Proposant plusieurs portes d’entrées, à la carte 3. Permettant une pratique participative de l ’évaluation cirese@wanadoo.fr

22. - 3 -LES QUESTIONS DE FOND derrière l’outil :les caractéristiques du référentiel d’évaluation cirese@wanadoo.fr

23. Un référentiel à utiliser “à la carte” 5 “portes d’entrées thématiques”possibles : • le projet du centre social • le territoire • les ressources internes • les partenaires • les impacts constatés cirese@wanadoo.fr

24. La gestion des ressources internes + Le projet du centre social La prise en compte Du territoire Le service rendu L’impact social = + La mobilisation des ressources externes + Les 5 entrées thématiques cirese@wanadoo.fr

25. pour chaque porte d’entrée = divers registres d’évaluation • la cohérencedu projet avec les textes et les valeurs • la pertinencedu projet par rapport au diagnostic • la faisabilitétechnique et financière du projet • l’attractivité du projet pour ses divers partenaires • l’efficacité et l’impactdu centre social cirese@wanadoo.fr

26. cirese@wanadoo.fr 11

27. Fiche 1 Repères et doctrine .Enjeux stratégiques de cette entrée thématique .Eléments de Doctrine .Textes de référence Fiche 2 POURQUOI  et COMMENT EVALUER ? Questions évaluatives et démarches d’évaluation .Que peut-on évaluer  concernant cette thématique ? .Comment et avec qui  organiser l’évaluation ? Fiche 3 QUOI  EVALUER ? Critères et indicateurs d’évaluation Quels sont les critères et indicateurs pertinents à retenir  ? Fiche 4 SUGGESTIONS Outils et fiches pratiques  conseils et suggestions méthodologiques aux CAF et aux Centres Sociaux Quatre fiches techniques pour chacune des 5 entrées retenues cirese@wanadoo.fr

28. cirese@wanadoo.fr

29. 1. L’évaluation du “ Projet ” = porte d’entrée incontournable le « projet » du centre social = ses missions, ses options, ses valeurs le Projet du centre social . Orientations stratégiques . Objectifs opérationnels . Modalités d’élaboration cirese@wanadoo.fr

30. 4 fiches techniques cirese@wanadoo.fr

31. FICHE 2 a • Enjeux de l’évaluation du Projet • Enjeux spécifiques à chaque partenaire : • A quoi doit servir et sur quoi doit porter • cette évaluation du Projet du Centre social ? • selon la CAF • ….. • ….. • selon le Centre social • ….. • ….. • selon d’autres partenaires  • ….. • ….. • Enjeux partagés par l’ensemble des partenaires : • Sur quoi sommes-nous d’accord • concernant les enjeux de cette évaluation du centre social ? • ….. • ….. • …… cirese@wanadoo.fr

32. FICHE 2 b La démarche d’évaluation • Comment organiser l’évaluation du PROJET ? • Remarque préalable : • pour pouvoir sérieusement évaluer la cohérence du Projet d’un centre social, il est préférable d’avoir contribué à son élaboration collective • Repères méthodologiques : • L’évaluation du Projet d’un centre social ne peut être que participative, c’est à dire en COHERENCE avec sa mission centrale de développement social et son principe de participation des habitants. cirese@wanadoo.fr

33. FICHE 2 c La démarche d’évaluation Qui fait quoi ? Même si la démarche d’évaluation est initiée par la CAF, il conviendrait que celle-ci se rapproche du bureau du centre social (ou du comité de gestion selon les cas) et des autres institutions finançant le centre social ; ceci afin de décider ensemble du principe et des modalités de l’évaluation. cirese@wanadoo.fr

34. FICHE 3 a - QUOI  EVALUER ? • critère d’évaluation n°1 : • la cohérence politique du projet • Les orientations du “ Projet Centre Social ” sont-elles enCOHERENCE avec les politiques publiques  de la CAF et de ses partenaires ? à savoir : • les priorités du schéma d’Action Sociale de la CAF • … • …(préciser ici ces priorités) • les conventions thématiques et territoriales du Contrat de Ville • … • … (préciser ici ces priorités) • éventuellement : • la politique d’insertion du PDI (RMI) et la lutte contre l’exclusion • … • … (préciser ici ces priorités) • les priorités du FASILD , d’autres financeurs, … • ….. • …… cirese@wanadoo.fr

35. FICHE 3 a - QUOI  EVALUER ? • critère d’évaluation n°2 : • Le contenu du “ Projet Centre Social ” est-il en CONFORMITE avec : • … les 4 missions des centres sociaux : • Le projet s’inscrit dans une approche globale • Il s’agit d’un équipement à vocation familiale et pluri-générationnelle • C’est un lieu d’animation sociale qui soutient les initiatives des habitants et la vie associative locale • Le projet contribue au développement du partenariat et de la concertation entre acteurs du développement social local • … la participation des habitants • La participation est constitutive du projet de centre social • Elle garantit la représentativité des divers groupes sociaux • Le centre social promeut une diversité de formes de participation tenant compte de la diversité culturelle et sociale des habitants • Le projet promet la méthodologie des actions collectives • … le contrat de projet • Son élaboration est participative • Sa formalisation est occasion de concertation partenariale • Il est clair et lisible par tous les acteurs concernés • Il est utilisé comme vecteur de communication cirese@wanadoo.fr

36. porte d’entrée n°2le territoire d’implantation et d’intervention du centre 1. Le diagnostic territorial partagé 2. L’inscription territoriale du centre 3. La pratique dynamique du territoire cirese@wanadoo.fr

37. 4 fiches techniques • Fiche 1 - Repères et doctrine - Eléments de doctrine • Les principes et enjeux du développement social des territoires • L’adaptation du projet du centre social à la réalité du territoire • L’inscription du centre social dans les politiques de développement de son territoire • Fiche 2 - Questions évaluatives : • Que peut-on évaluer ? Comment ? • Le projet du centre social est-il pertinent ? Reflète-t-il les besoins et les problématiques sociales du territoire ? • Comment et avec qui évaluer l’inscription territoriale du centre social ? • Comment et avec qui évaluer la pertinence et la qualité d’un diagnostic territorial ? • Fiche 3 – Quoi évaluer ? Critères et indicateurs d’évaluation • L’inscription et l’implantation territoriale du centre : est-elle pertinente, suffisante ? • La qualité du diagnostic territorial : comment a-t-il été réalisé ? avec qui ? à partir de quoi ? • Quels sont les indicateurs retenus pour cette évaluation de pertinence et de qualité ? • Fiche 4 – Outils et fiches pratiques • Comment optimiser une démarche de diagnostic social territorial ? • En quoi l’organisation territoriale de la CAF peut-elle faciliter ou non le diagnostic territorial et l’évaluation de la pertinence de ce diagnostic ? cirese@wanadoo.fr

38. FICHE 2 b - La démarche d’évaluation Comment et avec qui évaluer ? 1- le diagnostic territorial 2- le rapport du centre social avec son territoire La réponse à cette question dépend en grande partie de la qualité de l’inscription territoriale de chaque partenaire.Pour les CAF qui disposent de conseillers ou référents territoriaux, on peut penser que ces cadres seront des vecteurs importants du diagnostic territorial et de son évaluation. Ils peuvent en garantir la pertinence et la qualité. Du côté des centres sociaux, il serait intéressant d’associer à cette évaluation, non seulement les acteurs locaux du centre social (habitants, bureau, salariés) mais aussi des acteurs du réseau (délégué fédéral, autres directeurs) qui ont une vision plus globale du territoire et de ses rapports avec les divers environnements institutionnels Du côté des autres partenaires, il serait intéressant d’associer leurs représentants territoriaux (élus locaux, responsables d’unités territoriales ou de dispositifs intercommunaux, etc..) cirese@wanadoo.fr

39. FICHE 3 a - Evaluer le diagnostic territorial • critère d’évaluation n°1 : • la qualité du diagnostic • Le diagnostic a été établi à partir de données fiables et actualisées • Les sources utilisées sont multiples et le plus complètes possible • Le diagnostic est partagé et a été validé par tous les partenaires locaux • Le travail de diagnostic a associé les habitants du territoire • Le diagnostic prend en compte le vécu et le débat entre acteurs du territoire autant que les données statistiques • critère d’évaluation n°2 : • la pertinence du diagnostic • Le diagnostic est complet et rend compte de toutes les caractéristiques du territoire • le diagnostic prend en compte non seulement les besoins ou les problèmes sociaux, mais aussi les ressources du territoire • le diagnostic intègre les réponses déjà apportées par d’autres opérateurs sociaux sur le territoire cirese@wanadoo.fr

40. FICHE 3 b - Evaluer l’inscription territoriale • critère d’évaluation n°1 : • la qualité de l’inscription territoriale • Le centre social est inscrit dans le réseau des acteurs du territoire • Les objectifs du projet du centre social tiennent compte des projets de développement social du territoire (DSU , Charte de Pays, etc..) • L’échelle de territoire prise comme zone de référence est assez étendue pour éviter les risques de stigmatisation sociale que fait courir un territoire trop restreint • Le projet de centre social apporte une réelle plus-value au regard des ressources territoriales existantes • Le centre social intervient simultanément à plusieurs niveaux d’échelles territoriales (quartier, ville, agglomération, pays,..) • critère d’évaluation n°2 : • la pertinence de l’implantation • L’implantation géographique du centre garantit son accessibilité tout en évitant la ségrégation • L’implantation du centre social facilite sa mise en synergie avec d’autres équipements ou services du territoire • Le territoire d’influence et d’intervention du centre déborde des limites étroites de son territoire d’implantation cirese@wanadoo.fr

41. porte d’entrée n°3les ressources internes du centre social • LA GESTION • des compétences • des modalités de participation • des moyens humains • des moyens logistiques • des méthodes de travail • du budget cirese@wanadoo.fr

42. 3 la gestion des RESSSOURCES INTERNES du centre social 4 fiches techniques • Fiche 1 - Repères et doctrine - Eléments de doctrine • La mission d’animation globale donne du sens à la gestion des ressources internes • L’importance de la qualification des responsables et du personnel • La nécessaire stabilisation du budget d’animation globale • Fiche 2 - Questions évaluatives : • Que peut-on évaluer ? Comment ? • Les conditions à réunir pour réaliser la mission d’animation globale • Fiche 3 – Quoi évaluer ? Critères et indicateurs d’évaluation concernant : • La gestion des ressources humaines et des qualifications (bénévoles et salariées) • Les modalités de management du projet (méthodes et outils adaptés ) • L’origine et la pérennité du budget affecté à l’animation globale • Les moyens matériels et logistiques disponibles • Les modalités de participation des habitants et l’organisation de la prise de responsabilité bénévole • Fiche 4 – Outils et fiches pratiques • Fiche descriptive des emplois salariés • Ventilation budgétaire de l’activité évaluation de … FAISABILITE du Projet en fonction de cadre de référence évaluatif 1 = l’organisation optima critères qualité garantissant une organisation optima 2 = les enjeux et intérêts des différents acteurs concernés cirese@wanadoo.fr

43. 3 • FICHE 2 b - • Questions évaluatives à examiner • Concernant la FAISABILITE INTERNE du Projet • Celle-ci dépend de plusieurs facteurs combinés ; il s’agira donc d’évaluer : • les moyens humains (bénévoles et salariés) mobilisables • la gestion des compétences professionnelles et bénévoles • les modalités de participation des habitants • le budget (suffisant et pérenne, garantissant l’animation globale) • les moyens logistiques disponibles • les méthodes d’organisation et de management • la transversalité et la complémentarité des activités proposées la gestion des RESSSOURCES INTERNES du centre social évaluation de … FAISABILITE du Projet en fonction de cadre de référence évaluatif 1 = l’organisation optima critères qualité garantissant une organisation optima 2 = les enjeux et intérêts des différents acteurs concernés cirese@wanadoo.fr

44. 3 • FICHE 3 a - critères et indicateurs : • concernant la gestion des ressources humaines • Il existe un organigramme fonctionnel et un organigramme pour les interventions qui précisent les rôles et responsabilités de chacun (bénévoles et salariés) • concernant les salariés • Il existe des fiches de postes détaillées • Le droit du travail est respecté en matière de contrats de travail • Les sources de financement des postes et le statut des emplois (pérenne, précaire, aidé) sont clairement identifiés et affichés • Le centre social adhère à une convention collective • concernant les bénévoles • Un budget spécifique est réservé à leur suivi et à leur formation continue la gestion des RESSSOURCES INTERNES du centre social évaluation de … FAISABILITE du Projet en fonction de cadre de référence évaluatif 1 = l’organisation optima critères qualité garantissant une organisation optima 2 = les enjeux et intérêts des différents acteurs concernés cirese@wanadoo.fr

45. 3 • FICHE 3 b - critères et indicateurs : • concernant les compétences et la qualification • Il existe un référentiel de compétences bénévoles et salariées • concernant les salariés • Le niveau de qualification du directeur est en conformité avec la circulaire et la nouvelle loi instituant la validation des acquis de l ’expérience • Le recrutement et le profil de ce responsable sont en cohérence avec le projet du centre social et sa fonction d’animation globale • l’encadrement des activités ou des bénévoles est assuré par du personnel d’animation qualifié • l’activité d’accueil est professionnalisée (personnel qualifié et formé) • Il existe un plan de formation • pour le directeur du centre • pour les salariés • concernant les bénévoles • Il existe un plan de formation pour les bénévoles en responsabilité la gestion des RESSSOURCES INTERNES du centre social évaluation de … FAISABILITE du Projet en fonction de cadre de référence évaluatif 1 = l’organisation optima critères qualité garantissant une organisation optima 2 = les enjeux et intérêts des différents acteurs concernés cirese@wanadoo.fr

46. 3 • FICHE 3 d - critères et indicateurs • concernant le budget et la logistique • le budget : • Le budget destiné à l’animation globale est pluri-annuel et garantit le financement des postes de directeur et d’accueil du public • La diversification des financements constitue un gage d’indépendance financière et de solidité • Le budget est cohérent avec les priorités du projet, tant en volume qu’en ventilation budgétaire • la logistique : • les locaux sont fonctionnels, suffisants et bien équipés • les locaux sont régulièrement entretenus dans un souci de bonne gestion et d’hygiène. • les règles de sécurité pour l’accueil du public sont respectées • les locaux sont mis à disposition des habitants et des associations du quartier • le centre social dispose d’un équipement informatique et téléphoniqueadaptés. • le centre social dispose de moyens de transports suffisants (en propre ou mis à disposition) pour la réalisation de ses activités la gestion des RESSSOURCES INTERNES du centre social évaluation de … FAISABILITE du Projet en fonction de cadre de référence évaluatif 1 = l’organisation optima critères qualité garantissant une organisation optima 2 = les enjeux et intérêts des différents acteurs concernés cirese@wanadoo.fr

47. 3 • FICHE 3 e - critères et indicateurs • concernant les modalités de participation • La participation des habitants est inscrite dans les statuts et organisée (commissions de travail, réunions de concertation, etc..) • Des habitants participent aux instances de décision et de gestion du centre social • Des habitants assument des responsabilités d’animation ou de réalisation de certaines activités • Des formations sont organisées pour faciliter l’exercice de cette participation • ….. la gestion des RESSSOURCES INTERNES du centre social évaluation de … FAISABILITE du Projet en fonction de cadre de référence évaluatif 1 = l’organisation optima critères qualité garantissant une organisation optima 2 = les enjeux et intérêts des différents acteurs concernés cirese@wanadoo.fr

48. Diverses DEGRES DE PARTICIPATION cirese@wanadoo.fr

49. DISTINGUER DIVERSES FORMES DE PARTICIPATION • l’information • la consultation • la concertation • la co-production cirese@wanadoo.fr

50. Diverses FORMES DE PARTICIPATION des HABITANTS cirese@wanadoo.fr