Caterina Dadà Paris, December 2016 Course of Evaluation des politiques publiques Professor T. Delhais 3rd assignment
Setting the evaluation impact for the project Terre d’Envol Question d’évaluation Est-ce que les outils mis en place dans le axe D7 du projet Terre d’Envol pour la Jeunesse », c’est à dire l’accès à une salle de sport, à une bibliothèque et au dispositif de suivi pour les jeunes détenus, ont contribué à l’insertion des jeunes sous la main de la justice ?
Méthode : Ce qu’on veut comprendre spécifiquement pour répondre à cette question est si l’intervention a contribué à faire la différence attendue et comment. Pour faire ça, on partage l’analyse en deux parties : 1) Est-ce que des changements sont intervenues dans le taux d’insertion des jeunes détenues après 2 ans du début du projet? How : instruments statistiques (randomisation et analyse descriptives des variables) Comparaison avant-après d’un échantillon randomisé de détenues. Une analyse statistique descriptive générale donnera information détaillée sur les caractéristiques liées aux jeunes qui ont obtenu une insertion (âge, années en prison, nationalité, motivations, confiance en soi, utilisation de au moins un des outils du projet,…) 2) Jusqu’à quelle niveau ce changement peut-il être attribués au programme ? How : Matching différence-de-différence, analyse de contribution (théorie du changement, entretiens) Pour comprendre si les outils du programme sont une condition nécessaire et suffisant pour l’insertion théorie du changement incluant les hypothèse sous-jacent à la logique du programme et les facteurs d’influence externe. matching différence-de-différence entre un groupe randomisé d’usager et un groupe de non usagers suffisamment similaire au group des usagers au regard des caractéristiques personnelles indiquées comme potentiels facteurs d’influence dans la théorie de changement (estime personnelle,
network, connaissance, motivation, niveau d’appréciation des outils mis en œuvre,…). De cette façon on réduit l’impact de différences entre les deux groupes. Pour confirmer ou complémenter les résultats, des entretiens approfondis avec les deux échantillons de usagers et non-usagers sont effectuées.
Collection de data : Mélange de data qualitative/quantitative et première/second main : - Data de référence o Quantitative: enquête + registre détenus (âge, années de prison, conduit, expérience professionnelle, nationalité,..) o Qualitative: entretiens/ focus group pour collecter autre info personnelles sur les détenus – motivation, estime personnelle,..- et pour leur proposer de participer activement au projet d’évaluation ; - Data après 2 ans du début du projet : o Quantitative (pour actualiser les coordonnées de référence) o Quantitative: focus group/entretiens pour comprendre au fond la perception des détenues à l’égard du projet et détecter effets non voulus.
Calendrier