Définir le résultat avant d’évaluer la mesure
Une politique peut viser l’accès à l’emploi, la stabilité des parcours, la qualité des postes ou la réduction d’une inégalité. Le nombre de bénéficiaires mesure la portée du dispositif, pas automatiquement son efficacité. Il faut préciser l’objectif et l’horizon d’observation.
Pour évaluer un effet, demandez ce qui se serait passé sans la mesure. Comparer participants et non-participants sans tenir compte de leurs différences peut produire une conclusion biaisée. Regardez aussi les effets de substitution et le maintien en emploi après la fin d’une aide. Une amélioration générale du marché peut coïncider avec le programme sans être entièrement causée par lui.
Si la mesure pour l’emploi est encore au stade de la promesse électorale, la grille pour lire une proposition de programme politique aide à identifier le financement annoncé, le calendrier et l’autorité chargée de sa mise en œuvre.
Distinguer portée, résultat observé et effet attribuable
| Indicateur | Ce qu’il dit | Ce qu’il ne prouve pas seul |
|---|---|---|
| Nombre d’entrées | Combien de participations ont été enregistrées | Combien d’emplois ont été créés grâce au programme |
| Situation après le programme | Ce que deviennent les personnes observées | Ce qui serait arrivé sans l’aide |
| Comparaison avec une situation sans programme | Un effet estimé sous une méthode et des hypothèses | Un résultat valable pour tout public et toute période |
Vérifiez si l’unité est une personne, une entrée ou un contrat : une même personne peut être comptée plusieurs fois selon le bilan.
Pourquoi une amélioration avant/après peut tromper
Exemple fictif. Dans un groupe participant, la part en emploi passe de 40 % à 60 %, soit +20 points. Dans un groupe de comparaison, elle passe de 45 % à 60 %, soit +15 points. La différence des variations est de 5 points. Ce calcul pédagogique n’établit un effet causal que si les conditions de comparaison sont justifiées, notamment l’évolution qui aurait eu lieu sans le programme.
Examinez aussi les sorties du suivi, la qualité de l’emploi et la durée d’observation. Une mesure peut produire un résultat à court terme sans stabiliser le parcours. Un coût par participant n’est pas un coût par emploi supplémentaire attribuable au dispositif.
Limites et erreurs à éviter
Avant/après ne suffit pas à prouver l’efficacité d’une mesure.