LYON - Siège PARIS

Adresse : 13 bis place Jules Ferry
69006 Lyon - France
E-mail : lyon@eureval.fr
Tél : 33 (0)4 72 83 78 80
Fax : 33 (0)4 72 83 78 81

Adresse : 9 rue du Château d’eau
75010 Paris - France
E-mail : paris@eureval.fr
Tél : 33 (0)4 72 83 78 80
Fax : 33 (0)4 72 83 78 81
Boite à outils
Rédiger des questions d’évaluation

Question permettant de focaliser l’évaluation d’une intervention publique sur les aspects les plus utiles pour ces futurs utilisateurs.

Que sont les questions d’évaluation ?
Les questions d’évaluation guident la démarche d’évaluation en désignant des interrogations prioritaires.
Le choix des questions et leur mode de rédaction doivent être impartiaux et inclure dans la mesure du possible, l’ensemble des points de vue légitimes.
La faisabilité des questions évaluatives est un point important qui permet notamment une réponse robuste et précise.
Les questions résultent généralement d’une étude approfondie :

  • de la logique d’intervention,
  • des besoins qui ont justifié la décision d’évaluer,
  • des réflexions des membres du groupe de pilotage ou des parties prenantes.

La plupart du temps, les questions qui viennent spontanément relèvent de l’efficacité, par exemple : «  Dans quelle mesure l’intervention a-t-elle contribué à générer l’effet X attendu ? ».
Cependant, une question standard d’efficacité peut être spécifiée en changeant de critère, par exemple : « Lorsque l’intervention vise à obtenir l’effet X, dans quelle mesure cela correspond-il aux besoins de la population concernée ? » pour un critère relatif à la pertinence. Ou encore : « Lorsque l’intervention vise à obtenir l’effet X, dans quelle mesure cela est-il compatible ou contradictoire avec les objectifs des autres politiques publiques ? » pour un critère relatif à la cohérence.

Les meilleures questions ont trois dimensions

1. Une dimension cognitive : la question permet d’apporter des connaissances.
Que s’est-il passé ? Quelle a été notre contribution ?

2. Une dimension normative : la question permet de porter un jugement.
Est-ce que c’était suffisant ? … utile ? … équitable ?

3. Une dimension instrumentale : la question permet d’améliorer l’intervention évaluée.
Où et quand avons-nous le mieux réussi ? pourquoi ?

 

Choisir et formuler les questions en 4 étapes

Etape 1
  • Établir une liste provisoire de questions sur la base de la logique de l’intervention, de sa raison d’être et des sujets signalés par les parties prenantes
Etape 2
  • Estimer comment la réponse va être utilisée et par qui
  • Vérifier que la réponse arrivera à temps pour être utilisée
  • Vérifier que la réponse n’est pas déjà connue
Etape 3
  • S’assurer que la réponse apportée à la question sera robuste en consultant le service gestionnaire de l’intervention, un expert du domaine, un professionnel de l’évaluation, ...
Etape 4
  • Discuter du choix des questions, de préférence lors de la préparation du cahier des charges, ou à défaut lors de la réunion de démarrage
  • Associer les parties prenantes au choix des questions ou les consulter
  • Utiliser un outil d’animation tel que Métaplan pour structurer la discussion et aboutir à des formulations consensuelles.

Exemple d’expériences d’Euréval

Assistance à l’évaluation des Programmes Régionaux d’Accès à la Prévention et aux Soins (PRAPS)Le Ministère de la Santé a souhaité disposer de cahiers des charges permettant d’optimiser la qualité des offres reçues et des rapports d’évaluation produits.
Les prestations comprenaient une assistance tout au long du processus évaluatif (2 mois) pour élaborer les mandats de deux évaluations et leurs cahiers des charges ; pour faire une analyse de la qualité des offres ; et pour apprécier la qualité des rapports d’évaluation.
Point fort de la mission : la rigueur du dispositif mis en place a permis le lancement de plusieurs évaluations en parallèle par des chargés d’évaluation débutants.

Assistance à l’évaluation du programme de rénovation urbaine La Ville de Perpignan a décidée de construire un cahier des charges de façon concertée et rigoureuse afin de lancer une évaluation crédible et utilisable par de nombreux partenaires.
Les prestations comprenaient notamment l’organisation d’une journée de sensibilisation à l’évaluation, l’animation d’ateliers de co-construction des questions évaluatives, la déclinaison des questions en critères et indicateurs et la vérification de la faisabilité des questions choisies.
Point fort de la mission  : l’assistance fournie a permis de réunir 15 partenaires de la Ville et des les faire participer à la formulation des questions.

Téléchargez cette fiche en PDF

Source : http://www.eureval.fr