Kit d’outils Citizens’ Rail  > Évaluer votre succès  > Comprendre le contexte de l’évaluation

Comprendre le contexte de l’évaluation

Pourquoi évaluer ?
L’évaluation vous permet de mesurer un impact particulier en comparant un objectif prédéfini et l’état actuel. Elle approfondit la compréhension des situations, processus et structures actuels et contribue à leur amélioration future.

Qu’est-ce qu’une évaluation ?
Étant donné le contexte ferroviaire, nous envisageons l’évaluation comme un processus systématique de recueil de données en vue de mesurer le succès d’un projet à atteindre ses objectifs et à répondre à la question, si votre projet change les choses12. Les sujets d’évaluation possibles sont :

Objet de l’évaluation Exemple pour le rail régional
Produit Utiliser un nouveau parc ferroviaire, mettre en place de nouvelles liaisons ou améliorer la fréquence
Service Moderniser le système de billetterie, employer plus de personnel dans les gares
Mesure, action Réaménager la gare avec les citoyens, développer une sensibilisation des citoyens et une stratégie d’engagement
Projet Construire ou améliorer une gare, développer et appliquer un nouveau concept commercial
Participation, gouvernance, organisation Impliquer les citoyens dans leur ligne ou le développement de la gare, mettre en place un forum de discussion avec des intervenants ferroviaires, établir un partenariat ferroviaire communautaire
Programme, stratégie Adopter une stratégie de financement du rail régional, repenser la stratégie des transports en commun
Orientation/politique Faire passer une réglementation de privatisation du rail, modifier les structures de régulation
Technologie, recherche Utiliser les appareils mobiles pour la billetterie et les informations à la clientèle, utiliser des outils de participation en ligne

Objets d’une évaluation
Source : l’équipe du projet Citizens’ Rail, s’appuyant sur “Standards für Evaluation”, DeGEval – Gesellschaft für Evaluation, 2008, p.15

L’évaluation a son propre vocabulaire. Quelquefois le sens des expressions est utilisé différemment, ce qui peut être plus déroutant qu’utile. Clarifiez pour utiliser les termes de manière cohérente pour votre projet. Ce tableau est destiné à vous familiariser avec certains termes importants dans le contexte d’une évaluation.

Comment évaluer ?

Si vous souhaitez évaluer dans un contexte de projets liés au chemin de fer, vous devriez essayer de trouver les réponses aux questions d’orientation suivantes13, qui représentent également certains types d’évaluation :

1. Quoi et pourquoi (pour quelle raison) ?

Cette question est étroitement liée aux sections ci-dessus (les objets d’évaluation). Nous avons également déjà mentionné que l’évaluation fait partie de la démarche du projet ferroviaire dans la section « Projets liés au chemin de fer, participation et évaluation – Comment s’articulent-ils ensemble ? », toutefois, l’évaluation est, en elle-même, effectuée dans un processus de conception. Au début, vous devriez préciser les circonstances générales, par exemple décrire l’objectif spécifique de l’évaluation. Lorsque la mise en œuvre de l’évaluation s’approche, vos questions doivent être plus détaillées, par ex. quels types d’informations peuvent me renseigner sur la participation, quelles données dois-je recueillir pour cela, quelles méthodes appliquer ? Gardez à l’esprit la façon dont vous allez traiter les résultats de votre évaluation. Y aura-t-il des conséquences possibles pour le projet suite à l’évaluation ? Votre processus d’évaluation pourrait ressembler à ceci :

Flux de processus d’une évaluation
Source : l’équipe du projet Citizens’ Rail, s’appuyant sur Nabatchi (2012)

2. Quand et pourquoi (problèmes) ?

En ce qui concerne la question « quand », souvent une distinction est faite entre des approches d’évaluation ex-ante et ex-post (avant et après). Selon le calendrier particulier de votre projet, il est essentiel d’identifier s’il est possible d’évaluer des mesures ou leurs impacts ex-post, une fois qu’elles sont mises en œuvre. Sinon, une approche ex-ante peut être utilisée avant la réalisation complète afin de composer avec l’objectif d’une évaluation qui accompagne. En ce qui concerne la question « pourquoi », le propos de l’évaluation, associée à la question « quand », vous pouvez faire la distinction entre l’évaluation de type formatif et celle de type sommatif. En outre, il y a d’autres types d’évaluation entre les deux.

Types d’évaluation
Source: National Centre for Sustainability NCS & Swinburne University (2011), p. 5 14: 5 (after Owen/ Rogers (1999); Government Social Research (GSR) Unit (2007), p.4f

3. Comment et avec quoi (méthodes, indicateurs et données) ?

Dans la majorité des cas, une évaluation liée au chemin de fer implique un fort accent sur des données quantitatives et exclusivement liées aux transports, comme celles liées aux passagers, aux revenus ou aux coûts. Dans un contexte ferroviaire orienté vers les citoyens, il est enrichissant d’élargir la perspective pour comprendre l’interaction de la société avec le chemin de fer local. Il est donc important de développer une approche de méthodes associées qui intègre également les aspects qualitatifs. Des exemples sont donnés dans les autres parties de la section « Évaluer votre succès » :

</p>
<div style="padding:3px 5px 5px 10px; width:370px;border-width:2px;border-color:#E75F86;border-style:solid">En lire plus sur les méthodes d’évaluation, les indicateurs et les données</div>
<p>

Retour à la page Évaluer votre succès