Dernière mise à jour:
Aperçu
Ce chapitre présente des informations sur les politiques à la réalisation des évaluations des opérations d'urgence ainsi que des directives générales et des informations sur les évaluations.
Le HCR applique la définition adoptée par le Groupe des Nations Unies pour l'évaluation (UNEG) dans ses Normes et standards pour l'évaluation publiés en 2016.
Le HCR définit donc le mot « évaluation » par une vérification de la manière la plus systématique et la plus impartiale possible d'une stratégie, d'une politique, d'un programme, d'un projet ou d'une activité opérationnelle. Les évaluations se concentrent sur l'incidence ou sur les résultats du travail du HCR, comparent les objectifs de départ aux résultats actuels atteints, examinent le contexte et les causes et enfin, analysent les attentes et les lacunes.
Plus généralement, la fonction d'évaluation du HCR doit répondre aux questions suivantes :
Une évaluation qui répond aux questions précitées de manière réaliste et dans un délai raisonnable, tout en étant fondées sur des preuves et axée sur les résultats, peut assurément avoir une incidence sur la planification, la conception, le budget, la mise en œuvre et les rapports. Les évaluations contribuent à la planification basée sur des preuves, la prise de décision et l'efficacité organisationnelle. Elle renforce également la gestion basée sur les résultats au HCR.
Les évaluations du HCR sont réalisées à deux niveaux :
Les évaluations centralisées sont commandées et gérées par le Service pour les évaluations (ES). Ils se concentrent principalement sur les (a) politiques, les stratégies, les programmes et les thèmes de grande importance dans les entreprises aux niveaux mondial, stratégique et institutionnel ; et (b) sur les opérations d'urgence de niveau 3.
Les évaluations décentralisées sont commandées et gérées par les Divisions, les Bureaux régionaux, les bureaux pays. Ces derniers se concentrent principalement sur les activités, les thèmes, les secteurs, les zones d'opération, les programmes, les projets au niveau régional ou national.
Distinctes mais complémentaires
Une évaluation est distincte, mais complète, d'autres fonctions de surveillances telles que l'audit et l'inspection – qui sont plutôt axés sur la gestion des risques, les objectifs de suivi et de gouvernance, les respect politiques et règlements du HCR ainsi que les risques.
Le suivi et l'évaluation sont souvent liés. Cependant, l'évaluation diffère des suivis (continus) et d'autres formes de d'évaluations.
Les évaluations devraient générés des preuves réalistes qui suffisent à répondre aux questions ayant trait à la mise en œuvre et au processus, ainsi que les questions sur la pertinence et la cohérence des interventions, leur adaptation au contexte, les préoccupations de cause à effet et enfin leur contribution aux résultats.
Le HCR applique la définition adoptée par le Groupe des Nations Unies pour l'évaluation (UNEG) dans ses Normes et standards pour l'évaluation publiés en 2016.
Le HCR définit donc le mot « évaluation » par une vérification de la manière la plus systématique et la plus impartiale possible d'une stratégie, d'une politique, d'un programme, d'un projet ou d'une activité opérationnelle. Les évaluations se concentrent sur l'incidence ou sur les résultats du travail du HCR, comparent les objectifs de départ aux résultats actuels atteints, examinent le contexte et les causes et enfin, analysent les attentes et les lacunes.
Plus généralement, la fonction d'évaluation du HCR doit répondre aux questions suivantes :
- Est-ce que nous faisons ce que nous sommes censés faire ?
- Si oui, est-ce que nous le faisons correctement de sorte que les personnes relevant de la compétence observent également des changements dans leur vie ?
- Nos interventions ont été réussies et comment le savons-nous ?
- Quels sont les résultats de nos interventions ?
- Y aurait-il de meilleurs moyens de parvenir à ces résultats ?
- Dans quelle mesure des résultats peut-on attribuer une intervention particulière à certains résultats ?
Une évaluation qui répond aux questions précitées de manière réaliste et dans un délai raisonnable, tout en étant fondées sur des preuves et axée sur les résultats, peut assurément avoir une incidence sur la planification, la conception, le budget, la mise en œuvre et les rapports. Les évaluations contribuent à la planification basée sur des preuves, la prise de décision et l'efficacité organisationnelle. Elle renforce également la gestion basée sur les résultats au HCR.
Les évaluations du HCR sont réalisées à deux niveaux :
Les évaluations centralisées sont commandées et gérées par le Service pour les évaluations (ES). Ils se concentrent principalement sur les (a) politiques, les stratégies, les programmes et les thèmes de grande importance dans les entreprises aux niveaux mondial, stratégique et institutionnel ; et (b) sur les opérations d'urgence de niveau 3.
Les évaluations décentralisées sont commandées et gérées par les Divisions, les Bureaux régionaux, les bureaux pays. Ces derniers se concentrent principalement sur les activités, les thèmes, les secteurs, les zones d'opération, les programmes, les projets au niveau régional ou national.
Distinctes mais complémentaires
Une évaluation est distincte, mais complète, d'autres fonctions de surveillances telles que l'audit et l'inspection – qui sont plutôt axés sur la gestion des risques, les objectifs de suivi et de gouvernance, les respect politiques et règlements du HCR ainsi que les risques.
Le suivi et l'évaluation sont souvent liés. Cependant, l'évaluation diffère des suivis (continus) et d'autres formes de d'évaluations.
Les évaluations devraient générés des preuves réalistes qui suffisent à répondre aux questions ayant trait à la mise en œuvre et au processus, ainsi que les questions sur la pertinence et la cohérence des interventions, leur adaptation au contexte, les préoccupations de cause à effet et enfin leur contribution aux résultats.
Conseils principaux
Quand et dans quel but?
Quand ?La politique sur la préparation et la réponse à l'urgence (UNHCR HCP 2017-1) stipule que, dans les 18 mois (ou avant si le haut-commissaire en décide ainsi), le Service d'évaluation engage, supervise et achève une évaluation de chaque opération d'urgence de Niveau 3 du HCR. Les évaluations des urgences de Niveau 1 ou 2 peuvent également être engagées conformément à la politique du HCR sur les évaluations.
Note : au bout de trois mois, le ou les bureaux compétents et le DESS mènent une revue en temps réel de chaque opération d'urgence de Niveau 2 et de Niveau 3, au moyen d'une mission ou d'un atelier en commun. Les revues impliquent les principales parties prenantes et évaluent la ponctualité, l'adéquation et l'efficacité de la réponse opérationnelle du HCR. Elles recommandent des ajustements et des corrections de trajectoire qui peuvent être requis. Elles contrôlent également l'application de la politique du HCR sur la préparation et la réponse dans des situations d'urgence.
Pour les urgences humanitaires de Niveau 3 dans l'ensemble du système, une évaluation humanitaire interinstitutionnelle dirigée par le Bureau de la coordination des affaires humanitaires (BCAH) sera réalisée dans l'ensemble du système 9 à 12 mois suivant l'urgence de Niveau 3. Le PDES contribue et participe à la gestion des évaluations humanitaires interinstitutionnelles.
Les Bureaux régionaux ou les bureaux de pays régionaux peuvent également décider d'effectuer la commande d'une évaluation décentralisée d'interventions pour des urgences de niveau 1 ou 2. Dans de tels cas, ces bureaux doit en informer le Service pour les évaluations, qui leur fournira l'expertise, l'appui et les conseils nécessaires ; il passera également en revue les rapports préliminaires pour des fin d'assurance de la qualité.
Dans quel but ?
L'objectif d'ensemble d'une évaluation est de contribuer à l'apprentissage et à l'imputabilité au sein du HCR en démontrant de manière objective la manière dont les résultats ont été atteints ainsi que la manière dont les opérations ont répondu efficacement aux besoins des réfugiés, des personnes apatrides et des autres personnes relevant de la compétence du HCR.
Concrètement, les évaluations analysent les réussites en les comparant aux buts, aux objectifs et aux attentes établis dans les politiques, les opérations et les programmes de pays du HCR.
Résumé des orientations ou options
La politique d'évaluation du HCR est fondée sur des principes clés décrits dans les normes et critères du GNUE et sur un code de conduite associé (http://www.uneval.org/document/guidance-documents, lien en anglais uniquement). (Voir aussi l'Evaluation d'action humanitaire à partir des critères du CAD de l'OCDE au http://www.alnap.org/resource/ 5253). Les quatre principes d'évaluation globaux sont l'indépendance, la crédibilité, la transparence et l'utilité. Ces principes guident les meilleures pratiques pendant la planification, la conception et la prestation et, ensemble, ils offrent un cadre compréhensif à la fonction d'évaluation du HCR.Indépendance. La conception, la mise en œuvre et les constatations et recommandations des évaluations doivent être libres d'influences ou de préférences. L'indépendance est protégée de façon organisationnelle tout en s'assurant que le gestionnaire de l'évaluation n'a aucunement la charge de la conception, la mise en œuvre ou la surveillance des politiques, des programmes ou des opérations évalués. Cela est renforcé en s'assurant que la planification, l'allocation des ressources ou les rapports du travail d'évaluation ne sont pas soumis aux influences qui pourraient mettre en question son objectivité, et en recrutant des consultants ou des cabinets de consultation professionnels et indépendants afin de réaliser les évaluations.
Crédibilité. Afin d'être crédibles, la planification, la conception et la réalisation des évaluations ainsi que leurs constatations et recommandations, doivent être précises, impartiales, transparentes et sans préférences. Les évaluations doivent répondre aux normes professionnelles et être soumises à une surveillance pour assurer la qualité. Les procédures associées à chaque étape d'une évaluation doivent être systématiques et en conformité aux bonnes pratiques internationales. Les outils de soutien et les listes de contrôle doivent être offerts au public et soumis à une mise en revue et vérification périodiques. La qualité et la rigueur des preuves recueillies et la méthodologie adoptée (y compris la triangulation des informations quantitatives et qualitatives) sont aussi essentielles à la crédibilité d'une évaluation.
Transparence. Les évaluations et le cycle d'évaluation doivent être gérés et réalisés d'une façon ouverte et transparente. Les objectifs, la méthodologie et le processus d'une évaluation doivent être discutés avec les intervenants. Ils doivent avoir accès aux informations et être consultés pendant chaque étape du processus (la sélection du type d'évaluation, des attributions, des outils et de la méthodologie, les apports de la direction, la version préliminaire et finale des rapports, les mécanismes de suite).
Utilité. Si les évaluations doivent soutenir l'apprentissage institutionnel, la gestion des connaissances et l'imputabilité, elles doivent être utiles et leurs idées, constatations et recommandations doivent être acceptés et mis en œuvre. Quand les politiques, les opérations et les programmes sont retenus aux fins d'évaluation, il est important de savoir quelles évaluation seront les plus utiles aux décideurs et gestionnaires du HCR ainsi qu'aux parties prenantes externes. Les recommandations doivent elles aussi être conçues dans le même objectif.
Gestion d'une évaluation
Les responsables des évaluations PDES sont des gestionnaires de l'évaluation. Ils rédigent les termes de référence des évaluations, préparent des appels à propositions des consultants indépendants ou des cabinets conseil, passent en revue les soumissions, examinent et choisissent les projets, les méthodes et les dates des évaluations. Ils préparent aussi les comités des entrevues afin de sélectionner les cabinets ou les consultants externes. Dépendant du type d'évaluation et de ses besoins, les gestionnaires de l'évaluation peuvent faire partie des équipes d'évaluation.
L'approche du HCR en matière d'évaluations comprend généralement les étapes décrites ci-après :
1. Préparation
Un gestionnaire de l'évaluation est nommé afin de gérer une évaluation. Il ou elle peut mettre en place un groupe de référence. Il ou elle gestionnaire rédige les termes de référence et sélectionne l'équipe d'évaluation (externe). Il ou elle a aussi la charge de choisir une méthodologie (un ensemble de méthodes et de techniques appropriées pour l'évaluation en question).
2. Etape de bureau
L'équipe d'évaluation indépendante décide de la manière dont les choses se passeront, en se basant sur les documents à sa disposition. L'équipe d'évaluation propose des questions et des critères relatifs à l'évaluation. Les gestionnaires de l'évaluation supervisent le choix et la gestion des consultants externes. Dans la mesure du possible, les équipes d'évaluation doivent être équilibrées du point de vue du genre (équilibrées entre les sexes), être géographiquement diversifiées et comprendre des professionnels de la région ou du pays dans lesquels le programme passé en revue est appliqué.
3. Création
Un rapport initial concis est préparé, basé sur une analyse des pratiques optimales ainsi qu'une analyse préliminaire. Le rapport de création doitdoit :
- Réviser et finaliser les attributions (y compris les questions sur les évaluations provenant de la révision des documents et des entrevues initiales)
- Améliorer une méthodologie, tout en tenant compte des réalités locales.
- Proposer un plan de travail
Au moment de la description de la méthodologie, l'équipe d'évaluation doit indiquer : le nombre d'entretiens qu'elle s'attend à réaliser et leur distribution à l'ensemble des parties prenantes pertinentes (le HCR, l'ONU, le gouvernement, les ONG, les personnes relevant de la compétence du HCR, etc.) ; la façon d'interagir avec les personnes relevant de la compétence du HCR (au moyen de groupes de discussion, d'enquêtes, d'observation de leurs activités, etc.) ; la façon de gérer les horaires (flexibles ou fixes) ; d'autres activités (par exemple, la présence aux réunions de l'Equipe de coordination des Nations Unies).
Le rapport de création est essentiellement un outil permettant à l'équipe d'évaluation, au HCR et aux autres intervenants de se mettre d'accord sur la façon dont les évaluations doivent progresser.
4. Etape du travail sur le terrain. L'équipe d'évaluation met en œuvre son plan de travail et recueille les données.
5. Synthèse. Un rapport final comprend des réponses aux questions posées par l'évaluation ainsi que des conclusions.
Comment mettre cela en œuvre sur le terrain
Lorsqu'une évaluation d'une opération d'urgence est planifiée, le PDES travaillera étroitement avec le bureau régional concerné et informera aussi le représentant de l'évaluation prochaine.Les évaluations requièrent le soutien du représentant et du bureau du pays concerné, à qui on demandera les tâches suivantes de :
- informer toutes les parties concernées à l'avance (le personnel du HCR, les partenaires de l'ONU, le gouvernement, les ONG, les donateurs), présenter l'équipe d'évaluation et lui expliquer qu'on peut demander au personnel et aux partenaires de participer à un entretien ;
- allouer un point focal (personne ressource) relativement au contenu de l'entretien ainsi qu'en matière de soutien logistique et administratif ;
- mettre à la disposition de l'équipe d'évaluation les documents qui enregistrent les principaux développements ainsi que les décisions par rapport à l'opération d'urgence ;
- aider l'équipe d'évaluation à organiser des entrevues avec les intervenants clés (le HCR, les agences de l'ONU, les ONG, le gouvernement, les donateurs et les personnes relevant de la compétence du HCR) ;
Sous réserve des contraintes opérationnelles, on leur demandera aussi de fournir le soutien logistique.
Annexes
Liens
Contacts principaux
Service pour les évaluations, situé au Siège du HCR:[email protected]
Dans cette section:
Faites-nous part de vos commentaires
Aidez-nous à améliorer l’expérience utilisateur de notre nouveau site en nous faisant part de votre opinion…
Faites-nous part de vos commentaires
Aidez-nous à améliorer l’expérience utilisateur de notre nouveau site en nous faisant part de votre opinion…
Aidez-nous à maintenir le manuel à jour
Suggérer une amélioration à cette page