Évaluations à mi-parcours et finales du programme et enquête sur la satisfaction des bénéficiaires Full Time

1. HISTORIQUE DU PROGRAMME

L’initiative MENTOR est présente en RCA depuis 2008. Depuis le tout début de la mission, les activités principales se sont concentrées sur le soutien des services de santé communautaires à grande échelle. Cette approche s’est avérée efficace et pleinement appropriée dans un contexte où les structures standard du système de santé sont pratiquement inexistantes en dehors des grandes villes et où le paludisme, une maladie qui est facilement diagnostiquée et traitée si elle est détectée à temps, est endémique. MENTOR est actuellement opérationnel dans huit sous-préfectures du nord-ouest de la RCA

En 2015, l’Initiative MENTOR, International Medical Corps, Save the Children (abandonné progressivement à Cordaid en 2016) et Oxfam ont conclu un partenariat avec un consortium pour la première phase du programme actuel, avec International Medical Corps comme chef de file du consortium. La phase 1 visait à mettre en œuvre une réponse du programme de santé, de nutrition et WASH touchant environ 432665 personnes dans quatre préfectures de la République centrafricaine (Ouham, Ouham Pendé, Haute-Kotto et Basse-Kotto) et visait à prévenir et à réduire la morbidité excessive et la mortalité de la population affectée par la crise actuelle. Une évaluation finale du programme de la phase 1 a été entreprise et est disponible.

Les 4 OING sont entrées dans la phase 2, avec l’Initiative MENTOR en tant que chef de file, le 1er octobre 2016 pour une période de 2 ans et demi. Oxfam, en tant que partenaire spécialisé dans les activités WASH, a été progressivement abandonné à partir du 1er février 2018. Les programmes de santé, nutrition et WASH ont été mis en œuvre dans les 4 mêmes préfectures dans le but de s’appuyer sur ce qui s’est passé pendant la phase 1 tout en harmonisant les meilleures pratiques et l’élaboration d’outils normalisés de sensibilisation communautaire. Cependant, la situation sécuritaire en RCA est restée extrêmement instable tout au long de la phase 2 avec des crises fréquentes et une détérioration de la sécurité. Les partenaires du consortium ont dû adapter et réviser le programme pour être en mesure de mettre en œuvre les activités d’urgence pertinentes si nécessaire, y compris la centralisation de l’achat de médicaments antipaludiques essentiels pour être en mesure de faire face à d’éventuelles ruptures de stock

Le 1er avril 2019, le Consortium est entré dans une troisième nouvelle phase, d’une durée de quatre ans, jusqu’au 31 mars 2023, avec les trois mêmes partenaires de santé, The MENTOR Initiative, International Medical Corps et Cordaid, et Solidarités International comme nouveau membre spécialisé en charge de la composante WASH du programme. L’objectif du consortium est resté le même. La troisième phase du consortium a également été informée par les conclusions et recommandations de l’évaluation externe menée pendant et à la fin de la phase deux du projet précédent. Au cours de cette phase, le consortium prévoit d’améliorer sa performance en termes d’optimisation des ressources en s’appuyant sur les économies attendues à la suite de l’achat d’immobilisations, telles que de nouveaux véhicules, réduisant considérablement les coûts de location. Le consortium a élargi sa stratégie de santé communautaire par le biais d’agents de santé communautaires à mesure que l’IMC a progressivement adopté cette approche. Cette phase du projet vise également à fournir à toutes les formations sanitaires une infrastructure WASH de qualité et un accès à l’eau potable. Le projet a été conçu avec flexibilité, avec une allocation de réserve financière d’urgence, afin de pouvoir répondre à une crise soudaine dans un contexte opérationnel et sécuritaire instable.

2. ÉVALUATIONS À MI-PARCOURS ET FINALES

2A) BUT ET OBJECTIFS

Le projet prévoit deux évaluations externes au cours de sa durée de vie: une évaluation à mi-parcours immédiate d’ici la fin de l’année 2 du projet (mars 2021) et une évaluation finale à mener vers la fin du projet au début de 2023. L’objectif des deux évaluations est évaluer et tirer des leçons du processus et des réalisations du programme dans les quatre sous-préfectures, évaluer les progrès vers les objectifs et les résultats du programme, les stratégies de mise en œuvre, évaluer dans quelle mesure le programme démontre un bon «rapport qualité-prix» (en utilisant le rapport Approche monétaire), analyser le mécanisme de coordination du consortium, ses avantages et recommander des domaines pour son amélioration potentielle, documenter les leçons apprises et informer les partenaires, le FCDO, les bénéficiaires et les autres parties prenantes concernées des résultats et des conclusions.

Aspects spécifiques à considérer

1) L’évaluation sera guidée par les critères d’évaluation de pertinence, d’efficacité, d’efficience, d’impact et de durabilité.

L’évaluation doit évaluer spécifiquement:

· Pertinence : Évaluer dans quelle mesure les besoins et les priorités locaux ont été satisfaits, les activités et les extrants sont cohérents avec les 4 résultats attendus du programme.

· Efficacité : évaluer ce qui a été accompli par rapport aux résultats attendus et aux résultats définis dans le cadre logique dans chaque domaine d’intervention et à partir d’un niveau central, en précisant les principaux facteurs qui ont contribué à l’atteinte ou non des objectifs visés; évaluer dans quelle mesure le consortium se coordonne avec d’autres acteurs pertinents dans chaque zone et identifier les domaines dans lesquels cela pourrait être amélioré; évaluer la capacité du Consortium à s’adapter à l’évolution des contextes politiques et sécuritaires dans des zones d’intervention spécifiques et en RCA en général.

· Efficience : Évaluer comment les intrants (ressources humaines, financières, matérielles) ont été traduits en résultats et si les résultats ont été obtenus à un coût acceptable – voir Optimisation des ressources ci-dessous; évaluer dans quelle mesure l’approche du consortium et la gestion du programme du consortium ont apporté une valeur ajoutée pour atteindre les réalisations ou y ont entravé.

· Impact: évaluer dans quelle mesure le programme a contribué à réduire la surmorbidité et la mortalité de la population ciblée touchée par les crises en cours; évaluer comment le programme a tiré parti d’autres projets complémentaires pour obtenir un plus grand impact. S’agissant d’un projet de santé, un domaine d’intérêt pertinent doit être d’évaluer la pertinence et la cohérence des diagnostics et des traitements, l’utilisation rationnelle des médicaments et les étapes de diagnostic suivies par le personnel de santé, cela pourrait être réalisé en vérifiant si les agents de santé communautaires et les agents de santé suivent leurs algorithmes de diagnostic et de traitement.

· Durabilité: évaluer dans quelle mesure le programme produira des avantages à long terme pour les communautés et le système de santé national et identifier les lacunes qui pourraient être comblées. **

2) Responsabilité Comment chaque OING a rendu des comptes aux bénéficiaires, aux autorités nationales et locales et au donateur.

«Optimisation des ressources»: conformément à la politique du DFID, l’évaluation analysera la réalisation du consortium en fonction d’indicateurs identifiés «d’optimisation des ressources» et des preuves que les partenaires ont effectivement évalué et pris en compte les considérations d’optimisation des ressources dans la gestion du programme. L’évaluation devrait identifier les domaines dans lesquels de meilleures synergies pourraient se traduire par un meilleur rapport qualité-prix à l’avenir.

En raison de l’insécurité chronique dans certaines zones d’intervention, les partenaires du Consortium ont développé et mettent en œuvre des outils de gestion à distance. L’évaluation doit identifier dans quelle mesure ces outils et processus entravent ou favorisent la responsabilisation.

3) Accessibilité Comment l’accès aux services de santé a affecté les différentes populations dans les 4 sous-préfectures en ce qui concerne spécifiquement les aspects santé, nutrition et WASH. Identifier s’il y a eu des facteurs empêchant ou restreignant l’accès de certains groupes ou minorités aux services de santé et des stratégies potentielles pour y remédier.

4) Qualité Évaluer la qualité des interventions en termes d’indicateurs choisis et rapportés, de méthodologie de mise en œuvre, de compétence du personnel, de consolidation d’équipe, de genre, et si les soins de santé fournis par le programme sont socialement et éthiquement acceptables.

5) Leçons apprises Évaluer dans quelle mesure le consortium a jusqu’à présent agi sur les leçons apprises au cours de la phase 2 (y compris les preuves et les lacunes de données) et identifier d’autres leçons apprises, positives et négatives, qui peuvent être adoptées au cours de la phase actuelle

2B) CALENDRIER DE L’ÉVALUATION, MÉTHODOLOGIE ET ​​PRODUITS LIVRABLES

La conception et la méthodologie utilisées dans l’évaluation seront proposées par le consultant, mais devraient inclure des méthodes quantitatives et qualitatives, une revue documentaire des documents pertinents, des entretiens avec les parties prenantes concernées, des discussions de groupe et des observations. Les offres de consultation doivent fournir une description claire de la conception et de la méthodologie que le consultant utilisera pour répondre aux questions clés, y compris les méthodes d’évaluation reconnues, les contrefactuels proposés si / le cas échéant, les méthodes de collecte de données, les méthodes analytiques et l’approche de la synthèse.

Des visites sur le terrain sont prévues; cependant, la sécurité sera évaluée avant chaque mission sur le terrain et le consultant ne devrait se rendre de Bangui aux sites sur le terrain que lorsque les partenaires ont estimé que la sécurité est suffisante.

Le consultant recevra les documents de suivi et d’évaluation antérieurs, y compris le cadre logique, les bases de données de données médicales depuis le début du programme, les rapports trimestriels, etc. Le consultant sera responsable de l’identification et de la fourniture de toutes nouvelles données primaires nécessaires aux fins de évaluation. Le consultant devra déterminer quelles dispositions seraient les plus rentables dans l’ensemble et les moins contraignantes pour les bénéficiaires ou les exécutants du programme.

MENTOR demande que toutes les bases de données contenant des données qualitatives et quantitatives collectées au cours de la consultation soient partagées dans un format couramment utilisé, avec des métadonnées claires, anonymisées et garantissant la confidentialité.

Le calendrier de l’évaluation à mi-parcours immédiate est proposé comme suit:

Tâche

La description

Durée

Livrables

EXAMEN DU BUREAU

Le consultant procédera initialement à un examen documentaire de tous les documents liés à ce programme pour se familiariser avec le contexte du programme ainsi que ses buts et objectifs; L’Initiative MENTOR fournira tous les documents pertinents requis par le consultant pour cette évaluation.

La méthodologie à adopter, la stratégie d’échantillonnage, le plan de travail, la liste des personnes à interroger, les modèles d’outils de collecte de données doivent être partagés avec les partenaires par le biais du coordinateur du consortium dans un rapport de démarrage produit après l’examen des documents de base.

5 jours (dates approximatives: 1-5 mars 2021)

Rapport de lancement

TRAVAIL SUR LE TERRAIN

Le travail de terrain sera conduit dans les trois zones d’intervention (Ouham Pendé, Haute-Kotto, Basse-Kotto) dans la mesure du possible et au niveau de la coordination à Bangui pour démarrer environ la première semaine de mars 2021 pendant environ 3 semaines, selon la disponibilité des vols et accessibilité dans les zones d’intervention. Le consultant sera responsable de la gestion du processus d’évaluation dans le pays, mais sera soutenu par le coordinateur du consortium qui fournira une assistance technique (par exemple, organiser les voyages dans le pays, aider à prendre les rendez-vous, fournir les données, documents et informations disponibles, etc. .) et le personnel des 4 organisations différentes lors de la conduite des activités.

Le consultant externe doit informer le Coordinateur du Consortium et les 4 Directeurs Pays des premiers résultats.

20 jours (dates approximatives: 8-26 mars 2021)

Débriefing sur les premiers résultats / conclusions

RAPPORT

L’évaluation donnera lieu à un premier rapport d’évaluation provisoire, qui sera envoyé pour commentaires au coordonnateur du consortium et aux 4 partenaires du consortium. Idéalement, ce projet sera en français. Les articles courts seront également idéalement fournis initialement en français.

Après consultation, un rapport d’évaluation final est attendu au plus tard 10 jours après réception des commentaires.

Le rapport d’évaluation final (idéalement fourni en anglais et en français par le consultant) doit inclure un résumé d’une page, des informations générales sur le programme et l’évaluation, la méthodologie adoptée, la présentation des principales réalisations du programme, les résultats et l’analyse des critères d’évaluation clairement liés aux preuves, résumé des forces et faiblesses, défis rencontrés, conclusion, leçons apprises et recommandations pour répondre aux objectifs de l’évaluation, comme indiqué ci-dessus. Le rapport doit comporter au maximum 50 pages avec 11 pt. type à interligne simple.

10 jours (dates approximatives: 27 mars – 6 avril 2021)

Projet de rapport d’évaluation

Rapport d’évaluation final avec 1 ou 2 courts articles sur les thèmes clés identifiés lors du débriefing sur les premiers résultats

Les rapports devraient communiquer les résultats globaux de manière accessible aux lecteurs non techniques, y compris la présentation des données de manière visuellement attrayante, des résumés très structurés et rigoureux des résultats et des synthèses solides et accessibles des leçons clés. Les recommandations doivent être opportunes, réalistes, hiérarchisées et fondées sur des preuves.

Le calendrier pour l’évaluation finale qui doit être achevée en février 2023 sera proposé par le consultant, mais il devrait être plus court (environ 6 semaines) car le consultant sera déjà familiarisé avec le programme. Des visites sur le terrain pertinentes pour évaluer les progrès sont attendues le cas échéant, en particulier dans les domaines de programme qui n’auraient pas pu être consultés pendant l’examen à mi-parcours en raison de contraintes de sécurité. Un rapport d’évaluation provisoire et final est attendu.

3. ENQUÊTE DE SATISFACTION DES BÉNÉFICIAIRES

3A) Objectif .

L’enquête vise à informer le consortium sur la manière dont ses procédures, ses activités et sa mise en œuvre sont perçues et si elle répond aux besoins des bénéficiaires. Les informations collectées permettront au consortium de répondre aux besoins des bénéficiaires dans le cadre du programme. Bien que les partenaires du consortium aient déjà mis en place des mécanismes de retour d’information, l’enquête vise à fournir des informations standardisées supplémentaires sur l’impact du projet et sa perception parmi les bénéficiaires.

L’objectif est d’engager et de renforcer la capacité des bénéficiaires à jouer un rôle actif dans l’élaboration de l’avenir des programmes, et d’apporter les changements nécessaires pour faire face aux vulnérabilités et renforcer la résilience dans le contexte spécifique de la RCA et dans le cadre de la prévention de la morbidité et de la mortalité et dignité en permettant aux communautés d’accéder à des soins de santé de qualité en temps opportun.

3B) Méthodologie

L’enquête se concentre sur les aspects qualitatifs et couvre les bénéficiaires et les parties prenantes à différents niveaux, y compris les bénéficiaires directs du projet, ventilés par type de service de santé reçu, sexe, présence éventuelle d’un handicap, dirigeants communautaires, partenaires locaux de la santé. Afin de maximiser l’efficacité, l’enquête sera menée avec la revue à mi-parcours du projet d’ici la fin mars 2021 et une deuxième enquête sera menée parallèlement à l’évaluation finale prévue pour le premier trimestre de 2023) et elle devrait durer jusqu’à deux semaines.

Le consultant définira, en consultation avec l’équipe de coordination du consortium, la combinaison la plus efficace et la plus efficiente d’outils et de méthodologies d’enquête et d’analyse pour recueillir et présenter les données dans un rapport final. Les méthodologies doivent inclure un examen de l’enquête précédente menée auprès des bénéficiaires au sein du consortium, des entretiens avec des informateurs clés, des groupes de discussion et des techniques participatives communautaires. Le contractant voudra peut-être examiner les enquêtes Ground Truths Solutions de l’UNICEF et utilisera la question de Washington pour désagréger les bénéficiaires par type de handicap afin d’analyser l’accessibilité et la qualité des soins de santé fournis aux bénéficiaires, y compris les personnes handicapées.

Le Consortium, par l’intermédiaire de ses partenaires, identifiera, recrutera et paiera des incitations aux enquêteurs au niveau local qui mèneront la collecte de données afin de surmonter les défis dus à la langue et à la culture locales.

Le consultant formera les enquêteurs sur la méthodologie convenue pour collecter les données.

Le consortium fournira un soutien logistique aux équipes de géomètres dans les zones sélectionnées.

3C) Produits livrables

Le résultat de l’enquête doit être un rapport d’enquête sur la satisfaction des bénéficiaires détaillant les méthodologies adoptées, les ensembles de questionnaires utilisés par type de bénéficiaire, la présentation des résultats, les sites couverts, la liste des réunions et des entretiens tenus, les défis rencontrés pendant l’enquête et les limites potentielles du résultats.

4. GESTION DE LA COMMUNICATION

Le principal contact du consultant en RCA sera le coordinateur du consortium. Les contacts secondaires incluent le responsable du consortium (basé au Royaume-Uni) et le chef de mission de MENTOR (basé à Bangui).

5. PROFIL DU CONSULTANT

· Diplôme universitaire supérieur dans un domaine pertinent, à savoir la santé publique, les études de développement, l’intervention humanitaire, etc.

· Expérience pratique pertinente et démontrable dans la conduite d’évaluations dans des contextes de développement et humanitaires à l’aide de méthodologies de recherche qualitative et quantitative.

· Une expérience avérée de l’utilisation de méthodes d’évaluation participative, de la conduite d’évaluations pour des programmes de santé multisectoriels complexes dans des contextes difficiles, une expérience avec des projets financés par le FCDO et / ou des programmes de consortium est un atout.

· Une bonne compréhension du contexte de la RCA est un atout.

· Solides compétences informatiques, y compris un logiciel d’analyse statistique approprié.

· Excellentes compétences en communication orale et écrite en anglais et en français, la connaissance du sango est un atout.

· Solides compétences analytiques et de communication pour des environnements complexes et au rythme rapide.

· Un engagement fort à fournir des résultats rapides et de haute qualité.

· Devrait signer et suivre le Code de conduite de MENTOR et les 4 principes et normes élaborés ci-dessous.

Principes et normes

1. L’évaluation et l’enquête doivent respecter les normes internationales de bonnes pratiques en matière d’évaluation, y compris les critères du CAD de l’OCDE pour les évaluations humanitaires et les principes d’éthique de la recherche et de l’évaluation du FCDO. Les soumissions doivent démontrer comment elles y parviendront.
2. Conformément aux principes de la Déclaration de Paris, le consultant doit s’appuyer sur les données existantes lorsqu’elles sont disponibles, s’assurer que la nouvelle collecte de données est complémentaire des systèmes existants et que de nouvelles données sont mises à la disposition des parties prenantes dans la mesure du possible.
3. La ventilation des données, notamment par sexe, sexe et handicap, sera utile tout au long de l’évaluation.
4. Le consultant devra se conformer aux politiques de MENTOR sur la fraude et la lutte contre la corruption et coopérer avec tout contrôle requis de MENTOR pendant la durée de l’évaluation.
5. Pour l’enquête sur la satisfaction des bénéficiaires, nous prévoyons que le consultant devra travailler avec une équipe d’enquêteurs, dont les compétences et les antécédents devront être décrits dans la proposition.

6. BUDGET

Un budget approprié comprenant une estimation détaillée des dépenses doit être soumis avec les offres. Les soumissionnaires sont priés d’être très clairs sur la méthodologie en fournissant une ventilation détaillée des coûts pour les différentes activités importantes à entreprendre pendant l’évaluation et l’enquête. La fourchette budgétaire pour les 2 évaluations, par exemple, devrait être comprise entre 30 000 $ et 40 000 $, tout compris. Les soumissionnaires sont fortement encouragés à concourir sur la base de leur proposition commerciale, démontrant le rapport qualité-prix, ainsi que de la proposition technique.

7. PAIEMENT

Il y aura trois paiements pour chaque évaluation / enquête énumérés comme suit:

20% des frais d’évaluation / enquête lors de la soumission du rapport initial

50% des frais d’évaluation / d’enquête sur présentation du projet de rapport d’évaluation / d’enquête

30% des frais d’évaluation / enquête lors de la soumission du rapport final et de toute la documentation requise par The MENTOR Initiative pour le paiement final

8. OFFRE

Les soumissionnaires intéressés doivent soumettre un CV, une méthodologie bien développée, un calendrier, une stratégie définie sur la façon dont les traducteurs / recenseurs peuvent être utilisés et une proposition financière. Le CV doit clairement expliquer l’expérience, les compétences et les qualifications passées en matière d’évaluation. Les propositions financières doivent inclure des dépenses détaillées.

Les offres seront également prises en compte pour les évaluations ou l’enquête de satisfaction des bénéficiaires, si vous soumettez les deux, veuillez indiquer comment