Democratic Republic of the Congo: Évaluation mi-parcours du programme de renforcement des stratégies de prévention, de dépistage et de prise en charge du VIH/Sida chez les jeunes

I. CONTEXTE
A. Origine de la demande

La demande d’évaluation à mi-parcours correspond au besoin du programme de disposer d’une analyse indépendante externe sur l’approche et les résultats obtenus depuis le lancement des activités du projet de renforcement des stratégies de prévention, de dépistage et de prise en charge du VIH/SIDA chez les jeunes de 10 à 24 ans financée par Expertise France. Elle s’inscrit dans un cadre contractuel et devrait à ce titre être réalisées après 14 mois de lancement du projet.

De plus, au cours de la revue de mission organisée en février 2017 par l’équipe MdM à Kinshasa, un besoin d’analyse de la qualité du programme « Jeunes et VIH » a été identifié comme étape indispensable pour évaluer la conduite opérationnelle du programme.

B. Brève présentation du projet
Financé par Expertise France, le « programme de renforcement des stratégies de prévention ; dépistage et prise en charge du VIH chez les jeunes de 10 à 24 ans à Kinshasa et au Nord-Kivu » est un projet visant l’amélioration de l’accès des jeunes aux services de prévention et de prise en charge du VIH à travers la création des espaces jeunes en milieu de soins ainsi que l’animation des espaces communautaires de prévention et d’orientation des jeunes, pour mieux articuler les espaces de mobilisation communautaires aux structures de santé. Ce programme d’une durée de 27 mois a été lancé en janvier 2016. Il couvre actuellement 6 zones de santé dont 3 à Kinshasa (Kalamu I et II et Selembao) et 3 au Nord-Kivu( Karisimbi, Rusthuru et Oïcha). Le programme « Jeunes et VIH » est articulé autour de 4 axes opérationnels correspondant à 4 résultats principaux:

-La production d’une enquête sur les déterminants socioculturels de la transmission du VIH chez les jeunes de 10 à 24 ans
-Le renforcement de compétences des prestataires cliniques et communautaires intervenant dans la prévention, le dépistage et la prise en charge du VIH chez les jeunes
-La création des synergies entre les centres de santé et les structures communautaires d’encadrement des jeunes
-L’instauration d’un cadre social et légal favorable à la lutte contre le VIH de manière générale et prenant en considération les spécificités des jeunes.

Le programme est subdivisé en deux phases :

• la première allant de janvier à Septembre 2016, a permis la mise en œuvre d’une étude sur les déterminants socioculturels de la transmission du VIH chez les jeunes et la réalisation d’un diagnostic des enjeux politiques et sociaux du plaidoyer en RDC.
• la deuxième phase, couvrant les 18 mois restant, est consacré à la mise en œuvre des autres activités opérationnelles du programme, ainsi qu’à la capitalisation du projet.

Par cet appel à proposition, Médecins du Monde cherche un consultant pour mettre en œuvre une évaluation à mi-parcours sur les deux zones géographiques du programme : Kinshasa et Nord-Kivu.

II. OBJECTIFS

A. Objectifs de l’évaluation
L’évaluation à mi-parcours a pour objectif de fournir à toutes les parties prenantes à ce programme (Expertise France, Médecins du Monde, RACOJ/SIDA et les programmes nationaux) une analyse indépendante et rigoureuse de l’état d’avancement des activités du projet et de la qualité des résultats obtenus entre janvier 2016 et Juin 2017.
Cette évaluation devra proposer des recommandations concrètes et réalisables, notamment sur le plan de travail et les activités à mener pour la période restant à couvrir.

B. Portée de l’évaluation
L’évaluation s’intéressera à la qualité de la mise en œuvre des activités et des résultats produits ainsi qu’aux outils de suivi et de gestion. L’analyse de la qualité des résultats s’étendra sur les données de 6 zones de santé du programme (3 à Kinshasa et 3 au Nord-Kivu) alors que l’analyse des outils de suivi et la gestion du programme sera faite au niveau de la coordination du programme. La période couverte par cette évaluation va du 1er janvier 2016 au 30 juin 2017.

C. Utilisateurs de l’évaluation
Les résultats de cette évaluation seront utilisés principalement par les parties prenantes au programme pour ajuster leurs stratégies d’intervention. Il s’agit de Médecins du Monde France entant que responsable contractuel de l’exécution du programme jeunes et VIH ; RACOJ/SIDA et les programmes nationaux en tant que partenaires terrain et institutionnels et par Expertise France en tant que bailleur de Fonds et commanditaire de l’évaluation

III. CRITÈRES DE L’EVALUATION

Les analyses seront basées sur les critères d’évaluation ci-après :

La pertinence du programme
Il s’agira de mesurer l’adéquation des stratégies et des objectifs choisis au regard des attentes et besoins des bénéficiaires (prise en compte des dynamiques de genre dans le programme ; l’harmonie entre acteurs de mise en œuvre, implication des bénéficiaires aux différents stades du cycle de projet notamment), des politiques des partenaires et du bailleur de fonds.
L’évaluation analysera également la prise en compte des réalités socioculturelles locales dans l’implémentation des activités du projet. Ainsi, un focus sera accordé sur l’utilisation des résultats de l’étude sur les déterminants socio-culturels de la transmission du VIH/SIDA chez les jeunes dans la déclinaison opérationnelle des activités.
Les questions évaluatives devront explorer entre autres aspects :

• La cohérence entre les priorités (et besoins) des jeunes en matière de lutte contre le VIH/SIDA et les objectifs ainsi que les actions du projet
• La potentialité des activités du programme à améliorer l’accès des jeunes aux services VIH
• La validité des objectifs du programme au regard de l’évolution du contexte
• La compatibilité entre activités et résultats du projet.
• L’adéquation de la coordination mise en place au regard de la porté du programme

L’efficacité des actions
L’évaluation renseignera sur l’adéquation des stratégies mises en œuvre au regard de l’objectif spécifique et des résultats attendus de l’intervention à 18 mois de mise en œuvre. Elle aidera à mesurer les écarts entre les prévisions de la période passée et les réalisations.
Une analyse de l’utilisation des services appuyés par le projet « jeunes et VIH » dans les centres de santé mais aussi dans les espaces communautaires (les CEICA, et les clubs des jeunes) et des synergies entre centres de soins et CEICA ainsi que les clubs des jeunes est indispensable dans l’examen de l’efficacité du programme. L’analyse devra renseigner sur

• La coïncidence entre la temporalité du projet et ses objectifs
• les facteurs qui influencent sur l’atteinte ou non des résultats
• Les réalisations du projet à ce stade
• La qualité des indicateurs entant que mesure du progrès

L’efficience des stratégies
Un focus devra être orienté sur la cohérence entre les ressources matérielles, humaines et financières (fonds, expertise, temps, etc.) mobilisées et les résultats obtenus à travers une analyse des coûts (aussi bien de l’équipement des CEICA que de l’appui au système sanitaire)). L’analyse de l’efficience abordera en profondeur les questions sur les intrants utilisés au regard des résultats obtenus dans le programme au stade d’avancement des activités et l’adéquation du budget par rapport aux ambitions du projet

La viabilité
Cette analyse aidera à renseigner si les stratégies opérationnelles mise en place permettent d’inscrire les résultants du programme dans la durée. L’analyse de la viabilité devra répondre aux questions telles que :

• Les acteurs locaux impliqués dans le projet sont-ils motivés par l’intervention et suffisamment engagés pour poursuivre le travail après la fin du financement ?
• Quels sont les facteurs qui ont influencés la réalisation ou non des résultats du projet ?
• Dans quelle mesure les acquis du projet vont-ils continuer après la fin du financement en cours ?

L’Impact (effet)
Bien qu’intermédiaire, l’évaluation essaiera d’élucider certaines questions relevant de l’analyse de l’impact en terme d’effets immédiat du programme :

• Les effets positifs et négatifs observés dans la lutte contre le VIH auprès des jeunes suite à la mise en œuvre du programme
• Le nombre des jeunes déjà touchés par les activités du programme
• Les chances du programme d’avoir un effet sur la santé des jeunes
• L’apport du programme dans le vécu des jeunes en matière de lutte contre le SIDA

La dimension partenariale
Il s’agira de définir le niveau de :

• Convergence de vue sur les finalités du programme entre les différentes parties prenantes au projet : MdM, RACOJ et programmes nationaux ;
• Degré et mode d’implication de chacun des partenaires dans le projet ;
• Complémentarité des compétences et des moyens entre les différents acteurs du projet (MdM, RACOJ et programmes nationaux / centre de santé) ;
• L’Inscription de la relation dans le temps ;
• La qualité des relations humaines ;

VI. METHODOLOGIE

A. Méthodes quantitatives / qualitatives

L’évaluation sera conduite par un consultant externe à Médecins du Monde afin de garantir l’indépendance des analyses et se basera sur une méthodologie qualitative. L’approche sera consultative et transparente, prévoyant des échanges de vue avec les parties prenantes à différents moments. La triangulation de l’information, provenant des diverses parties prenantes sera essentielle pour valider les éléments de preuve qui auront été réunis.

L’évaluation utilisera ainsi :

• L’analyse des documents du projet, y compris tous les rapports d’activités et les documents techniques produits par le projet,
• La consultation avec les parties prenantes à travers des entretiens individuels et collectifs semi-directifs au niveau du terrain et de la coordination du projet, ainsi que les entretiens avec les partenaires institutionnels et d’autres acteurs nationaux et internationaux qui interviennent sur les enjeux liés au VIH ou qui sont impliqué dans un plaidoyer sur ces mêmes enjeux,
• Visites terrain dans les sites échantillons et observation directe des produits du projet,
• Entretien avec les bénéficiaires du projet dans des sites échantillons.
• Les focus groups avec les jeunes utilisant des services, les professionnels des centres de santé disposant des espaces jeunes et les animateurs des CEICA et club des jeunes.

B. Réunion de cadrage par le comité de pilotage de l’évaluation

Une réunion de cadrage aura lieu en amont du démarrage de l’évaluation avec pour objectif de valider le cas échéant les modifications apportées aux TDR, au calendrier et au budget.
Cette réunion aura lieu en téléconférence pour faciliter la participation de l’équipe de pilotage de terrain.

Les membres invités à participer au comité de pilotage seront :
• Le responsable de desk RDC
• La référente médical en charge de la RDC
• Le coordinateur du programme « Jeunes et VIH »

C. Documents clés

Avant le démarrage de la mission et tout au long de cette dernière, le consultant prendra connaissances des documents ci-après :
• Les documents programmes (4)
• Les rapports bailleurs et internes sur la mise en place du programme (4)
• Les études précédentes ou en cours sur le programme (2)
• Le monitool (outils de suivi des indicateurs de projet interne MdM)
• Le plan stratégique national de lutte contre le VIH au Congo 2014-2017
• Et tous autres documents pertinents

La liste détaillée de ces documents sera donnée au consultant retenu lors du briefing.

D. Personnes / Institutions clés

Les activités du programme ont vocation à améliorer l’accès des jeunes de 10 à 24 ans aux services de prévention et de prise en charge. A ce titre, ce programme intéresse :

• Les jeunes de 10 à 24 ans, filles et garçons ;
• Les sous-récipiendaires du fonds mondial dans les provinces couvertes par le programme ;
• Les responsables des programmes nationaux notamment le Programme national de santé des adolescents (PNSA), le programme national multisectoriel de lutte contre le SIDA (PNMLS) et le programme national de lutte contre le SIDA (PNLS) ;
• Les jeunes vivant avec le VIH/Sida à Kinshasa ainsi que dans la province du Nord-Kivu et les groupes de personnes les plus exposées aux risques de transmission.
• Les prestataires cliniques et communautaires travaillant auprès des jeunes de 10 à 24 ans.
• Les équipes cadres des zones de santé couvertes par le programme.

Bien que le consultant jouisse d’une totale indépendance pour discuter avec les autorités et autres acteurs concernés, il n’est autorisé à prendre aucun engagement au nom de Médecins du Monde, du bailleur de fonds ou des partenaires de mise en œuvre.

V. PRODUCTIONS ATTENDUES

A. Note de cadrage

Une note de cadrage technique sera soumise par le consultant pour avis et commentaires au comité de pilotage. Elle devra faire ressortir une proposition de plan d’évaluation incluant la méthodologie à utiliser. Un temps d’échange entre le comité de pilotage et le consultant sera fixé afin d’harmoniser les modalités opérationnelles de la mission sur terrain. La note de cadrage technique devra être soumise en amont du démarrage de l’évaluation.

B. Résultats préliminaires et recommandations

Après collecte des données et informations, l’évaluateur présentera ses constatations, analyses, conclusions, et recommandations préliminaires sous forme d’une présentation Powerpoint aux parties prenantes présentes sur terrain (équipe RACOJ, coordination programme de MdM et programmes nationaux), afin de les discuter et de les valider. Cette présentation sera écrite en français.

C. Rapport Final

Un rapport final provisoire sera produit à l’issue de la phase de terrain et remis au comité de pilotage. MdM dispose ensuite de 2 semaines à compter de la réception du rapport provisoire pour émettre ses commentaires et observations qui seront ensuite intégrés dans le rapport final.
Le rapport d’évaluation fournira des réponses aux domaines/thèmes/questions d’évaluation couvrant les critères mentionnés dans ces termes de référence.
Le rapport, qui sera un document exhaustif, sera aussi clair, concis et équilibré que possible et mettra l’accent sur les constats, analyses, conclusions et recommandations. Les données et analyses considérées comme utiles pour compléter le rapport principal ou pour servir de référence seront jointes en annexe.

Le texte principal du rapport d’évaluation, en format Word, comprendra entre 40 et 50 pages (sans compter les annexes), caractère 12 et simple interligne, et doit inclure les parties suivantes :
• Le résumé exécutif (3 pages maximum)
• Introduction
• Liste des acronymes
• Contexte (description du projet)
• Objectifs de l’évaluation et critères retenus
• Méthodologie et limites
• Principaux résultats et analyse
• Contraintes et opportunités ayant un impact sur le programme
• Conclusions et recommandations (classées selon les critères de l’évaluation)
• Fiche de suivi des recommandations remplie
• Annexes : TdR, liste des personnes rencontrées et calendrier, questionnaires, guides d’entretiens, grilles d’observation, données et autres analyses considérées comme utiles pour compléter le rapport.

D. Restitution orale

La restitution orale à l’aide d’une présentation sous format Powerpoint sera faite sur le terrain à Goma et éventuellement à la coordination générale à Kinshasa. Cette présentation sera partagée aux membres du comité de pilotage pour commentaires et observations.

E. Autres

Tous les documents et rapports relatifs à cette mission seront produits en français. Cependant, sur le terrain lors des entretiens et focus group, l’évaluateur pourra utiliser les langues locales ou nationales si besoin. En cas de recours au service d’un interprète, ce dernier sera totalement pris en charge par l’évaluateur.
Le rapport d’évaluation ainsi que les autres supports produits dans le cadre de cette mission restent une propriété de Médecins du Monde qui pourra les utiliser pour des publications ou des présentations dans des conférences.

VI. ORGANISATION DE L’ETUDE GLOBALE

A. Composition de l’équipe de mission d’évaluation

Il est attendu que cette évaluation à mi-parcours soit conduite par un consultant externe à MdM. Il est libre de se constituer une équipe d’enquêteurs qui sera à sa charge financière.
Les équipes supports MdM de la base de Goma et de la coordination générale à Kinshasa seront une ressource lors de la consultance.

B. Planning / chronogramme envisagé

La mission devrait avoir lieu entre le 01/07/2017 et le 30/08/2017. Toutefois ce planning reste indicatif est susceptible de modifications à tout moment en fonction de l’évolution du contexte et notamment de la sécurité.

Au total, 35 jours de mission sont planifiés et répartis comme suit :

• Phase de préparation (6 jours de préparation notamment de revue des documents et briefings)
• Phase de terrain (20 jours pour le recueil des données et l’analyse)
• Phase de restitution (1 jours)
  Phase de rédaction du rapport final (8 jours)
  Le calendrier final ainsi que le programme de la mission de terrain seront rédigés en concertation avec le consultant identifié.
  A la suite de l’étude terrain, le consultant disposera de trois semaines pour déposer le rapport final provisoire présentant les résultats de la mission. Ce document sera transmis au membre du comité de pilotage pour observations. L’équipe de pilotage disposera de deux semaines pour formuler ses observations. A la réception des observations, le consultant disposera d’un délai d’une semaine pour finaliser et transmettre le rapport final définitif au comité de pilotage.

C. Pilotage et reporting / points d’étape

Le comité de pilotage est chargé de valider les objectifs de cette évaluation, d’encadrer la mission d’évaluation et d’œuvrer à la diffusion des résultats de l’évaluation. Il est composé de :
• Le responsable de desk RDC
• La référente technique évaluation du S2AP
• La référente médical en charge de la RDC
• Le coordinateur du programme « Jeunes et VIH »
• La coordinatrice générale RDC

D. Organisation logistique et administrative

Le consultant visitera les 6 zones de santé couvertes par le programme. La mission débutera à Kinshasa et se clôturera au Nord -Kivu. MdM mettra à la disposition du consultant :

• un véhicule MdM pour les déplacements terrain à Kinshasa, à Goma et à Rutshuru.
• un téléphone
  Le transport vers les 2 zones d’interventions du projet reste à la charge du consultant. Il pourra s’agir selon de point d’arrivée de :
• Kinshasa/Goma/Kinshasa
• Kigali/Goma/Kinshasa/Goma/Kigali
  Le consultant prendra à sa charge les frais de vie et d’assurance durant la mission ainsi que les différents frais occasionnés par le recours à un enquêteur pour l’appuyer dans la collecte s’il le juge nécessaire.

E. Sécurité

Lorsque le consultant externe utilisera les moyens mis à disposition par MdM, ce dernier sera soumis aux règles et procédures de sécurité définies par la mission de MdM en RDC.
Ces différentes modalités sécuritaires lui seront présentées au démarrage de la mission.

VII. BUDGET DISPONIBLE

Une enveloppe globale de 18 400 € est mobilisée pour cette mission. Ce budget ne pourra pas être dépassé.

VIII. COMPETENCES REQUISES POUR MENER LA MISSION

Après vérification de l’éligibilité des propositions, chaque dossier sera soumis à une évaluation par le comité de pilotage. Le comité de pilotage se réunira ensuite pour décider des propositions retenues, sur la base des différents critères de sélection.

Les critères de sélection sont entre autres :

• L’expertise technique dans le domaine du renforcement de la société civile et des questions de gouvernance en matière de santé ;
• L’expérience en matière d’évaluation de projets, et une bonne connaissance des méthodes d’analyses qualitatives (focus groupes, entretien semi-directifs et observation) ;
• L’expérience internationale en matière de coopération au développement en Afrique est un plus ;
• la connaissance des problématiques du VIH en RDC serait un atout important ;
• Maîtrise du français oral et écrit ;
• La maîtrise d’une des langues locales serait un plus.

IX. MODALITES PRATIQUES DE SOUMISSION DE LA PROPOSITION

Les personnes interessées sont invitées à déposer leur dossier comprenant les éléments ci-après à l’adresse email: « doi.applications@medecinsdumonde.net» en précisant en objet « RDC/JVIH/Evaluation » :

• les CV et les précisions sur la disponibilité,
• les références de 2 travaux similaires antérieurs,
• une lettre de manifestation d’intérêt.

A l’issue de cette première étape de sélection, un certain nombre de candidats sera retenu, et contacté mi-mai pour déposer un dossier complet pour début juin 2017.

• Date limite de dépôt des premiers dossiers de candidature : 10 mai 2017
• Diffusion des résultats : 17 mai 2017

• Pour les candidats retenus à l’issue de la 1ere étape de sélection, date limite de dépôt des dossiers complets de candidature : 2 juin 2017
• Démarrage de l’étude : 01 juillet 2017