suivi et évaluation S&E, collecte et gestion des données, y compris la numérisation

• Le S&E pour les DMS devrait inclure le contrôle de l'efficacité des processus, le contrôle des pistes d'audit des produits et l'évaluation des résultats.
• Le RBM sur lesS&E a défini des indicateurs relatifs à la population et aux enquêtes sur les ménages que les pays doivent suivre dans le cadre de leur stratégie globale deS&E MII , mais des indicateurs plus détaillés et spécifiques aux programmes permettraient d'évaluer la contribution des DMS aux objectifs de couverture et d'éclairer les décisions relatives à la conception des programmes pour les années à venir.
• Le suivi de routine peut être soutenu par des évaluations utilisant des enquêtes auprès des ménages pour estimer les indicateurs de couverture pertinents recommandés par RBM.

Il peut être utile de contrôler régulièrement les activités suivantes :

• Qualité des formations.
• les processus de lachaîne logistique : Les programmes peuvent choisir de financer un processus d'audit pour vérifier le respect des processus et la qualité de la piste d'audit des produits.
• Évaluation des activités du CSC : Idéalement, la promotion de la santé dans les écoles et les communautés est menée tout au long de l'année. Les événements précédant la distribution peuvent inclure des discussions en classe, des assemblées scolaires, des spots radio, des activités communautaires, etc. Les soins et l'entretien des MII constitueront un thème important.
  • Les données relatives à l'efficacité de la mise en œuvre devraient être systématiquement recueillies, par exemple le nombre d'activités menées, les zones géographiques/publics ciblés, les canaux de communication utilisés, les messages transmis.
• Examen des données de distribution : Les données relatives aux MIIs distribués aux élèves doivent être rassemblées et communiquées tout au long de la chaîne de supervision (par exemple, de l'école au cluster , en passant par les niveaux sous-national et national). Les principaux paramètres à mesurer sont les suivants :
  • Nombre de MIIs livrées
  • Pourcentage d'élèves ciblés enregistrés comme bénéficiant d'un MII (par niveau, en fonction de la conception du DMS : classe, école, cluster, zone infranationale (par exemple, district, région) et au niveau national).

• Convoquer le groupe de coordination du DMS pour élaborer ou réviser un plan et des outils de S&E . Si les membres des équipesS&E du NMP et du Ministère de l’Éducation ne sont pas habituellement impliqués dans le groupe de coordination du DMS , ils doivent être invités à la (aux) réunion(s) pour développer ou réviser le plan et les outils S&E .
• Envisager des systèmes S&E appropriés : Déterminer si la collecte et la communication des données se feront à l'aide d'un système de collecte et de communication des données existant ou d'un système créé spécifiquement pour la distribution du MII dans les écoles.
  • Déterminer si la collecte et la communication des données se feront sur papier ou sous forme numérique. Les approches numériques sont préférables et fortement recommandées.
  • Des outils de collecte de données et d'établissement de rapports devraient être élaborés en conséquence.
• Tenir compte des plateformes nationales de notification sanitaire existantes: Dans la mesure du possible, les données devraient être intégrées dans des plateformes nationales telles que DHIS2 afin d'améliorer l'interopérabilité et le suivi en temps réel.
• Prévoyez un budget en conséquence : Un système de collecte et de communication de données spécifique à la distribution du MII dans les écoles peut nécessiter une formation supplémentaire ou une approvisionnement si les systèmes appropriés ne sont pas déjà en place.
• De même, les ressources destinées aux systèmes numériques de collecte et de communication de données peuvent nécessiter une formation supplémentaire ou l'approvisionnement appareils électroniques.

Examinez les points suivants :

• Les exigences en matière de données pour la surveillance de routine doivent se concentrer sur les données nécessaires (basées sur des indicateurs définis) et exclure les données utiles. Il est important de simplifier les exigences en matière de données afin d'améliorer la précision, l'exhaustivité et l'actualité des informations collectées.
• Idéalement, les données de suivi devraient passer par les systèmes existants. Cependant, il se peut qu'il n'existe pas de structure de rapport sanitaire appropriée pour le rapport sur les DMS, et il faudra donc mettre en place des systèmes de rapport parallèles. Des conseils peuvent être tirés du suivi de type campagne (voir la boîte à outils l'Alliance pourla prévention du paludisme [APP], chapitre 8, pour plus d'informations).
• Les activités de suivi peuvent être longues et coûteuses. Les résultats sont cependant essentiels pour comprendre comment le programme fonctionne et où des améliorations peuvent être apportées pour mieux servir les populations exposées au paludisme. La création d'une culture de collecte et d'utilisation de données de qualité pour la prise de décision prend du temps, mais il s'agit d'un investissement qui devrait être rentabilisé par une transparence, une efficacité et des résultats accrus. Dans la mesure du possible, l'examen des données et la prise de décision doivent être intégrés dans les systèmes et activités de santé existants, afin d'éviter d'ajouter des activités parallèles ou fastidieuses.

• La surveillance de routine peut être complétée par des enquêtes communautaires sur la couverture menées dans un délai approprié après l'événement DMS
• Le moment choisi pour réaliser les enquêtes auprès des communautés est essentiel :
  • Le biais de mémorisation des répondants augmentera avec le temps écoulé depuis la distribution. Toutefois, la réalisation d'une enquête immédiatement après la distribution peut ne pas laisser suffisamment de temps aux ménages pour intégrer leMII DMS dans leurs pratiques en matière de MII .
• Les enquêtes peuvent être utilisées pour faire des estimations :
  • Pourcentage de ménages ayant des enfants scolarisés éligibles qui ont reçu un DMS MII
  • Caractéristiques des ménages dont les enfants scolarisés remplissent les conditions requises et qui n'ont pas reçu deMIIs DMS
  • Pourcentage de DMS MIIs conservés par les ménages
  • Raisons pour lesquelles les ménages n'ont pas conservé lesMIIs DMS
  • couverture ménages et de la population des MIIs
  • Contribution desMIIs DMS à l'accès ménages et de la populationaccès MII (nécessite des données sur les autres MIIs du ménage et sur la composition du ménage)
  • Utilisation desMIIs DMS , par qui et combien de personnes
  • Perception et expérience du programme DMS par les membres de la communauté (par exemple, portée et souvenir des activités du CSC )

Pour améliorer la planification et la mise en œuvre du DMS , il est essentiel que les données S&E soient analysées et que les résultats soient interprétés et utilisés. Après analyse par l'équipe S&E , l'équipe de coordination DMS doit identifier et documenter les succès, les défis et les enseignements tirés afin d'informer les futures activités DMS .

• Les plans établis au début d'une stratégie DMS sont généralement pragmatiques mais peuvent être trop optimistes. L'examen formel régulier des données de suivi et de supervision, par le biais de réunions de gestion régulières aux niveaux appropriés, permettra de tirer des enseignements et d'améliorer les performances futures.
• Des modifications et des améliorations seront très probablement nécessaires, mais elles doivent être considérées comme des occasions de renforcer le système, en particulier au cours des premières années de mise en œuvre d'une nouvelle approche DMS .
• Les performances d'un système DMS peuvent varier dans le temps et d'un contexte à l'autre. Des plans qui ont bien fonctionné à un moment donné et dans un endroit donné peuvent nécessiter des ajustements. Même après plusieurs années de fonctionnement d'un système, il sera probablement nécessaire d'assurer un suivi permanent, de procéder à des révisions régulières et de procéder à des ajustements.

Qui doit examiner les données, pour quoi faire et à quel niveau ?

Enseignants et directeurs d'école
Examinez les résultats de leur classe et de leur école, en tenant compte du nombre de MIIs distribués par rapport au nombre prévu d'après les données d’inscription et le nombre d'enfants présents le jour du DMS.

Directeurs d'école
Réfléchir au déroulement du DMS au sein de l'école, avec l'aide des enseignants, afin d'apporter les ajustements nécessaires à l'avenir.

Structures infranationales
Un point clé pour l'examen des données infranationales, y compris l'identification des écoles ou des regroupements d'écoles aberrants dont les résultats sont moins bons que prévu. Les équipes infranationales du Ministère de l’Éducation peuvent disposer d'une certaine marge de manœuvre pour modifier les approches opérationnelles utilisées dans leur région, le cas échéant, sur la base des résultats. Pour certaines recommandations, il est préférable de remonter la chaîne Supervision, suivi et évaluation jusqu'à un niveau supérieur ou national afin d'envisager des modifications du modèle à l'échelle nationale si des résultats similaires sont rapportés dans l'ensemble du pays.

Organiser une réunion (annuelle) de révision du processus
La distribution ayant généralement lieu une fois par an, il est essentiel de veiller à ce qu'une réunion annuelle d'examen post-distribution soit programmée afin d'évaluer les performances et de permettre une révision en temps utile des plans pour l'année suivante.

• Les parties prenantes des étudiants et des communautés, des écoles, des divisions infranationales et du niveau national devraient être impliquées et inclure tous les départements ou organisations concernés.
• Les données relatives à la formation, au suivi, à la supervision et à la distribution doivent être collectées et analysées, et les succès, les difficultés et les enseignements tirés doivent être synthétisés.
• Des réunions infranationales d'examen du processus devraient être organisées pour diffuser les résultats et recueillir les expériences personnelles des parties prenantes. Les enseignements tirés des réunions infranationales peuvent être pris en compte lors d'une réunion nationale.
• Un rapport final devrait être préparé et diffusé, comprenant une liste claire de recommandations et d'actions chiffrées à mettre en œuvre pour la prochaine DMS, avec des délais réalistes et des points focaux pour chaque action.

Les lacunes suivantes en matière de connaissances sur les DMS peuvent intéresser les programmes, les partenaires de mise en œuvre et les bailleurs de fonds des DMS.

• Destination des MIIs reçues par les étudiants : Les méthodes dequantification MII partent du principe que MIIs sont redistribuées à l'intérieur et à l'extérieur des ménages. Il est important de comprendre la redistribution du MII pour vérifier le modèle de quantification . Ces informations pourraient également permettre aux pays de comprendre si la combinaison de canaux qu'ils ont choisie risque de priver certains sous-groupes de la population de l'accès aux MIIs
• Les écoles peuvent-elles jouer un rôle en tant quepoint de distribution continue MII pour les ménages n'ayant pas d'enfants en âge scolaire, afin d'accroître l'accès aux MIIs pour un plus grand pourcentage de la population ?
• Dans quelle mesure est-il possible de distribuer des MIIs en continu dans les écoles, plutôt que lors d'une distribution annuelle ou semestrielle ?
• La recherche de la stratégie la plus efficace pour combiner les différents canaux de DC afin d'atteindre le plus grand nombre de personnes de la manière la plus équitable devrait être un sujet prioritaire à examiner.

• MII DMS routine monitoring forms [Word] EN | FR | PT
• Le protocole d'évaluation des DC (qui peut être modifié pour répondre aux besoins des DMS) est disponible ici [Word]. Le questionnaire d'enquête associé est disponible ici [Word].

• Zambie NMEC [Word] DMS routine monitoring forms at multiple levels and Supervision, suivi et évaluation checklist.
• Zambie NMEC [Word] Campagne dedistribution en milieu scolaire MII distribution en milieu scolaire , 2021, Rapport final.