suivi et évaluation S&E), collecte et gestion des données, y compris la numérisation

orientations opérationnelles la planification de S&E, la définition de la portée des activités, les formulaires de suivi de routine, les considérations relatives à la numérisation, l'utilisation d'enquêtes, etc.

DMS clés relatives au DMS

L'objectif de cette étape est d'élaborer un plan suivi et évaluation S&E), comprenant les outils nécessaires à la collecte et à la gestion des données ainsi qu'à l'établissement de rapports.

  • La planification des activités suivi et évaluation S&E) variera selon que DMS en phase pilote ou mis en œuvre à grande échelle. Si DMS en phase pilote, des activités d'évaluation plus détaillées peuvent être nécessaires pour évaluer les indicateurs de processus et de résultats afin d'alimenter l'apprentissage avant la mise à l'échelle.
  • Dans tous les cas, S&E doivent être soigneusement élaborés dès le départ.
  • Le suivi du programme est essentiel pour toutes les activités MII , y compris DMS. Le suivi de chaque étape de la mise en œuvre permet à l'équipe de coordination de contrôler les progrès par rapport aux plans et de prendre des mesures correctives si nécessaire.
  • Une évaluation supplémentaire au moyen d'enquêtes auprès des ménages devrait être prévue afin de comprendre comment MIIs par le biais DMS à maintenir les niveauxaccès MII accès les ménages.

  • S&E DMS inclure le suivi de l'efficacité des processus, le suivi des pistes d'audit des produits et l'évaluation des résultats.
  • RBM défini des indicateurs d'enquête auprès de la population et des ménages que les pays devraient suivre dans le cadre de leurS&E globaleS&E MII , mais des indicateurs plus détaillés spécifiques aux programmes permettraient de mieux évaluer la contribution des DMS couverture et d'éclairer les décisions de conception pour les années à venir.
  • Le suivi régulier peut être appuyé par des évaluations utilisant des enquêtes auprès des ménages afin d'estimer couverture pertinents recommandés par RBM.

Les activités suivantes peuvent être utiles à surveiller régulièrement :

  • Qualité des formations.
  • chaîne logistique : les programmes peuvent choisir de financer un processus d'audit afin de vérifier le respect des processus et la qualité de la piste d'audit des produits.
  • Évaluation des CSC : Idéalement, la promotion de la santé dans les écoles et les communautés devrait se faire tout au long de l'année. Les activités préalables à la distribution peuvent inclure des discussions en classe, des assemblées scolaires, des spots radio, des activités communautaires, etc. MII et la maintenance MII seront un élément important.
    • Les données relatives à l'efficacité de la mise en œuvre doivent être systématiquement recueillies, par exemple le nombre d'activités menées, les zones géographiques/publics cibles, les canaux de communication utilisés, les messages transmis.
  • Examen des données de distribution : Les données relatives MIIs aux élèves doivent être compilées et communiquées à la hiérarchie (par exemple, de l'école au cluster niveaux infranational et national). Les indicateurs clés à mesurer sont les suivants :
    • Nombre de MIIs
    • Pourcentage d'élèves ciblés enregistrés comme bénéficiant d'un MII par niveau, en fonction de DMS : classe, école, cluster, zone infranationale (par exemple, district, région) et au niveau national)

  • Convoquer le groupe DMS afin d'élaborer ou de réviser un S&E et des outils S&E . Si les membresS&E du NMP et Ministère de l’Éducation ne participent généralement pas au groupe DMS , ils devraient être invités à la ou aux réunions visant à élaborer ou à réviser le S&E et les outils S&E .
  • Envisager S&E adaptés : Déterminer si la collecte et la communication des données se feront à l'aide d'un système existant ou d'un système créé spécialement pour MII dans les écoles.
    • Déterminez si la collecte et la communication des données se feront sur papier ou sous forme numérique. Les approches numériques sont préférables et fortement recommandées.
    • Des outils de collecte de données et de reporting devraient être développés en conséquence.
  • Prendre en considération les plateformes nationales existantes de reporting sanitaire: lorsque cela est possible, les données devraient être intégrées dans des plateformes nationales telles que DHIS2 afin d'améliorer l'interopérabilité et le suivi en temps réel.
  • Prévoyez un budget en conséquence : un système de collecte et de communication des données spécifique à MII dans les écoles peut nécessiter une formation supplémentaire ou approvisionnement les systèmes appropriés ne sont pas déjà en place.
  • De même, les ressources nécessaires à la collecte de données numériques et aux systèmes de reporting peuvent nécessiter une formation supplémentaire ou approvisionnement appareils électroniques.

Tenez compte des points suivants :

  • Les exigences en matière de données pour la surveillance courante devraient se concentrer sur les données indispensables (basées sur des indicateurs définis) et exclure les données facultatives. Il est important de simplifier les exigences en matière de données afin d'améliorer l'exactitude, l'exhaustivité et l'actualité des informations collectées.
  • Idéalement, données de suivi circuler à travers les systèmes existants. Cependant, il se peut qu'il n'existe pas de structure de reporting sanitaire appropriée pour rendre compte du DMS, et il faudra donc mettre en place des systèmes de reporting parallèles. Des conseils peuvent être tirés du suivi de type campagne (voir boîte à outils de l'Alliance pour paludisme [APP], chapitre 8, pour plus d'informations).
  • Les activités de surveillance peuvent être longues et coûteuses. Cependant, leurs résultats sont essentiels pour comprendre les performances du programme et identifier les améliorations possibles afin de mieux servir les populations exposées au risque de paludisme. La mise en place d'une culture de collecte et d'utilisation de données de qualité pour la prise de décision prend du temps, mais constitue un investissement qui devrait porter ses fruits en termes de transparence, d'efficacité et de résultats. Dans la mesure du possible, l'examen des données et la prise de décision doivent être intégrés dans les systèmes et activités de santé existants, afin d'éviter d'ajouter des activités parallèles ou fastidieuses.

Exemple national : suivi ciblé du programme Tanzania School Net

  • Le programme School Nets Programme (SNP) de Tanzanie suit les progrès réalisés par rapport aux objectifs à l'aide de multiples sources de données afin d'alimenter les indicateurs clés de performance (KPI). Les données sont collectées sur une série d'activités DMS , en plus de MII .
  • Le SNP tanzanien surveille les indicateurs clés de performance (KPI) présentés dans le tableau ci-dessous.
  • Les rapports sur la distribution des SNP pour les KPI5 et KPI6 proviennent du Système d'information scolaire (SIS) géré par le Ministère de l’Éducation. Les données sont saisies au moment de la remise à l'aide de formulaires standard, comme décrit dans le guide de mise en œuvre du SNP : les écoles doivent utiliser la remise au niveau de la classe pour enregistrer les élèves qui ont reçu MIIs établir leur rapport à l'aide du « formulaire A ». Le formulaire récapitulatif de l'école (formulaire B) sera compilé au niveau de l'école. Les données seront saisies au niveau de l'école par le professeur principal et le directeur de l'établissement.

Source : PNLP Tanzanie PNLP 2023). Directives pour la mise en œuvre MII dans les écoles.

Exemple national : MII et flux de données pour DMS Zambie

  • En ce qui concerne le Ministère de l’Éducation Ministère de l’Éducation) :
    Les données sont transmises par les enseignants et les directeurs d'école aux responsables de zone, puis à la structure éducative du district. Le district consolide les données et les transmet au niveau provincial, qui les partage avec le Ministère de l’Éducation national. Le Ministère de l’Éducation les données avec le PNEP via/y compris toute équipe DMS ou tout sous-groupe TWG lutte antivectorielle VC)).
  • Compte tenu de la structure sanitaire :
    Les donnéesMII sont d'abord reçues et examinées au niveau du district, par l'équipe éducative du district. De là, les données sont transmises au niveau provincial.

Source : Rapport final deDMS 2021 du NMEC MII DMS en Zambie

Exemple national : outils de reporting régulier de la Zambie pour DMS

  • La Zambie utilise un système de notification paludisme pour signaler et compiler les données DMS (appelé « paludisme Reporting System », MRRS).
  • Les données saisies dans le système proviennent de plusieurs outils, comme décrit ci-dessous.
  • Des versions adaptables de ces formulaires de collecte de données et de la liste de contrôle de suivi sont disponibles ici et peuvent être téléchargées et modifiées pour être utilisées dans d'autres contextes.
  • Formulaire MII
    À remplir par l'enseignant. Enregistre la remise d'un MII un élève éligible, avec signature ou empreinte digitale comme preuve de MII .
  • Formulaire récapitulatif MII du district MII
    Résume les totaux au niveau de l'école pour le nombre de MIIs aux élèves (ventilés par sexe et par niveau scolaire) et le nombre de MIIs .
  • Formulaire récapitulatif provincial MII Summary Form
    Résume les totaux au niveau du district pour les indicateurs ci-dessus.
  • Liste de contrôle pour le suivi de MII dans les écoles
    Vérification des données relatives à la distribution dans les classes et enquête sur MII , les connaissances en matière de soins et la promotion.

Exemple national : l'application numérique Net4Schs du Ghana

  • Le Ghana utilise l'application Net4Schs pour surveiller et superviser DMS 2020.
  • La collecte de données sur papier n'a lieu qu'une seule fois au cours du DMS , lorsque l'enseignant remplit le formulaire A de distribution scolaire afin d'inscrire les noms des élèves figurant dans le registre de classe, d'indiquer si chaque élève a reçu un filet dans le cadre du DMS et de résumer les résultats pour la classe.
  • Les données récapitulatives des classes issues du formulaire A de répartition scolaire sont saisies dans l'application Net4Schs par les superviseurs scolaires, après avoir validé le formulaire papier par rapport au registre de classe lors de leurs visites dans chaque école de leur juridiction.
  • L'application résume automatiquement les données aux niveaux du district, de la région et du pays, et met les résultats à la disposition des différents utilisateurs en fonction de leurs accès .

Source : Adapté à partir du matériel de formation des formateurs MII dans les écoles primaires du Ghana.

  • La surveillance régulière peut être complétée par des enquêtes communautaires sur couverture avec un délai approprié après DMS .
  • Le moment choisi pour mener les enquêtes communautaires est crucial :
    • Le biais de mémoire des répondants augmentera avec le temps écoulé depuis la distribution. Cependant, mener une enquête immédiatement après la distribution peut ne pas laisser suffisamment de temps aux ménages pour intégrer le DMS MII leurs MII domestiques.
  • Les enquêtes peuvent être utilisées pour estimer :
    • Pourcentage de ménages avec des enfants scolarisés éligibles ayant reçu un DMS MII
    • Caractéristiques des ménages ayant des enfants scolarisés éligibles qui n'ont pas reçu DMS MIIs
    • Pourcentage desMIIs DMS MIIs par les ménages
    • Raisons pour lesquellesMIIs DMS MIIs pasMIIs conservés par les ménages
    • couverture ménages et couverture la population couverture MIIs
    • Contribution desMIIs DMS MIIs accès des ménages et de la population MII accès nécessite des données sur MIIs autres MIIs le ménage et sur la composition du ménage)
    • Utilisation desMIIs DMS , par qui et combien de personnes
    • Perceptions et expériences des membres de la communauté concernant le DMS (par exemple, portée et rappel des CSC )

Pour améliorer DMS et la mise en œuvre DMS , il est essentiel que S&E soient analysées et que les résultats soient interprétés et utilisés. À la suite de l'analyse effectuée par S&E , l'équipe DMS doit identifier et documenter les réussites, les défis et enseignements afin d'éclairer DMS futures DMS .

  • Les plans élaborés au début d'une DMS sont généralement pragmatiques, mais peuvent être trop optimistes. Un examen formel régulier des données de suivi et de supervision, dans le cadre de réunions de gestion régulières aux niveaux appropriés, permettra de enseignements et d'améliorer les performances futures.
  • Des modifications et des améliorations seront très probablement nécessaires, mais elles doivent être considérées comme des occasions bienvenues de renforcer le système, en particulier au cours des premières années de mise en œuvre d'une nouvelle DMS .
  • Les performances d'un DMS peuvent varier dans le temps et selon le contexte. Les plans qui ont bien fonctionné à un moment donné et à un endroit donné peuvent nécessiter des ajustements. Même après plusieurs années de fonctionnement d'un système, une surveillance continue, des révisions régulières et des ajustements seront probablement nécessaires.

Qui devrait examiner les données, dans quel but et à quels niveaux ?

Enseignants et directeurs d'école
Examinez les performances de votre classe et de votre école, en tenant compte du nombre de MIIs par rapport au nombre prévu d'après les données d’inscription au nombre d'enfants présents le jour du DMS.

Directeurs d'école
Réfléchir au déroulement du processus DMS l'école, en tenant compte des commentaires des enseignants, afin d'orienter les ajustements futurs.

Structures au niveau infranational
Un point essentiel pour l'examen des données infranationales, y compris l'identification des écoles ou des groupes d'écoles présentant des résultats inférieurs aux attentes. Ministère de l’Éducation régionales Ministère de l’Éducation peuvent disposer d'une certaine marge de manœuvre pour modifier les approches opérationnelles utilisées dans leur région, le cas échéant, en fonction des conclusions. Certaines recommandations peuvent être transmises à la hiérarchie supérieure ou au niveau national afin d'envisager des modifications du modèle à l'échelle nationale si des conclusions similaires sont rapportées dans tout le pays.

Organiser une réunion (annuelle) d'examen des processus
La distribution ayant généralement lieu une fois par an, il est essentiel de prévoir une réunion annuelle d'examen post-distribution afin d'évaluer les performances et de permettre une révision en temps utile des plans pour l'année suivante.

  • L'examen doit s'appuyer sur les expériences des participants et ne pas se limiter à des données numériques, c'est-à-dire qu'il doit être à la fois qualitatif et quantitatif. parties prenantes élèves et parties prenantes communautés, parties prenantes écoles, des divisions infranationales et du niveau national, doivent être impliquées et inclure tous les départements ou organisations concernés.
  • Les données relatives à la formation, au suivi, à la supervision et à la distribution doivent être collectées et analysées, et les réussites, les défis et enseignements doivent être synthétisés.
  • Des réunions d'examen des processus infranationaux devraient être organisées afin de diffuser les conclusions et de recueillir les expériences personnelles des parties prenantes. Les conclusions des réunions infranationales peuvent être intégrées dans une réunion nationale.
  • Un rapport final devrait être préparé et diffusé, comprenant une liste claire de recommandations et de mesures chiffrées à mettre en œuvre pour le prochain DMS, avec des délais réalistes et des points focaux pour chaque mesure.

Les lacunes suivantes en matière de connaissances sur DMS intéresser les programmes, les partenaires de mise en œuvre et les bailleurs de fonds des DMS.

  • Destination des MIIs par les étudiants : quantification MII partent du principe que MIIs redistribués au sein et à l'extérieur des ménages. Il est important de comprendre MII afin de vérifier le quantification . Ces informations pourraient également être utiles pour permettre aux pays de déterminer si la combinaison de canaux qu'ils ont choisie risque d'exclure certains sous-groupes de la population de accès MIIs.
  • Les écoles peuvent-elles jouer un rôle depoint de distribution permanent MII pour les ménages sans enfants d'âge scolaire, afin d'améliorer accès MIIs une plus grande partie de la population ?
  • Quelle est la faisabilité d'une distribution MIIs dans les écoles, par opposition à une distribution annuelle ou semestrielle ?
  • La recherche de la stratégie la plus efficace pour combiner différents DC afin d'atteindre le plus grand nombre de personnes de la manière la plus équitable possible devrait être une priorité.

Ressources

  • Formulaires de surveillanceDMS MII DMS [Word] EN | FR | PT
  • Le protocole d'évaluation du DC qui peut être modifié pour répondre aux besoins du DMS) est disponible ici [Word]. Le questionnaire d'enquête associé se trouve ici [Word].