monitorização e avaliação M&A), recolha e gestão de dados, incluindo digitalização

orientações operacionais o planeamento de M&A, definição do âmbito das atividades, formulários de monitorização de rotina, considerações sobre digitalização, utilização de inquéritos, etc.

Considerações importantes sobre o SBD

O objetivo desta etapa é desenvolver um plano monitorização e avaliação M&A), incluindo as ferramentas necessárias para a recolha e gestão de dados e elaboração de relatórios.

  • O planeamento das atividades monitorização e avaliação M&A) irá variar dependendo se o SBD está a ser testado ou implementado em grande escala. Se o SBD estiver a ser testado, podem ser necessárias atividades de avaliação mais detalhadas para avaliar os indicadores de processo e resultados, a fim de informar a aprendizagem antes da ampliação.
  • Em todos os casos, M&A devem ser cuidadosamente elaborados desde o início.
  • O acompanhamento do programa é essencial para todas as atividades MTI , incluindo o SBD. O acompanhamento de cada etapa da implementação permite que a equipa de coordenação monitore o progresso em relação aos planos e tome medidas corretivas quando necessário.
  • Deve ser planeada uma avaliação adicional através de inquéritos aos agregados familiares, a fim de compreender de que forma MTI através do SBD contribuem para manter os níveis de MTI nos agregados familiares.

  • M&A SBD devem incluir o monitoramento da eficiência do processo, o monitoramento das trilhas de auditoria de commodities e a avaliação dos resultados.
  • RBM indicadores de inquéritos à população e aos agregados familiares que os países devem acompanhar como parte da suaM&A globalM&A MTI , mas indicadores mais detalhados específicos do programa ajudariam a informar a contribuição da SBD para as metas de cobertura e a informar as decisões de conceção nos próximos anos.
  • O monitoramento de rotina pode ser apoiado por avaliações que utilizam inquéritos domiciliares para estimar indicadores de cobertura relevantes recomendados pela RBM.

As seguintes atividades podem ser úteis para monitorar rotineiramente:

  • Qualidade dos treinamentos.
  • Processos da cadeia de abastecimento: Os programas podem optar por financiar um processo de auditoria para verificar a adequada adesão aos processos e a qualidade da trilha de auditoria das mercadorias.
  • Avaliação das MSC : Idealmente, a promoção da saúde nas escolas e comunidades é realizada ao longo do ano. Os eventos pré-distribuição podem incluir discussões em sala de aula, assembleias escolares, spots de rádio, atividades comunitárias, etc. MTI e a manutenção MTI serão um foco importante.
    • Os dados sobre a força da implementação devem ser recolhidos regularmente, por exemplo, número de atividades realizadas, geografias/público-alvo, canal(is) de comunicação utilizado(s), mensagem(ns) transmitida(s).
  • Análise dos dados de distribuição: Os dados sobre MTI aos alunos devem ser compilados e comunicados à cadeia de supervisão (por exemplo, da escola ao agrupamento, aos níveis subnacionais e nacionais). As principais métricas a medir são:
    • Número de MTI
    • Percentagem de alunos visados registados como tendo recebido um MTI por nível, dependendo do desenho do SBD: ano, escola, agrupamento, área subnacional (por exemplo, distrito, região) e nacionalmente)

  • Convocar o grupo de coordenação do SBD para desenvolver ou rever um M&A e ferramentas M&A . Se os membrosM&A do NMP e MdE não estiverem normalmente envolvidos no grupo de coordenação do SBD, devem ser convidados para a(s) reunião(ões) para desenvolver ou rever o M&A e as ferramentas M&A .
  • Considere M&A adequados: Determine se a recolha e comunicação de dados ocorrerão utilizando um sistema de recolha e comunicação de dados existente ou um criado especificamente para MTI nas escolas.
    • Determine se a recolha de dados e a apresentação de relatórios serão feitas em papel ou digitalmente. As abordagens digitais são preferíveis e fortemente recomendadas.
    • Devem ser desenvolvidas ferramentas de recolha de dados e de comunicação de informações adequadas a este efeito.
  • Considere as plataformas nacionais de relatórios de saúde existentes: sempre que possível, os dados devem ser integrados em plataformas nacionais, como o DHIS2, para aumentar a interoperabilidade e melhorar a monitorização em tempo real.
  • Orçamente adequadamente: Um sistema de recolha de dados e relatórios específico para MTI nas escolas pode exigir formação adicional ou aquisição de equipamentos, caso os sistemas adequados ainda não estejam implementados.
  • Da mesma forma, os recursos para sistemas digitais de recolha de dados e relatórios podem exigir formação adicional ou aquisição de dispositivos eletrónicos.

Considere os seguintes pontos:

  • Os requisitos de dados para monitorização de rotina devem concentrar-se nos dados necessários (com base em indicadores definidos) e excluir os dados que seria bom saber. Simplificar os requisitos de dados é importante para melhorar a precisão, a integridade e a atualidade das informações recolhidas.
  • Idealmente, os dados de monitorização devem fluir através dos sistemas existentes. No entanto, pode não existir uma estrutura de relatórios de saúde adequada para relatar a SBD e, portanto, serão necessários sistemas de relatórios paralelos. É possível obter orientações a partir da monitorização em estilo de campanha (consulteo kit de ferramentas da Alliance for Malaria Prevention [AMP], Capítulo 8, para obter orientações).
  • As atividades de monitorização podem ser demoradas e dispendiosas. No entanto, os resultados são essenciais para compreender o desempenho do programa e onde podem ser feitas melhorias para melhor servir as populações em risco de malária. Criar uma cultura de recolha e utilização de dados de qualidade para a tomada de decisões leva tempo, mas é um investimento que se deve compensar com maior transparência, eficiência e resultados. Sempre que possível, a análise de dados e a tomada de decisões devem ser integradas nos sistemas e atividades de saúde existentes, para evitar a adição de atividades paralelas ou onerosas.

Exemplo de país: Monitorização direcionada para o Programa School Net da Tanzânia

  • O Programa de Redes Escolares da Tanzânia (SNP) acompanha o progresso em relação às metas utilizando várias fontes de dados para informar os indicadores-chave de desempenho (KPIs). Os dados são recolhidos numa série de atividades de planeamento de SBD, além da MTI .
  • O SNP da Tanzânia monitoriza os KPIs apresentados na tabela abaixo.
  • Os relatórios de distribuição do SNP para o KPI5 e o KPI6 provêm do Sistema de Informação Escolar (SIS) gerido pelo Ministério da Educação. Os dados são recolhidos no momento da entrega utilizando formulários de rotina, conforme descrito no Guia de Implementação do SNP: As escolas devem utilizar a emissão ao nível da turma para registar os alunos a quem foi emitido MTI comunicar utilizando o «Formulário A». O formulário de resumo da escola (Formulário B) será compilado ao nível da escola. Os dados serão introduzidos ao nível da escola tanto pelo professor da turma como pelo diretor da escola.

Fonte: PNCM da Tanzânia PNCM 2023). Diretrizes para a implementação MTI nas escolas

Exemplo de país: MTI e fluxo de dados para SBD na Zâmbia

  • Considerando o Ministério da Educação (MdE):
    Os dados fluem das turmas e dos professores para os chefes de zona e, em seguida, para a estrutura distrital de educação. O distrito consolida os dados e partilha-os com o nível provincial, que, por sua vez, partilha os dados com o MdE nacional. O MdE os dados com o PNEM através de/incluindo qualquer equipa de trabalho SBD ou subgrupo TWG de controlo de vetores (VC)).
  • Considerando a estrutura de saúde:
    Os dadosMTI são recebidos e analisados primeiro a nível distrital, pela equipa distrital de educação. A partir daí, os dados são encaminhados para o nível provincial.

Fonte: Relatório final da campanha NMEC MTI 2021 da Zâmbia

Exemplo de país: Ferramentas de reporte de rotina da Zâmbia para SBD

  • A Zâmbia utiliza um sistema de notificação específico para a malária para comunicar e compilar dados sobre a distribuição de SBD (denominado Sistema de Notificação Rápida da Malária, MRRS).
  • Os dados introduzidos no sistema provêm de várias ferramentas, conforme descrito abaixo.
  • Versões adaptáveis destes formulários de recolha de dados e da lista de verificação de monitorização estão disponíveis aqui e podem ser descarregadas e modificadas para utilização noutros contextos.
  • Formulário MTI da Turma
    Preenchido pelo professor da turma. Regista a emissão de um MTI um aluno elegível, com assinatura ou impressão digital como prova de MTI .
  • Formulário de resumo MTI do distrito MTI
    Resume os totais por escola do número de MTI aos alunos (desagregados por sexo e ano letivo) e o número de MTI .
  • Formulário resumido MTI provincial MTI
    Resume os totais distritais para as métricas acima.
  • Lista de verificação para monitorização da MTI nas escolas
    Verificação dos dados de distribuição nas turmas e investigação sobre MTI , conhecimentos sobre cuidados e promoção.

Exemplo de país: a aplicação digital Net4Schs do Gana

  • O Gana utiliza a aplicação Net4Schs para monitorizar e supervisionar o SBD desde 2020.
  • A recolha de dados em papel ocorre apenas uma vez durante o processo SBD, quando o professor da turma preenche o Formulário de Distribuição Escolar A para listar os nomes dos alunos incluídos no registo da turma, indicar se cada aluno recebeu uma rede através do SBD e resumir os resultados da turma.
  • Os dados resumidos das turmas do Formulário de Distribuição Escolar A são introduzidos na aplicação Net4Schs pelos supervisores escolares, após validarem o formulário em papel com o registo da turma durante as visitas a cada escola na sua jurisdição.
  • A aplicação resume automaticamente os dados a nível distrital, regional e nacional, disponibilizando os resultados a diferentes utilizadores com base nos seus direitos de acesso.

Fonte: Adaptado dos materiais de formação de formadores MTI nas escolas primárias do Gana.

  • A monitorização de rotina pode ser complementada por inquéritos comunitários sobre a cobertura, realizados com um intervalo de tempo adequado após o evento de SBD.
  • O momento em que as pesquisas comunitárias são realizadas é fundamental:
    • O viés de memória dos inquiridos aumentará com o passar do tempo desde a distribuição. No entanto, a realização de um inquérito imediatamente após a distribuição pode não proporcionar tempo suficiente para que as famílias integrem o SBD MTI suas MTI domésticas MTI .
  • As pesquisas podem ser usadas para estimar:
    • Porcentagem de famílias com crianças em idade escolar elegíveis que receberam um SBD MTI
    • Características das famílias com crianças em idade escolar elegíveis que não receberam o SBD MTI
    • Percentagem de SBD MTI pelas famílias
    • Razões pelas quais os SBD MTI não MTI mantidos pelas famílias
    • Cobertura domiciliar e populacional do MTI
    • Contribuição do SBD MTI MTI das famílias e da população MTI (requer dados sobre outros MTI família e composição familiar)
    • Utilização do SBD MTI, por quem e por quantas pessoas
    • Percepções e experiências dos membros da comunidade sobre o programa SBD (por exemplo, alcance e recordação das MSC )

Para melhorar o planeamento e a implementação do SBD, é fundamental que M&A sejam analisados e os resultados interpretados e utilizados. Após a análise pela M&A , a equipa de coordenação do SBD deve identificar e documentar os sucessos, desafios e lições aprendidas para informar as atividades futuras do SBD.

  • Os planos elaborados no início de uma estratégia SBD são normalmente pragmáticos, mas podem ser excessivamente otimistas. A revisão formal regular dos dados de monitorização e supervisão, através de reuniões de gestão regulares nos níveis apropriados, fornecerá informações sobre as lições aprendidas e melhorará o desempenho futuro.
  • É muito provável que sejam necessárias modificações e melhorias, mas estas devem ser vistas como oportunidades bem-vindas para fortalecer o sistema, especialmente nos primeiros anos de implementação de uma nova abordagem SBD.
  • O desempenho de um sistema SBD pode variar ao longo do tempo e entre contextos. Planos que funcionaram bem uma vez, e num determinado local, podem precisar de ser ajustados. Mesmo depois de um sistema estar em funcionamento há vários anos, provavelmente será necessário um acompanhamento contínuo, revisões regulares e ajustes.

Quem deve analisar os dados, para quê e em que níveis?

Professores e diretores
Analisem o desempenho da sua turma e da escola, considerando o número de MTI em comparação com o número esperado a ser distribuído com base nos dados de matrícula e no número de crianças presentes no dia do SBD.

Diretores
Refletir sobre o fluxo do processo de SBD na escola, com a contribuição dos professores, para informar ajustes futuros.

Estruturas subnacionais
Um ponto-chave para a revisão de dados subnacionais, incluindo a identificação de escolas ou grupos com resultados abaixo do esperado. MdE subnacionais MdE podem ter alguma margem de manobra para modificar as abordagens operacionais utilizadas na sua área, conforme apropriado, com base nas conclusões. Algumas recomendações podem ser melhor comunicadas à cadeia de supervisão a um nível superior ou nacional, para que sejam feitas alterações ao modelo a nível nacional, caso sejam comunicadas conclusões semelhantes em todo o país.

Realizar reunião (anual) de revisão do processo
Com a distribuição ocorrendo normalmente uma vez por ano, é vital garantir que uma reunião anual de revisão pós-distribuição seja agendada para avaliar o desempenho e permitir uma revisão oportuna dos planos para o ano seguinte.

  • A revisão deve basear-se nas experiências dos participantes e não apenas em dados numéricos, ou seja, deve ser qualitativa e quantitativa. As partes interessadas, incluindo estudantes e comunidades, escolas, divisões subnacionais e o nível nacional, devem ser envolvidas e incluir todos os departamentos ou organizações envolvidos.
  • Os dados relativos à formação, monitorização, supervisão e distribuição devem ser recolhidos e analisados, e os sucessos, desafios e lições aprendidas devem ser sintetizados.
  • Devem ser realizadas reuniões de revisão do processo subnacional para divulgar as conclusões e recolher as experiências pessoais das partes interessadas. As conclusões das reuniões subnacionais podem ser incorporadas numa reunião nacional.
  • Deve ser elaborado e divulgado um relatório final, incluindo uma lista clara de recomendações e ações orçamentadas a serem implementadas para o próximo SBD, com prazos realistas e pontos focais para cada ação.

As seguintes lacunas de conhecimento sobre SBD podem ser de interesse para programas, parceiros de implementação e financiadores de SBD.

  • Destino dos MTI pelos estudantes: quantification MTI pressupõem que MTI redistribuídos dentro e fora dos agregados familiares. Compreender MTI é importante para verificar o quantification . A informação também pode ser útil para permitir que os países compreendam se a combinação de canais que escolheram pode deixar alguns subgrupos da população sem acesso aos MTI.
  • As escolas podem desempenhar um papel como ponto MTI contínua MTI para famílias sem crianças em idade escolar, a fim de aumentar o acesso à MTI uma percentagem maior da população?
  • Qual é a viabilidade de distribuir MTI nas escolas, em vez de fazê-lo durante um evento de distribuição anual ou semestral?
  • Pesquisar a estratégia mais eficaz para combinar diferentes DC para alcançar o maior número de pessoas da maneira mais equitativa deve ser um tema prioritário a ser considerado.

Recursos

  • Formulários de monitorização de rotina MTI [Word] EN | FR | PT
  • O protocolo para avaliação do DC que pode ser modificado para se adequar às necessidades do SBD) está disponível aqui [Word]. O questionário da pesquisa associada está aqui [Word].