Évaluation

L’évaluation tente de déterminer et mesurer objectivement si nous avons atteint nos objectifs du programme initialement fixés. Nous utiliserions cette phase pour déterminer si nous avons affecté le comportement que nous cherchions à influencer dans la phase de planification, et dans quelle mesure nos efforts de communication ont contribué à ces résultats. Dans l’idéal, cette mesure est comparée aux données d’origine à l’inclusion, recueillies dès que possible.

• L’évaluation du résultat vise à déterminer si les objectifs de communication, souvent énoncés en termes de changements comportementaux ou sociaux, ont été atteints dans un délai donné ; et

• L’évaluation de l’impact porte sur la durabilité des changements identifiés dans les évaluations des résultats passé un certain délai après la fin du programme ; elle détermine si l’objectif global a été atteint et analyse le rôle qu’a joué la communication stratégique. 

Certains indicateurs d’évaluation seront similaires à ceux du suivi. Une évaluation déterminera si nos interventions ont été suffisantes et pertinentes pour obtenir des résultats à court, moyen et long terme.

Les étapes d’une évaluation :

Développer des indicateurs d’évaluation

Les éléments suivants pourraient tenir lieu d’indicateurs d’évaluation d’un programme élargi de vaccination ou des Journées nationales de vaccination contre la poliomyélite :

Connaissances

• Pourcentage des publics cibles touchés par les messages.
• Pourcentage des publics cibles qui ont connaissance du programme de vaccination national.
• Pourcentage des publics cibles capables de donner deux motifs corrects justifiant le déploiement des Journées nationales de vaccination contre la poliomyélite.
• Pourcentage des publics cibles ayant connaissance du lien entre la vaccination de routine et les Journées nationales de vaccination contre la poliomyélite.
• Pourcentage des publics cibles capables de définir correctement la PFA.
• Pourcentage des publics cibles capables d’expliquer correctement pourquoi les membres de la communauté doivent signaler les cas de PFA.
• Pourcentage des publics cibles capables de décrire correctement le processus de signalement des cas de PFA.

Attitude

• Pourcentage des publics cibles qui pensent que les enfants doivent être vaccinés.
• Pourcentage des publics cibles qui pensent que le vaccin administré pendant la vaccination de routine et celui administré pendant les Journées nationales de vaccination contre la poliomyélite sont :
• Identiques
• Tous les deux sans danger
• Tous les deux nécessaires

Comportements

• Pourcentage d’enfants de moins de cinq ans recevant le VPO2 et les vaccins des Journées nationales de vaccination contre la poliomyélite.
• Pourcentage du personnel qui vaccine communiquant des messages sur la vaccination aux personnes s’occupant d’enfants sur les sites de vaccination.
• Partenaires et organisations participant activement aux activités des Journées nationales de vaccination contre la poliomyélite, p. ex., en participant à au moins 80 % des réunions de comité entre les Journées nationales de vaccination contre la poliomyélite ou en faisant du bénévolat pour le PEV.
• Pourcentage de personnes signalant les cas de PFA.
• Nombre de cas de PFA signalés.

Pérennité

• Niveau de soutien des politiques et du leadership.
• Niveau de financement gouvernemental et autre.
• Structures établies pour encadre la communication à différents niveaux : national, régional et communautaire.
• Niveau d’institutionnalisation des processus de communication basés sur les études.
• Qualité des programmes de communication à long terme développés.
• Degré d’implication de la communauté dans la planification, le financement, la mise en œuvre, le suivi et l’évaluation des activités de communication.
• Niveau de décentralisation de l’affectation des ressources et de la direction du programme.

Établir des objectifs d’évaluation

Sur la base des indicateurs d’évaluation et d’autres éléments importants du projet, développer des objectifs d’évaluation. Les questions suivantes devraient faciliter la définition d’objectifs d’évaluation :

• Comment souhaitons-nous utiliser les résultats de l’évaluation ?
• Quelles décisions souhaitons-nous que les informations issues de l’évaluation nous aident à prendre ?
• Que devons-nous impérativement mesurer pour obtenir les informations qu’il nous faut ?
• Quel est le montant du financement dont nous disposons pour l’évaluation ? (L’envergure et la complexité de l’évaluation sont à adapter selon le financement disponible.)

Déterminer le modèle et les méthodes

Choisir une association de méthodes de recherche et de taille d’échantillon cohérentes avec les informations recherchées définies dans les objectifs.

Recueillir les données

Le format de la collecte des données dépendra du modèle de recherche.

Analyser des données

Analyser les données pour indiquer les changements en matière de connaissances, d’attitudes et de pratiques.

Utiliser les données de la recherche

En général, les données de la recherche et de l’évaluation servant à orienter la planification sont absentes des programmes de communication EPI. Il arrive aussi que les données d’étude soient disponibles, mais pas utilisées. La raison de cette absence est généralement que les planificateurs du programment sont débordés et préfèrent remettre au lendemain, « quand ils auront le temps de lire et systématiser les données de recherche ».

Pour faciliter l’utilisation des données recueillies pendant la recherche et l’évaluation :

• Élaborer une version résumée des principaux résultats et de leurs implications en matière de planification.
• Communiquer les résultats aux membres de l’équipe EPI et aux organismes collaborateurs, par exemple lors d’une réunion de l’ICC ou d’une réunion spéciale de communication.
• Utiliser les résultats pour définir de meilleures stratégies.
• En s’appuyant sur les résultats de la recherche, du suivi et de l’évaluation, passer à l’étape suivante du développement du programme