Lunité 8 porte sur les questions dévaluation en se plaçant du point de vue des agents de terrain. Les détails donnés se limitent donc uniquement aux aspects que ces derniers peuvent maîtriser. Cette unité na pas lambition de permettre aux participants daller sur le terrain évaluer seuls des projets ou des programmes de façon indépendante.
On y explique la différence entre les activités de surveillance et dévaluation, afin que lagent de terrain ait un cadre de discussion pour commenter ces activités avec les représentants de la communauté.
Tout travail de projet, quil se termine par une évaluation dimpact finale ou pas, nécessite que des rapports soient rédigés. Cette unité apporte aux agents de terrain les critères de base quant au contenu de tels rapports. Cest au superviseur ou à tout autre supérieur hiérarchique quil incombe de rédiger des rapports de projets plus complets que ceux décrits dans cette unité.
OBJECTIFS
A lissue de cette unité, les participants seront capables de:
Comprendre le concept de durabilité et den garder à lesprit les indicateurs.
OUTILS NÉCESSAIRES
Supports de cours 8.1 à 8.11 à distribuer.
Temps suggéré pour le cours: 2 heures 30 minutes.
1. Lévaluation est importante car elle permet à la communauté:
dajuster les plans daction.
2. La surveillance implique la collecte organisée des informations sur les activités de projet pendant quelles sont encore en cours et leur interprétation par la communauté, en collaboration avec lagent de terrain.
3. Un rapport bien rédigé contient:
des conclusions et des recommandations.
4. La durabilité.
Une participation communautaire, des bénéfices sociaux et économiques pour les habitants, ainsi quun transfert de compétences et de nouvelles technologies vers la communauté favoriseront la pérennité dun projet sans avoir recours à une aide extérieure.
Distribuer le support de cours 8.1 «Définition des termes utilisés en évaluation». Introduire la définition dun indicateur.
Vous avez déjà vu la définition des données de référence. Ceci nest donc quun rappel:
Données de référence: |
Elles décrivent la situation avant quun programme de nutrition ne soit mis en uvre. Ces données sont nécessaires pour voir clairement ce qui doit être fait et pour que les changements qui sopèrent, en tant que conséquences du programme, puissent être mesurés. |
Les problèmes ne peuvent être identifiés que si nous avons une image précise de la situation dans une région. On lobtient en rassemblant les informations sur la situation telle quelle est avant le début dun programme. Tout changement par rapport à la situation de départ peut être identifié par les indicateurs:
Indicateur: |
Toute information utilisée pour mesurer les changements qui sopèrent durant le cours dun programme est un indicateur. |
Les indicateurs ne décrivent pas tout ce qui arrive mais ils donnent une bonne idée de ce qui est en train de se passer. Ils vous permettent de surveiller les progrès dun projet.
Donner des exemples dindicateurs aux participants.
Par exemple, vous êtes impliqué dans un programme pour améliorer lhygiène de lenvironnement et réduire le nombre de cas de maladies qui en découlent telles que les ankylostomes et les diarrhées. Lactivité choisie pour combattre ces problèmes est dencourager la construction et lutilisation de fosses daisance, qui nexistent pas dans la région pour le moment.
Quels indicateurs pourrait-on utiliser pour surveiller le succès de ce programme?
Laisser dabord les participants réagir spontanément, puis intervenir.
Les participants doivent répondre:
Distribuer le support de cours 8.2 «Exemples dindicateurs» pour étoffer la discussion.
En utilisant les deux premiers indicateurs, et en comparant les deux derniers, lagent de terrain peut voir si le programme a un impact sur la situation sanitaire.
Si vous gardez un il sur les indicateurs, vous navez pas besoin de passer beaucoup de temps à vérifier point par point tout le programme. Toutefois, lors du choix des indicateurs, faites en sorte den inclure quelques-uns qui vous permettront de voir si le programme a des effets secondaires imprévus.
Se référer au support de cours 8.1. Introduire la définition et le but de lévaluation.
Tout dabord une définition des activités dévaluation:
Évaluation: |
Cest lappréciation systématique du succès dune activité. On pourra juger si une activité a le succès escompté en comparant la cible spécifiée dans lobjectif aux changements que lactivité a réellement provoqués. |
La performance dun projet ou dun programme est évaluée en fonction de ses objectifs. Nombreuses sont les personnes qui seront intéressées par les résultats de votre projet, quils correspondent ou non aux objectifs fixés.
Qui peut être intéressé par les résultats de votre travail?
Les participants doivent répondre:
Pourquoi lévaluation est-elle importante?
Les participants doivent répondre:
Si les habitants dune communauté participent à un programme de nutrition, ils doivent savoir que leurs efforts en valaient la peine.
Si les agents de terrain travaillent sur des projets particuliers, ils doivent savoir ce que le projet a accompli.
Si notre pays consacre des ressources à la nutrition, nous voulons tous savoir si ces ressources sont utilisées de manière efficace.
Si les personnes planifient et supervisent les actions nutritionnelles, elles doivent savoir la valeur relative des différents projets.
Distribuer le support de cours 8.3 «Importance de lévaluation» et discuter des trois différents types dévaluation.
Le type 1 répond à la question: Le changement survenu chez les personnes correspond-il à vos attentes?
Les activités dévaluation ont pour but de décrire si le projet a abouti à un changement de comportement des personnes et de leurs conditions de vie. Le travail utilise les objectifs du projet pour juger de la valeur des changements (voir lunité 5 sur les objectifs).
Le type 2 répond à la question: Le changement a-t-il eu leffet escompté sur le problème?
Les activités dévaluation sont utilisées pour estimer limpact souhaité du projet sur le problème. Le travail utilise les objectifs du projet pour juger de la valeur des changements (voir lunité 5 sur les objectifs).
Le type 3 répond à la question: Le changement aurait-il pu être atteint dune façon moins onéreuse?
Les activités dévaluation incluent également lanalyse de situations extérieures au projet de façon à disposer déléments de comparaison sur lefficacité et le coût. Le coût de vos activités peut être justifié par limportance du changement dans le comportement des personnes et limpact sur le problème.
Ces trois types dévaluation doivent être utilisés en combinaison pour évaluer globalement le projet.
Dresser les grandes lignes de plusieurs activités dévaluation appropriées en utilisant la situation et les questions suivantes. Distribuer le support de cours 8.4 «Evaluer un projet». |
Situation:
Données de référence:
Les fermiers de ma région perdent un cinquième de leur réserves en grains à cause des rats.
Objectif du projet:
Prévenir la perte en grains due aux rats pour 25 pour cent des fermiers dici à un an.
Vos activités:
Avant la prochaine récolte, je tiendrai une série de réunions pour expliquer lintérêt des greniers à lépreuve des rats et jobtiendrai ladhésion de 25 pour cent des fermiers pour quils en construisent.
Quels moyens peut utiliser votre superviseur pour mesurer si 25 pour cent des fermiers ont bien des greniers à lépreuve des rats avant que le projet ne soit fini?
Les participants doivent répondre:
Identifier les fermiers qui ont des greniers à lépreuve des rats (le chiffre peut être obtenu à partir des registres de lagent de terrain, qui montrent la réaction des fermiers par rapport aux conseils).
Comparer ce chiffre au nombre total de fermiers (à partir des listes communautaires ou bien de létude des données de référence) pour voir si cela représente 25 pour cent de la population. Pour le calculer:
Par exemple:
Distribuer le support de cours 8.5 «Calculer les résultats de lévaluation» pour soutenir la discussion.
Comment pouvons-nous savoir si lobjectif du projet de lagent de terrain a été atteint suite aux activités du projet?
Les participants doivent répondre:
En vérifiant quune série de réunions a bien été organisée.
En vérifiant le nombre et lidentité des fermiers qui ont assisté aux réunions.
En vérifiant combien de ces fermiers répertoriés ont accepté le principe des greniers à lépreuve des rats.
En vérifiant si ce chiffre correspond à 25 pour cent du nombre total de fermiers dans la communauté.
Dans le cas où 50 fermiers étaient touchés par ce fléau dans la région et où 25 dentre eux avaient des greniers à lépreuve des rats, le programme du superviseur a bien atteint son objectif.
Sil ny avait que dix fermiers à avoir des greniers à lépreuve des rats, pourrait-on dire que le projet a échoué?
Les participants doivent répondre:
Quelles sont les raisons qui ont pu retenir les fermiers de construire des greniers améliorés?
Les participants doivent répondre:
Que devrait mesurer lagent de terrain si lobjectif était que 25 pour cent des grains soient sauvés, au lieu que 25 pour cent des fermiers aient construit des greniers à lépreuve des rats?
Les participants doivent répondre:
Mesurer la quantité de grains endommagée par les rats dans ces greniers.
Comparer ces pertes à celles subies avec les anciens greniers pour voir si elles ont diminué en utilisant la méthode de calcul des pourcentages expliquée plus haut.
Tout nouveau projet doit être suffisamment flexible pour sadapter aux problèmes identifiés lors des évaluations de façon à améliorer limpact futur des efforts entrepris par les agents de terrain.
Tout projet peut avoir des résultats auxquels on ne sattendait pas. Nous pouvons identifier un problème et établir notre objectif afin de le résoudre. Nous mettons alors en place un plan destiné à atteindre lobjectif pour découvrir au bout du compte que le problème na pas été résolu.
Introduire lidée que les projets peuvent affecter beaucoup plus de situations que celles qui sont décrites dans les objectifs. Il arrive parfois que les effets soient négatifs. Il arrive aussi que les effets dépassent les espérances.
Montrer par exemple la situation suivante aux participants:
Distribuer le support de cours 8.6 «Résultats inattendus dans un projet» et lire la situation.
Dans un village où le taux de malnutrition protéino-énergétique était élevé parmi les jeunes enfants, un projet fut mis en place avec succès pour construire des viviers à poissons dans la plupart des fermes. Les poissons furent pratiquement tous vendus. Les mères nen donnèrent jamais à manger à leurs jeunes enfants car elles craignaient quils avalent les arêtes.
Dans cet exemple, lobjectif à atteindre, qui était la construction de viviers, na pas résolu le problème de la malnutrition protéino-énergétique. Les enfants ont continué à souffrir de malnutrition.
Quelle a été lerreur commise par lagent de terrain?
Les participants doivent répondre:
Un autre exemple:
Se référer au support de cours 8.6 et lire le texte.
Dans un petit village, un projet pour améliorer la santé des femmes enceintes avait lobjectif suivant: persuader toutes les femmes enceintes du village souffrant danémie de prendre des comprimés de fer, quelles pouvaient acheter au centre de santé, sur une période de trois mois.
Quand le projet a été établi, lagent de terrain rencontra toutes les femmes enceintes qui souffraient danémie. Elle leur expliqua le rôle du fer dans lalimentation et quon le trouvait dans les légumes verts frais essentiellement. Malheureusement, ces derniers ne sont pas toujours disponibles.
Une plante locale, très riche en fer, du même genre que le cresson, poussait dans une rivière à quelques kilomètres du village. Elle pensa que la distance poserait un problème et décida donc que la solution la plus facile était que les femmes enceintes se rendent au dispensaire pour sapprovisionner en comprimés de fer.
Quand lagent de terrain revint au village quatre mois plus tard, elle fut heureusement surprise de découvrir que tous les cas danémie due à la carence en fer avaient disparu. Elle vérifia auprès de la clinique et fut étonnée dapprendre que très peu de comprimés de fer avaient été délivrés. En discutant avec les femmes, elle apprit que les femmes enceintes nétaient pas prêtes à dépenser le peu dargent quelles avaient à lachat de ces comprimés. Du coup, les femmes du village sétaient organisées elles-mêmes pour ramasser la plante fraîche près de la rivière chaque matin.
Qua oublié de faire lagent de terrain lors de la planification?
Les participants doivent répondre:
Lagent de terrain na pas cherché à savoir auprès des mères si les comprimés de fer étaient suffisamment importants à leurs yeux pour quelles aient envie den acheter.
Lagent de terrain na pas vérifié si les femmes avaient lhabitude de partager leurs ressources et dorganiser ensemble des activités.
Voici enfin un exemple de projet qui a eu des bénéfices additionnels inattendus.
Se référer au support de cours 8.6 et lire le texte.
Dans un village où le taux de malnutrition protéino-énergétique était élevé chez les jeunes enfants, un projet fut mis en place avec succès pour construire des bassins à poissons dans une majorité de fermes. Lagent de terrain découvrit que, sur leur propre initiative, les villageois avaient profité également de ces bassins pour y élever des canards. Ainsi, pendant que les jeunes enfants consommaient des protéines supplémentaires grâce aux poissons, le village tirait également profit de la vente des canards.
Lévaluation et la surveillance sont des activités complémentaires.
Introduire la définition et le but de la surveillance. Se référer au support de cours 8.1.
Voici tout dabord la définition des activités de surveillance:
Surveillance: |
Elle implique la collecte organisée et linterprétation des informations sur les activités en cours. |
La surveillance vous permet dajuster vos actions avant quelles ne prennent une mauvaise direction, alors que lévaluation vous permet seulement dapprécier ce qui a été fait. Ceci mis à part, les procédés sont identiques.
Une partie essentielle de la surveillance consiste à enregistrer tout ce qui concerne le projet pour fournir des données à lagent de terrain. Les agents de terrain sont supposés noter tout ce qui a trait à leurs activités. Cest une tâche contraignante mais ces notes sont essentielles parce quelles servent doutils de surveillance et de vérification du travail de terrain. Pour éviter un travail trop important de paperasserie, demandez-vous ce quil est important de noter avant de vous lancer dans la rédaction dune note et de son classement.
Les registres interviennent comme éléments dalerte. Ils vous permettent de réajuster le tir. Grâce à cela, vous pouvez sauver un projet qui sinon aurait pu tourner à léchec.
Les registres servent également de base pour une coopération réussie avec dautres organisations locales.
ÉTUDE DE CAS: INTERPRÉTER LES RÉSULTATS DÉTUDES
Comment pouvons-nous utiliser linformation que nous enregistrons?
Le but de cette étude de cas est de donner aux participants une opportunité dinterpréter des notes et de proposer des suggestions quant à leur utilisation.
1. Distribuer le support de cours 8.7 «Interpréter les résultats détudes». Accorder 15 minutes aux participants pour la lecture du document.
2. Que peut conclure M. Karamba de cette étude?
Etudier les suggestions des participants une par une, en vérifiant que les points suivants ont été traités:
3. Comment M. Karamba doit-il utiliser ces résultats?
Les participants peuvent répondre:
ÉTUDE DE CAS: UTILISATION DES REGISTRES
Le but de cet exercice est de montrer le genre dinformation quun agent de terrain peut être amené à rassembler pour un projet spécifique dans sa région.
Partie A Avant la construction du centre de nutrition
1. Diviser les participants en groupes de trois ou quatre. Distribuer le support de cours 8.8 «Utilisation des registres» et leur demander dimaginer quils sont à la place de Mme Bamba. On a demandé à cette dernière de fournir des informations pour soutenir un centre de réhabilitation dans son village.
2. Accorder dix minutes pour la lecture et la discussion. Demander aux participants les informations quils jugent nécessaires de fournir et les notes quutiliserait Mme Bamba pour obtenir les renseignements demandés sous les intitulés présentés dans la lettre.
3. Discuter les suggestions de chaque groupe en utilisant les notes ci-dessous comme référence.
De la nécessité dun centre
facilités actuellement disponibles pour traiter ces enfants.
Ces informations se trouvent parmi les données de référence fournies pour létude et les registres du centre de soin.
Fonds nécessaires à la construction du centre
Estimation du coût de fonctionnement, y compris les salaires, les services et la nourriture, quelle peut obtenir en comparant son registre de dépenses de projet à celui des autres agents de terrain. Coûts de construction, etc..., ne sont pas de son domaine de compétence. Elle devra consulter des entreprises locales en bâtiment pour lestimation de ces coûts.
Temps que Mme Bamba passera sur ce centre et sur ses autres projets
succès relatif et valeur des autres projets.
Elle aura ce renseignement à partir de son agenda, des dossiers du projet et du calendrier, qui lui permettront de voir le temps quelle passe sur chacune de ces activités.
Renseignements et aide demandés aux autres organisations et communautés
Les exigences probables pour les soins médicaux face à lexpertise nutritionnelle. Par exemple, le pourcentage actuel dhospitalisation, la date du programme des vaccins, et ainsi de suite, seront demandés à lagent médical du district.
Le niveau déducation des personnes concernées sera obtenu de lenseignant local.
Linformation concernant la disponibilité des aliments appropriés aux enfants qui quittent le centre et rentrent chez eux sera obtenue lors des réunions habituelles quelle a avec les autres agents de terrain de la région.
Lintérêt de la communauté à participer au coût de ce centre.
Partie B Quand le centre est construit
4. Les participants continuent à travailler avec leur groupe. Leur distribuer le support de cours 8.9 «Utilisation des registres».
Quelles informations Mme Bamba peut-elle donner dans le rapport de situation une fois que le centre est construit, de façon à ce que les décisions puissent être prises pour les trois points mentionnés dans la lettre? Quels registres, par conséquent, devra-t-elle garder au centre? Et quels autres registres devra-t-elle consulter?
5. Discuter les suggestions de chaque groupe avec les notes ci-dessous comme repère.
La fréquentation du centre est-elle importante?
Fréquentation potentielle.
Ces points doivent être traités dans les registres du centre.
Quel est le succès de ce travail au centre?
Etat nutritionnel actuel des personnes qui en bénéficient.
Etat nutritionnel des enfants qui en ont bénéficié un an après leur sortie. Les registres de santé du centre doivent indiquer ces points.
Réadmission des enfants déjà soignés au centre ou admission dautres enfants dune même famille. (Cela permet dindiquer le succès des campagnes déducation quon doit trouver dans les registres du centre.)
Autres facteurs (par exemple, une bonne ou mauvaise récolte, autres projets, etc.). Ces renseignements doivent venir des discussions avec les autres agents de terrain.
Informations sur la population locale, facilités actuelles et état nutritionnel des personnes en général, que vous obtiendrez des études récentes.
Cela vaut-il la peine de mettre en place le même genre de centre ailleurs dans le pays?
Similarité de lexpérience du centre comparée au reste du pays en fonction:
de la disponibilité alimentaire locale et des habitudes alimentaires.
Le coût du centre, y compris les contributions communautaires, obtenu à partir:
des comptes du projet.
Le taux de réussite des projets.
Peu importe la façon dont les participants collectent et interprètent les informations, ce qui fera la qualité dun bon système de registre, cest la façon dont lagent de terrain transmet les informations aux autres dans les rapports quil rédige. Cest le cas en particulier des rapports adressés aux supérieurs et des rapports plus succincts destinés aux collègues. Si vous ne les rédigez pas avec soin, et de façon précise et claire, vous aurez perdu du temps, les décisions seront retardées et, parfois, même le choix des décisions ne sera pas le bon.
Présenter les caractéristiques dun bon rapport sur les activités de terrain. Les conclusions doivent être basées sur les observations personnelles de lagent de terrain, à partir des activités de surveillance et, quand elles savèrent utiles, des activités dévaluation.
Quelles sont les caractéristiques dun rapport bien rédigé?
Les participants doivent répondre:
Une mention de la période sur laquelle porte le rapport. Par exemple, si une visite de terrain a été entreprise, préciser la date.
Une description brève mais complète du but du rapport et quelles activités précisément sont concernées.
Un résumé qui décrit la façon dont le rapport est structuré pour que les lecteurs puissent trouver facilement la partie du rapport qui les intéresse en particulier.
Une liste des personnes impliquées dans le rapport, quand cela est approprié. Cela est particulièrement utile pour les rapports de visites de terrain dans lesquels vous devez toujours mentionner toutes les personnes que vous avez rencontrées et à quel titre.
Une distinction claire tout au long du rapport entre ce qui a été dit, ce qui a été observé, ce qui a été vérifié par plusieurs sources, et les opinions.
Des phrases qui sont simples, claires et faciles à comprendre.
Des conclusions et des recommandations pour les activités de suivi.
Un bon rapport est également rendu à temps et non pas avec une semaine de retard. La faute la plus grave, mais malheureusement la plus courante, que commettent ceux qui rédigent des rapports est de ne pas différencier les faits des opinions. Si le lecteur narrive pas à séparer les faits des opinions, il est alors très difficile de prendre la bonne décision. Il faudrait sappliquer à faire cette distinction chaque fois que lon rédige un rapport. En appliquant cette règle, le rédacteur lui-même aura une idée plus claire de ce qui se passe.
Distribuer le support de cours 8.10 «Caractéristiques dun rapport bien rédigé» et résumer la discussion.
EXERCICE: RÉDIGER UN RAPPORT
En utilisant les conclusions de la discussion de groupes sur létude de cas décrite dans les supports de cours 8.8 et 8.9, demander à chaque participant de rédiger un rapport sur la situation en cours pour le superviseur de Mme Bamba, selon les caractéristiques énoncées plus haut. Ce rapport doit être bref et décrire réellement ce que le superviseur de Mme Bamba souhaite savoir et répondre aux questions quil a posées dans sa lettre (première page du support de cours 8.9). Accorder 30 minutes pour y réfléchir, 15 minutes pour la rédaction et 15 minutes pour les discussions en groupe.
Puis séparer les participants en petits groupes et leur demander de voir ensemble les critiques quils ont à faire sur les autres rapports, en se basant sur le support de cours 8.10 pour structurer leur discussion.
Introduire lidée que le terme durabilité doit être relié au concept de «développement durable». Ce terme a été adopté globalement pour étayer les objectifs de développement économique, lutilisation efficace de toutes les ressources naturelles et la préservation de lenvironnement dans le temps. Les participants doivent être capables de comprendre comment intégrer la notion de durabilité dans les programmes de terrain.
Que signifie la durabilité dans les projets ou programmes de terrain?
Les participants doivent répondre:
La durabilité signifie que les programmes doivent, après une période de temps raisonnable, pouvoir se suffire à eux-mêmes.
Les programmes ne doivent pouvoir compter que sur les services courants des institutions locales et des bénéficiaires.
Ils doivent être des programmes qui durent.
Les programmes doivent continuer à exister et servir les bénéficiaires de la communauté même quand laide extérieure prend fin.
La durabilité est un critère majeur pour évaluer le succès ou léchec des projets ou des programmes.
Indicateurs de durabilité
Distribuer le support de cours 8.11 «Durabilité» et lancer une discussion.
Pour quun projet ou un programme soit durable, certains facteurs essentiels doivent y avoir été intégrés ou y sont inhérents. Cela inclut:
Une protection des ressources pour les générations futures.
La participation communautaire passe par limplication active et significative de la communauté dans le processus de prise de décision pour la détermination dobjectifs ayant une chance de succès et lallocation des ressources pour atteindre de tels objectifs.
Quels avantages ou effets la participation communautaire aura sur un programme de terrain?
Les participants doivent répondre:
Servir à inculquer la discipline.
Outre la durabilité, les approches participatives offrent trois grands avantages:
Elles donnent à lagent de terrain une meilleure compréhension des valeurs locales ainsi que des connaissances et une expérience.
Elles obtiennent lintérêt de la communauté et son adhésion pour développer des projets avec de bons objectifs pour les mettre en uvre.
Elles peuvent aider à résoudre des conflits au sujet de lutilisation des ressources.
Une technologie est appropriée, et donc durable, si elle est comprise et maîtrisée par les bénéficiaires afin que les outils puissent être réparés et entretenus localement.
Quelles sont les autres compétences qui peuvent être transférées à la communauté par lagent de terrain?
Les participants doivent répondre:
Se recycler pour générer des revenus en simpliquant dans des activités comme la production alimentaire, la transformation, le stockage et la commercialisation par exemple.
Apprendre pour mieux servir la communauté, par exemple en aidant lors des accouchements, ou dans le cadre des programmes de nutrition et dalimentation de la collectivité.
Un programme de terrain doit être capable de faire ressortir les aptitudes et les compétences des bénéficiaires, de façon à ce quils deviennent sûrs deux et utilisent les compétences récemment acquises pour gérer les ressources locales qui génèrent des revenus suffisants afin de répondre à leurs besoins alimentaires et nutritionnels et à ceux de leur famille, ainsi quà leurs autres obligations sociales.
La durabilité dépend du rôle important joué par les groupes de la communauté (cest-à-dire les associations de femmes mais aussi dhommes, les groupes parents/enseignants, les groupes religieux) à mobiliser la communauté et à prendre les décisions concernant les diverses activités une fois quils sont convaincus de leur importance pour leur bien-être. De telles organisations servent de forums de discussion, danalyse et de réflexion contribuant ainsi à la capacité des membres à comprendre et à trouver des solutions à leurs problèmes.
Quels sont les avantages sociaux et économiques potentiels pour les bénéficiaires dun programme de terrain?
Les participants doivent répondre:
Quand les bénéficiaires dun programme perçoivent réellement son utilité, il y a de fortes chances pour quils le soutiennent et y coopèrent totalement, contribuant ainsi à sa durabilité.
DÉFINITION DES TERMES UTILISÉS EN ÉVALUATION
Données de référence: |
Elles décrivent la situation avant quun programme de nutrition ne soit mis en uvre. Ces données sont nécessaires pour voir clairement ce qui doit être fait et pour que les changements qui sopèrent, en tant que conséquences du programme, puissent être mesurés. |
Indicateur: |
Toute information qui est utilisée pour mesurer les changements qui sopèrent durant le cours dun programme est un indicateur. |
Evaluation: |
Cest lappréciation systématique du succès dune activité. Pour savoir si une activité a réussi ou non, il faut comparer la cible spécifiée dans lobjectif aux changements que lactivité a réellement provoqués. |
Surveillance: |
Elle implique la collecte organisée et linterprétation des informations sur les activités en cours. |
EXEMPLES DINDICATEURS
Le nombre de foyers ayant des fosses daisance.
La fréquence dutilisation de ces commodités.
Le nombre de cas de diarrhées et dinfestations par ankylostomes parmi les ménages ayant des commodités.
Le nombre de cas de ces maladies parmi les autres ménages de la communauté.
IMPORTANCE DE LÉVALUATION
Pourquoi est-il important de faire une évaluation?
Elle nous permet destimer ce qui a été accompli.
Elle nous permet dinformer les personnes sur ce qui a été accompli.
Elle nous permet de juger de la valeur du résultat.
Elle nous permet dajuster les projets futurs à la lumière des résultats des activités précédentes.
Trois types dévaluation peuvent être utilisés:
Le type 1 répond à la question: Le changement survenu chez les personnes correspond-il à vos attentes?
Les activités dévaluation ont pour but de décrire si le projet a abouti à un changement de comportement des personnes et de leurs conditions de vie. Le travail utilise les objectifs du projet pour juger de la valeur des changements (voir lunité 5 sur les objectifs).
Le type 2 répond à la question: Le changement a-t-il eu leffet escompté sur le problème?
Les activités dévaluation sont utilisées pour estimer limpact souhaité du projet sur le problème. Le travail utilise les objectifs du projet pour juger de la valeur des changements (voir lunité 5 sur les objectifs).
Le type 3 répond à la question: Le changement aurait-il pu être atteint dune façon moins onéreuse?
Les activités dévaluation incluent également lanalyse de situations extérieures au projet de façon à disposer déléments de comparaison sur lefficacité et le coût. Le coût de vos activités peut être justifié par limportance du changement dans le comportement des personnes et limpact sur le problème.
ÉVALUER UN PROJET
Données de référence: |
Les fermiers de la région perdent un cinquième de leurs réserves en grains à cause des rats |
Objectif du projet: |
Prévenir la perte en grains stockés causée par les rats pour 25 pour cent des fermiers en moins dun an. |
Vos activités: |
Avant la prochaine récolte, organiser une série de réunions pour expliquer lintérêt des greniers à lépreuve des rats et obtenir ladhésion de 25 pour cent des fermiers pour quils construisent ce type de grenier. |
Comparer le résultat final du projet avec les objectifs:
Identifier les fermiers qui ont dératisé leurs greniers.
Comparer leur nombre au nombre total des fermiers pour voir sils représentent 25 pour cent de la population.
Mesurer la perte en grains due aux rats dans ces greniers.
Comparer ces pertes à celles subies dans les anciens greniers pour voir si elles ont été réduites.
CALCULER LES RÉSULTATS DE LÉVALUATION
Comment un superviseur peut-il mesurer si le programme a bien atteint son but?
Identifier les fermiers qui ont dératisé leurs greniers.
Comparer leur nombre au nombre total de fermiers pour voir sils représentent 25 pour cent de la population. Pour le calcul, utiliser:
Par exemple:
· Mesurer la perte en grains due aux rats dans ces greniers.
· Comparer ces pertes avec celles subies dans les anciens greniers pour voir sil y a eu une diminution.
RÉSULTATS INATTENDUS DANS UN PROJET
Situation 1:
Dans un village où le taux de malnutrition protéino-énergétique était élevé parmi les jeunes enfants, un projet fut mis en place avec succès pour construire des viviers à poissons dans la plupart des fermes. Les poissons furent pratiquement tous vendus. Les mères nen donnèrent jamais à manger à leurs jeunes enfants car elles craignaient quils avalent les arêtes.
Dans cet exemple, lobjectif à atteindre, qui était la construction de viviers, na pas résolu le problème de la malnutrition protéino-énergétique. Les enfants ont continué à souffrir de malnutrition.
Situation 2:
Dans un petit village, un projet pour améliorer la santé des femmes enceintes avait lobjectif suivant: persuader toutes les femmes enceintes du village souffrant danémie de prendre des comprimés de fer, quelles pouvaient acheter au centre de santé, sur une période de trois mois.
Quand le projet a été établi, lagent de terrain rencontra toutes les femmes enceintes qui souffraient danémie. Elle leur expliqua le rôle du fer dans lalimentation et quon le trouvait dans les légumes verts frais essentiellement. Malheureusement, ces derniers ne sont pas toujours disponibles.
Une plante locale, très riche en fer, du même genre que le cresson, poussait dans une rivière à quelques kilomètres du village. Elle pensa que la distance poserait un problème et décida donc que la solution la plus facile serait que les femmes se rendent au dispensaire pour sapprovisionner en comprimés de fer.
Quand lagent de terrain revint au village quatre mois plus tard, elle fut heureusement surprise de découvrir que tous les cas danémie due à la carence en fer avaient disparu. Elle vérifia auprès de la clinique et fut étonnée dapprendre que très peu de comprimés de fer avaient été délivrés. En discutant avec les femmes, elle apprit que les femmes enceintes nétaient pas prêtes à dépenser le peu dargent quelles avaient à lachat de ces comprimés. Du coup, les femmes du village sétaient organisées elles-mêmes pour ramasser la plante fraîche près de la rivière chaque matin.
Situation 3:
Dans un village où le taux de malnutrition protéino-énergétique était élevé chez les jeunes enfants, un projet fut mis en place avec succès pour construire des bassins à poissons dans une majorité de fermes. Lagent de terrain découvrit que, sur leur propre initiative, les villageois avaient profité également de ces bassins pour y élever des canards. Ainsi, pendant que les jeunes enfants consommaient des protéines supplémentaires grâce aux poissons, le village tirait également profit de la vente des canards.
ÉTUDE DE CAS 7: INTERPRÉTER LES RÉSULTATS DÉTUDES
Comment utiliser les instructions que nous enregistrons?
M. Karamba, le responsable de vulgarisation agricole, est préoccupé par la quantité de maïs détruite par les rats et autres vermines dans les réserves à grains des fermiers. Un rapport officiel déclare que, en moyenne, un quart des récoltes de chaque fermier est détruit par les nuisibles chaque année. Lessentiel de ces pertes survient quand le maïs est stocké dans les fermes. Quune telle quantité de maïs profite aux rats plutôt quà des personnes ayant faim est un fait qui choque M. Karamba. Ce rapport officiel porte sur une étude effectuée sur toute la région. Il veut savoir si les conclusions de ce rapport sont valables pour son village. Il décide donc de mener une étude parmi les fermiers locaux.
Il met au point un formulaire tout simple sur lequel il note les informations quil obtient en rencontrant les fermiers. Il a identifié trois types de réserves à grains utilisés par les fermiers quil a dénommé A, B et C.
Voici une page de son cahier de notes. Elle est représentative de létude globale.
Fermier |
POURCENTAGE DE PERTES EN GRAINS LORS DU STOCKAGE |
TYPE DE GRENIER |
||||
|
Élevé (plus de 25 pour cent) |
Moyen (10-25 pour cent) |
Faible (moins de 10 pour cent) |
A |
B |
C |
1 |
V |
|
|
V |
|
|
2 |
V |
|
|
|
V |
|
3 |
|
V |
|
|
V |
|
4 |
|
|
V |
|
|
V |
5 |
V |
|
|
V |
|
|
6 |
|
V |
|
|
|
V |
7 |
V |
|
|
V |
|
|
8 |
V |
|
|
|
V |
|
9 |
|
|
V |
|
|
V |
10 |
V |
|
|
V |
|
|
Il est arrivé à certaines conclusions et a dressé un projet pour aider les fermiers à stopper ces pertes élevées.
INTERPRÉTER LES RÉSULTATS DE LÉTUDE: VOs TâCHEs
1. Quelles sont les conclusions auxquelles peut aboutir M. Karamba?
2. Que peut-il faire de ces résultats?
ÉTUDE DE CAS: UTILISATION DES REGISTRES
Le but de cet exercice est de montrer le genre dinformations quun agent de terrain peut être amené à rassembler pour un projet spécifique. Dans le cas présent, on construit un centre de nutrition.
Partie A Avant la construction du centre
Chère Mme Bamba,
Suite à notre récente conversation, jai discuté, avec le superviseur provincial, de notre idée concernant un centre de réhabilitation et un plan dalimentation complémentaire dans votre village. Jai insisté sur limportance du problème de malnutrition dans la région et de lurgence absolue de ce projet. Je lui ai présenté les objectifs généraux du centre qui seraient:
déduquer les parents en matière de nutrition.
Le superviseur provincial a toutefois précisé que nous nétions pas les seuls dans la région à avoir des besoins prioritaires. Elle a lintention de rencontrer très prochainement un planificateur du ministère de la santé qui organise les projets nationaux en matière de nutrition.
Pour cette rencontre, nous allons devoir fournir encore plus dinformations que celles dont nous disposons pour le moment afin de justifier de la nécessité de construire ce centre.
Je dois soumettre un rapport détaillant les informations dont nous disposons avant que le centre ne soit construit de façon à ce que les décisions puissent être basées sur:
1. La nécessité davoir un centre.
2. Les besoins financiers nécessaires à la construction du centre.
3. Le temps que vous devrez passer sur ce centre et celui quil vous restera pour les autres projets.
4. Laide que nous sollicitons des autres organisations.
Quelles informations pouvez-vous me communiquer?
Avec mes respects,
Le superviseur du district
UTILISATION DES REGISTRES: VOS TÂCHES
1. Quelles informations Mme Bamba peut-elle fournir pour déterminer la nécessité dun tel centre?
Où peut-elle trouver ces informations?
2. Comment peut-elle estimer les besoins financiers pour ce centre?
Où peut-elle trouver cette information?
3. Comment Mme Bamba peut-elle estimer le temps quelle devra passer au centre?
Où peut-elle obtenir cette information?
4. Quels renseignements Mme Bamba va t-elle utiliser pour évaluer laide dont elle aura besoin des autres organisations?
Où trouvera-t-elle ces renseignements?
ÉTUDE DE CAS: UTILISATION DES REGISTRES
Partie B Une fois que le centre est construit
Chère Mme Bamba,
Daprès les échos que jai reçus, le nouveau centre semble être un vrai succès. Jai rendez-vous la semaine prochaine avec le superviseur provincial pour discuter des progrès. Je voudrais pouvoir lui donner un rapport complet sur le succès du centre dans votre région.
Pourriez-vous me faire parvenir un rapport sur les progrès en cours qui me permettrait de faire un rapport complet sur les points suivants:
Cela vaut-il la peine de construire des centres similaires ailleurs dans le pays?
Sincères salutations,
Le superviseur du district
UTILISATION DES REGISTRES: VOS TÂCHES
1. De quelle manière Mme Bamba peut-elle montrer limportance de la fréquentation du centre?
Dans quels registres trouvera t-on linformation?
2. De quelle façon Mme Bamba peut-elle démontrer que le centre est une réussite?
Où peut-on trouver ces informations?
3. Comment Mme Bamba peut-elle estimer le temps quelle passera au centre?
Où peut-elle obtenir cette information?
4. Quels renseignements Mme Bamba va t-elle utiliser pour évaluer laide dont elle aura besoin des autres organisations?
Où trouvera-t-elle ces renseignements?
CARACTÉRISTIQUES DUN RAPPORT BIEN RÉDIGÉ
Check-list
Un rapport correctement rédigé doit contenir:
Une mention de la période sur laquelle porte le rapport. Par exemple, si une visite de terrain a été entreprise, préciser la date.
Une description brève mais complète du but du rapport, en particulier les activités concernées.
Un résumé qui décrit la façon dont le rapport est structuré de façon à ce que le lecteur trouve facilement la partie du rapport qui lintéresse en particulier.
Une liste des personnes impliquées dans le rapport quand cela est nécessaire. Cest le cas notamment des rapports sur les visites de terrain dans lesquels vous devez toujours mentionner les personnes que vous avez rencontrées et à quel titre.
Une distinction claire tout au long du rapport entre ce qui a été dit, ce qui a été observé, ce qui a été confirmé par plusieurs sources et lopinion des personnes. Ne pas différencier les faits des opinions est sans doute la plus grande faute que commettent la plupart des rédacteurs. Si le lecteur narrive pas à séparer les faits des opinions, il sera alors très difficile de prendre la bonne décision. Il faudrait sappliquer à faire cette distinction chaque fois que lon rédige un rapport. En appliquant cette règle, le rédacteur lui-même aura une idée plus claire de ce qui est en train de se passer.
Des phrases qui sont simples, claires et faciles à comprendre.
Des conclusions et des recommandations pour les activités de suivi, basées sur les faits et les observations sur le terrain.
La date à laquelle le rapport est écrit et le nom de lauteur.
Un bon rapport est également livré à temps plutôt quavec une semaine de retard.
DURABILITÉ
Un projet qui dure est basé sur la participation de la communauté, sur les intérêts sociaux et économiques de ses habitants, sur le transfert des compétences et des nouvelles technologies vers la communauté, afin que celui-ci perdure même quand les aides extérieures cessent.
Indicateurs de durabilité
Pour quun projet ou un programme soit durable, certains facteurs essentiels doivent y avoir été intégrés ou y sont inhérents. Cela inclut:
Une protection des ressources pour les générations futures.