Tous les projets d’ATE doivent allouer des fonds pour des services d’évaluation externes. Ainsi, en ce qui concerne l’évaluation interne et externe, la seule chose certaine est que vous devez avoir un évaluateur externe. (Dans de rares cas, d’autres arrangements peuvent être approuvés par un agent de programme.)
Il existe deux types d’évaluateurs externes :
Type 1: Évaluateurs qui sont complètement externes à l’établissement
Évaluateurs de type 2 qui sont externes au projet, mais internes à l’établissement (comme un chercheur de l’établissement ou un membre du corps professoral d’un département différent de celui où se trouve le projet).
Les deux types sont considérés comme externes, tant que l’évaluateur externe de type 2 est vraiment indépendant du projet.
Un évaluateur interne est un membre du personnel du projet, qui est directement financé par le projet, comme un chef de projet. Plus généralement, l’évaluation interne est une responsabilité partagée entre les membres de l’équipe. Il existe de nombreuses options pour coordonner les fonctions d’évaluation internes et externes. Au fil des ans, j’ai noté quatre approches de base:
(1) Évaluateur externe en tant que coach : L’évaluateur externe fournit des conseils et des commentaires à l’équipe de projet interne tout au long de la durée de la subvention. C’est une bonne approche lorsqu’il existe déjà une certaine compétence en évaluation parmi les membres de l’équipe. La participation de l’évaluateur externe renforce la crédibilité de l’évaluation et aide l’équipe à continuer d’acquérir ses connaissances et ses compétences en matière d’évaluation.
(2) Évaluateur externe : L’évaluateur externe prend la tête de la planification de l’évaluation, de la conception des instruments, de l’analyse des résultats et de la rédaction des rapports. L’équipe interne recueille principalement des données et les fournit à l’évaluateur externe pour traitement. Dans cette approche, l’évaluateur externe devrait fournir des protocoles de collecte de données clairs pour assurer la collecte et le traitement systématiques des données par l’équipe interne avant qu’elle ne transmette les informations à l’évaluateur externe.
(3) Évaluateur externe en tant qu’architecte : L’évaluateur externe conçoit l’évaluation globale et développe des instruments de collecte de données. L’équipe du projet exécute le plan, avec l’assistance technique de l’évaluateur externe au besoin, en particulier aux moments critiques de l’évaluation tels que l’analyse et les rapports. Avec cette approche, il est important de charger à l’avance le budget d’évaluation au cours de la première année du projet afin de permettre une participation intensive de l’évaluateur externe.
(4) Diviser pour régner : L’équipe interne est responsable de l’évaluation de la mise en œuvre du projet et des résultats immédiats. L’évaluateur externe s’occupe de l’évaluation des résultats à plus long terme. C’est l’approche qui évalue les utilisations. Nous suivons et analysons soigneusement les données sur la façon dont nous atteignons et engageons notre public. Nous sommes responsables de l’évaluation des résultats immédiats de nos webinaires et ateliers (c.-à-d., la satisfaction des participants, l’apprentissage autodéclaré et l’intention d’utiliser le contenu). Notre évaluateur externe est responsable de déterminer et d’évaluer l’impact d’EvaluATE sur les pratiques d’évaluation de nos utilisateurs.
Attention : La prise en charge d’une partie d’une évaluation en interne est souvent considérée comme un moyen de conserver les ressources du projet, et cela peut avoir cet effet. Mais ne faites pas l’erreur de penser que l’évaluation interne est gratuite. Au minimum, cela prend du temps, ce qui est parfois une marchandise plus rare que l’argent. En bref, il n’y a pas de meilleur moyen de coordonner l’évaluation interne et externe. Votre approche devrait avoir du sens pour votre projet à la lumière des ressources disponibles (y compris le temps et l’expertise du personnel) et de ce que votre évaluation doit faire pour votre projet.
Que savoir de plus ? Regardez cette vidéo de 5 minutes dans laquelle j’explique ce qui compte comme indépendant, comment trouver un évaluateur externe et comment répartir les responsabilités entre les évaluateurs internes et externes intégrés: Bases de l’évaluation Partie 4: Qui Peut le faire?
