alle ATE-projecten moeten middelen toewijzen voor externe evaluatiediensten. Dus, als het gaat om interne en externe evaluatie, het enige ding is dat je een externe evaluator moet hebben. (In zeldzame gevallen kunnen alternatieve regelingen worden goedgekeurd door een programmamaker.)
er zijn twee soorten externe beoordelaars:
Type 1: Beoordelaars die volledig buiten de instelling staan
beoordelaars van Type 2 die buiten het project, maar intern binnen de instelling staan (zoals een institutioneel onderzoeker of een lid van de faculteit van een andere afdeling waar het project zich bevindt).
beide typen worden als extern beschouwd, mits de externe beoordelaar van Type 2 werkelijk onafhankelijk is van het project.
een interne beoordelaar is een lid van het projectpersoneel, dat rechtstreeks door het project wordt gefinancierd, zoals een projectmanager. Vaker is interne evaluatie een gedeelde verantwoordelijkheid van de teamleden. Er zijn veel mogelijkheden om interne en externe evaluatiefuncties te coördineren. In de loop der jaren heb ik vier fundamentele benaderingen:
(1) externe beoordelaar als Coach: de externe beoordelaar geeft begeleiding en feedback aan het interne projectteam gedurende de gehele looptijd van de subsidie. Dit is een goede aanpak wanneer er al enige evaluatiecompetentie onder teamleden is. De betrokkenheid van de externe beoordelaar vergroot de geloofwaardigheid van de evaluatie en helpt het team bij het opbouwen van hun evaluatiekennis en-vaardigheden.
(2) externe beoordelaar als zwaar werktuig: de externe beoordelaar neemt het voortouw bij de planning van de evaluatie, het ontwerpen van instrumenten, het analyseren van resultaten en het schrijven van rapporten. Het interne team verzamelt voornamelijk gegevens en verstrekt deze aan de externe beoordelaar voor verwerking. Bij deze aanpak moet de externe beoordelaar duidelijke gegevensprotocollen verstrekken om ervoor te zorgen dat het interne team de gegevens systematisch verzamelt en verwerkt voordat het de informatie aan de externe beoordelaar overdraagt.
(3) extern beoordelaar als Architect: de externe beoordelaar ontwerpt de algehele evaluatie en ontwikkelt instrumenten voor gegevensverzameling. Het projectteam voert het plan uit, zo nodig met technische bijstand van de externe beoordelaar—met name op kritieke momenten in de evaluatie, zoals analyse en rapportage. Met deze aanpak is het belangrijk om het evaluatiebudget in het eerste jaar van het project vooraf te laden om een intensieve betrokkenheid van de externe beoordelaar mogelijk te maken.
(4) verdeel en heers: het interne team is verantwoordelijk voor de evaluatie van de uitvoering van het project en de onmiddellijke resultaten. De externe beoordelaar houdt zich bezig met de evaluatie van de resultaten op langere termijn. Dit is de aanpak die het gebruik evalueert. We volgen en analyseren zorgvuldig gegevens over hoe goed we ons publiek bereiken en betrekken. Wij zijn verantwoordelijk voor het beoordelen van de directe resultaten van onze webinars en workshops (d.w.z., tevredenheid van de deelnemers, zelf-gemeld leren, en de intentie om inhoud te gebruiken). Onze externe beoordelaar is verantwoordelijk voor het bepalen en beoordelen van de impact van EvaluATE op de evaluatiepraktijken van onze gebruikers.
voorzichtigheid is geboden: het intern uitvoeren van een deel van een evaluatie wordt vaak gezien als een middel om de middelen van het project te behouden, en het kan dat effect hebben. Maar maak niet de fout van het denken interne evaluatie is kosteloos. Op zijn minst kost het tijd, wat soms zeldzamer is dan geld. Kortom, er is geen beste manier om interne en externe evaluatie te coördineren. Uw aanpak moet zinvol zijn voor uw project in het licht van de beschikbare middelen (inclusief personeelstijd en expertise) en wat u nodig heeft uw evaluatie te doen voor uw project.
wat meer te weten? Bekijk deze 5 minuten durende video waarin ik uitleg wat telt als onafhankelijk, hoe een externe beoordelaar te vinden, en hoe verantwoordelijkheden te verdelen tussen integreer interne en externe beoordelaars: evaluatie Basics Deel 4: Wie kan dat doen?
