alle ATE-projekter er forpligtet til at afsætte midler til eksterne evalueringstjenester. Så når det kommer til intern og ekstern evaluering, er den ene ting, at du skal have en ekstern evaluator. (I sjældne tilfælde kan alternative arrangementer godkendes af en programofficer.)
der er to typer eksterne evaluatorer:
Type 1: Evaluatorer, der er helt eksterne for institutionen
type 2 evaluatorer, der er eksterne for projektet, men interne for institutionen (såsom en institutionel forsker eller et fakultetsmedlem fra en anden afdeling end hvor projektet er placeret).
begge typer betragtes som eksterne, så længe den eksterne evaluator Type 2 virkelig er uafhængig af projektet.
en intern evaluator er et medlem af projektpersonalet, der er direkte finansieret af projektet, såsom en projektleder. Mere almindeligt er intern evaluering et fælles ansvar blandt teammedlemmer. Der er mange muligheder for at koordinere interne og eksterne evalueringsfunktioner. I årenes løb har jeg bemærket fire grundlæggende tilgange:
(1) ekstern Evaluator som Coach: den eksterne evaluator giver vejledning og feedback til det interne projektteam gennem hele bevillingens levetid. Dette er en god tilgang, når der allerede er en vis evalueringskompetence blandt teammedlemmer. Den eksterne Evaluators involvering øger evalueringens troværdighed og hjælper teamet med at fortsætte med at opbygge deres evalueringskendskab og færdigheder.
(2) ekstern Evaluator som Tungløfter: den eksterne evaluator tager føringen i planlægningen af evalueringen, design af instrumenter, analyse af resultater og skrivning af rapporter. Det interne team indsamler hovedsageligt data og leverer dem til den eksterne evaluator til behandling. I denne tilgang bør den eksterne evaluator give klare dataindsamlingsprotokoller for at sikre systematisk indsamling og håndtering af data af det interne team, før de overgiver oplysningerne til den eksterne evaluator.
(3) ekstern Evaluator som arkitekt: den eksterne evaluator designer den samlede evaluering og udvikler dataindsamlingsinstrumenter. Projektteamet gennemfører planen med teknisk assistance fra den eksterne evaluator efter behov-især ved kritiske knudepunkter i evalueringen såsom analyse og rapportering. Med denne tilgang er det vigtigt at frontbelaste evalueringsbudgettet i projektets første år for at give mulighed for intensiv involvering af den eksterne evaluator.
(4) Divide-and-erobre: det interne team er ansvarlig for evaluering af projektgennemførelse og øjeblikkelige resultater. Den eksterne evaluator håndterer evalueringen af langsigtede resultater. Dette er den tilgang, der vurderer anvendelser. Vi sporer og analyserer omhyggeligt data om, hvor godt vi når ud til og engagerer vores publikum. Vi er ansvarlige for at vurdere øjeblikkelige resultater af vores hjemmesider og værksteder (dvs. selvrapporteret læring og hensigt om at bruge indhold). Vores eksterne evaluator er ansvarlig for at bestemme og vurdere evaluerings indvirkning på vores brugeres evalueringspraksis.
en advarsel: at tage en del af en evaluering internt ses ofte som et middel til at bevare projektressourcer, og det kan have den effekt. Men gør ikke fejlen ved at tro, at intern evaluering er omkostningsfri. I det mindste tager det tid, hvilket undertiden er en sjældnere vare end penge. Kort sagt er der ingen bedste måde at koordinere intern og ekstern evaluering på. Din tilgang skal give mening for dit projekt i lyset af tilgængelige ressourcer (inklusive personaletid og ekspertise), og hvad du har brug for din evaluering for at gøre for dit projekt.
Hvad skal man vide mere? Tjek denne 5-minutters video, hvor jeg forklarer, hvad der tæller som uafhængigt, hvordan man finder en ekstern evaluator, og hvordan man deler ansvaret mellem integrere interne og eksterne evaluatorer: Grundlæggende om evaluering Del 4: Hvem kan gøre det?
