Virkningsevaluering
Virkningsevaluering Thomas Bredgaard, Lektor, P.hd. thomas@epa.aau.dk Åbning af Forskningscenter for Evaluering, 17 maj 2011 Realistisk evaluering C+M=O Context + Mechanism = Outcome Under hvilke omstændigheder? Hvorfor? Hvad virker? Den realistiske evaluering Teori Mekanismer (M) Kontekst (K) Outcome (O) Programspecifikationer Hvad virker for hvem, under hvilke omstændigheder Hypoteser Hvad forventes at virke for hvem, under hvilke omstændigheder? Observationer Multiple metoder og analyse af M, K, O Kilde: R. Pawson & N. Tilley (1997): ”Realistic Evaluation”, Sage. Moderator: Køber selv Nikotinplastre Rygestop Generativ mekanisme: Motivation Moderatorer: Tørt, ilt, kompakt m.v. Krudt Eksplosion Generativ mekanisme: Ild Realistisk evaluering som ”gylden middelvej” Eksperimentel tilgang Realistisk tilgang Undersøgelsesspørgsmål Hvad virker? Hvad virker for hvem, hvordan, Hvordan opfattes virkningerne hvorfor? og hvordan kan de forenes gennem forhandling? Fokus Effekt Proces og effekt Proces Metode Kvantitativ: •Sammenlignelige kontrol- og deltagergrupper. •Måling før og efter behandling Kvantitative og kvalitative metoder Kvalitativ •Casestudier af ”stakeholdernes” konstruktioner Teori om indsats og effekt Kausalteori Programteori Ingen Viden Kontekstuafhængig Global viden Kontekst, mekanisme, outcome Kontekstafhængig Lokal viden Beslutningsproces Rationelle valg Informere praktikere, deltagere og beslutningstagere og udvikle deres programteorier Deliberation, Forhandling Kilde: R. Pawson & N. Tilley (1997) : Realistic Evaluation, Sage. Socialkonstruktivistisk tilgang Teori- eller implementeringsfejl? Resultatet er indtruffet Resultatet er udeblevet Indsatsen er korrekt implementeret 1. Programteorien er bestyrket 2. Teorifejl Indsatsen er ikke korrekt implementeret 3. Andre forhold end indsatsen forklarer resultatet 4. Implementeringsfejl og muligvis teorifejl P. Dahler-Larsen & H.K. Krogstrup (2004): Nye veje i evaluering, Systime Academic, s. 75. Hvornår er virkningsevaluering anvendelig? 1. Vi ved hvad der virker, men ikke hvorfor og hvordan 2. Vi ved det ikke virker, men ikke hvorfor og hvordan 3. Vi tror vi ved, hvad der virker, men har ikke undersøgt/dokumenteret det Moderatorer Målgruppe Aktiviteter Delmål Virksomme mekanismer . Slutmål
© Copyright 2024