Vigtigheden af evaluering

Transkript

1 The Greenlandic Childhood Vigtigheden af evaluering Presentation by Maliina Ablesen ved Maliina Abelsen Documentation Centre on 28. april 09 Children & Youth

2 1. Intro ved MIPI Evidensbaseret viden (udgangspunkt for praksis) Model - der kan bidrage med at implementere tiltag Evalueringsmetode hvad kan den bidrage med? 2. Oplæg 4. Oplæg Konkrete handleplaner (med succeskriterier) 3. Workshop

3 Evaluering den sidste kedelige del i en proces? Falder i slutningen af en proces, hvor energien oftest er lav. Forestilling om, at evaluering er unødvendig, fordi man godt kan huske i fremtiden, hvordan projektet eller tiltaget virkede. Eller måske laver man en overfladisk evaluering, hvor man spørger et par tilfældige informanter/deltagere og bygger resten på forestillinger og antagelser.

4 Eller er evaluering retten til at lære og høste frugten af ens arbejde? Uden evaluering arbejder man i blinde. Uden at kende konsekvenserne af ens arbejde, er det svært at opretholde energien og entusiasmen. Uden evaluering kommer best-practice erfaringer ikke frem, og man har ikke mulighed for at lære og udvikle sig.

5 Så hvorfor er det, at vi skal evaluere? For at vide om det vi gør overhovedet har nogle virkning både positivt eller negativ For at kunne levere relevant, troværdig og objektiv information og anbefalinger beslutningstagere eks. politikere. For at kunne tilrette eller ændre eksisterende projekter/tiltag. For at lære og udvikle det eksisterende arbejde

6 Hvad er en evaluering egentlig? En evaluering er en systematisk måde at indsamle viden om et projekt eller tiltag En evaluering er en undersøgelse, der skal fremstille konsekvenserne af et tiltag eller projekt. Både de tilsigtede og utilsigtede. En evaluering er en systematisk, retrospektiv vurdering af gennemførsel af præstationer og udfald af offentlig politik, som tiltænkes at spille en rolle i praktiske handlingssituationer.

7 Forskellige ønsker og mål med evaluering. Evaluering kan have mange forskellige udgangspunkter og formål: En evaluering kan f.eks. have til formål undersøge om fungerende program eller tiltag skal ændres fra sin nuværende form. En anden evaluering kan udføres for at undersøge om et færdigt projekt/tiltag har haft de ønskede konsekvenser En tredje form kan være en cost-effective evaluering, der bygger på om projektet/tiltaget i forhold til sin pris er det mest effektive. Andre gange er det måske selve projektet, der skal evalueres f.eks. om dem, der arbejder med projektet/tiltaget formår at udføre projektet som det var tiltænkt, og hvorvidt projektet er blevet implementeret ordentligt. Derfor må man altid stille følgende spørgsmål før en evaluering: hvad er det vi gerne vil have evalueringen til at svare på?

8 Hvad enhver evaluering bør indeholde! 1. Formål med evalueringen. Hvorfor evaluerer vi og hvad? Hvilke beslutninger skal vil evalueringen hjælpe med at tage? 2. Baggrundsinformation om organisationen som har udført tiltaget el. projektet dertil information om hovedværdier og målsætninger indenfor organisationen. Baggrundsinformation om selve tiltaget eller projektet beskrivelse af handlingsplanen. 3. Præcise mål med evalueringen (som beskrevet tidligere), hvilke spørgsmål vil blive besvaret i evalueringen og hvilke hypoteser er der. 4. Beskrivelse af indikatorer f.eks. hvordan måler man bedst om folk har fået det bedre el. øget selvværd.

9 5. Metoden: hvilken form for information el. data: spørgeskemaer, interviews, observationsstudier, fokus grupper eller case studies. Beskrivelse af hvordan analysen til være af data og beskrivelse af begrænsninger (frafaldsanalyser osv.). Her er det naturligvis meget vigtigt, at man er objektiv overfor data. Oftest er det godt at have lave en kombination af forskellige metoder. 6. Indsamlingen af data. 7. Selve analysen og fortolkningen af data/informationen. 8. Konklusionen på data samt i forhold til målene med evalueringen. 9. Anbefalinger i forhold til fremtidige handlinger el. nye handlinger alt afhængig af hvilken evaluering man arbejder med. Inkluderer oftest kostomkostninger af anbefalingerne. 10. Som noget meget vigtigt i forhold evidensbaseret praksis, er det essentielt at man gør sine fund og viden tilgængelig samt spreder den til relevante aktører.

10 Intern vs. ekstern evaluering Fordele kontra ulemper ved intern og ekstern evaluering Eksterne evaluatorer Kan kigge på programmet med friske øjne og kan anlægge nye udefrakommende perspektiver på området. Er ikke personligt involveret Opnår intet på baggrund af programmet men kan høste prestige på baggrund af evalueringer Er trænede i evalueringsmetoder, kan have erfaringer fra andre evalueringer, opfattes som eksperter af deltagerne i programmet. Er outsider, der måske ikke forstår programmet og de mennesker (og den kultur), der er involveret. Arbejdet slutter ved aflevering af evalueringen og inkluderer ikke opfølgning. Interne evaluatorer Kender programmet godt og kan være blind for, hvad organisationen/indsatsen har behov for. Er afhængig af organisationens ledelse og en del af den sædvanlige magtstruktur Kan være motiveret af forhåbninger om personlig vinding Er ikke nødvendigvis trænede i evalueringsmetoder. Er bekendt med og forstår programmet og kan fortolke individernes handling og attituder. Kan let følge op på om evalueringens anbefalinger bliver fulgt.

11 HUSK: EVALURING ER RETTEN TIL AT LÆRE OG HØSTE FRUGTEN AF ENS ARBEJDE. TAK QUJANAQ.