Nye veje med dokumentation. SOFU årskursus 2015

Transkript

1 Nye veje med dokumentation SOFU årskursus 2015

2 Kort om oplægget Malene Skov Dinesen, Ineva Innovativ evaluering er en tilgang med fokus på at drive praksis gennem evaluering Blikket er på at skabe viden om praksis for at kunne udvikle den Oplæggets 3 pointer: Vores dokumentation og evalueringer må imødekomme den kompleksitet, der er i virkeligheden Evaluer undervejs og ikke kun efter en indsats En konkret rammesætning om evalueringer i hverdagen

3 Forfatter til bøgerne

4 Hvorfor evaluere og dokumentere? Praktikernes behov: Udvikling af praksis Læring Blive klogere på hvad der virker for hvem under hvilke omstændigheder Myndigheds-/politisk behov: Få overblik over indsatser Få viden til den politiske dagsorden Finde kontekstneutralt evidens

5 Hvorfor er evaluering svært? Fordi indsatser påvirkes af den komplekse virkelighed, som de igangsættes i Fordi effekterne nogen gange er meget små eks. at de ældre borgere på baggrund af jeres arbejde langsommere bliver dårligere

6 VIKTORE = virkeligheden Implementering Vilje Kontekst VIKTORE Emergens Rivalisering Outcome Tid

7 VIKTORE = virkeligheden Vilje Programmer forsøger at påvirke nye valg men bliver de valgt? Hvilke holdninger er der i forvejen og hvordan er processen frem imod holdningsændringen? Implementering Programmers implementering gennemføres over måneder og år. For at forstå programmet skal implementeringssystemet forstås VIKTORE Kontekst 1. De individuelle aktører (karakteristika og evner hos de aktører der er en del af programmet) 2. Deres relationer (de aktører der bærer programmets relationer til hinanden) 3. Placering (lokale regler, normer og skikke der hvor programmet gennemføres) 4. Den omgivende infrastruktur (de sociale, økonomiske og kulturelle omgivelser for programmet) Emergens Et program vil altid kombinere sig med andre elementer, der igen påvirker programmet Rivalisering Ethvert program er i konkurrence med andre programmet Rivaliseringen har væsentlig betydning for de mulige effekter Outcome Vi skal huske at forholde os til, om: De planlagte aktiviteter er gennemført på det rigtige tidspunkt og i det rigtige antal Tid Programmets historik og timingen er afgørende

8 Innovativ evaluering handler om At lave evalueringer, der faktisk kan bruges fremadrettet (improve frem for proveevalueringer) At måle på det relevante At tænke sig om før man måler At få evaluering til at blive en interessant og livgivende proces

9 Klassisk evaluering og dokumentation Indsats/projekt Anvendelse af evaluering

10 Innovativ evaluering Anvendelse Indsats/projekt/hverdagspraksis

11 Evaluering som forstyrrelser Innovativ evaluering er ikke objektiv Evaluering skal vise bredden af perspektiver Der skal skabes tilpasse forstyrrelser

12 Forandringspotentialet 15 Brugernes egne ressourcer Partnerskab ml. bruger og professionel Den anvendte metode 30 Forventning om forbedring Kilde: Vedung & Dahlberg, 2013

13 Hvordan dokumentere og evaluere i praksis?

14 Efterspørgsel og forsyning 1. Hvad er det, vi gerne vil vide? (efterspørgsel) 2. Hvordan skal den viden anvendes? (reel efterspørgsel) 3. Hvordan skaffer vi den viden? (dataindsamling)

15 En måde at forstå sine indsatser Mål hvad vil vi gerne opnå? For hvem er der forskelle på hvem indsatsen virker for? Og hvilke? Indsats hvad gør vi for at opnå målet? Under hvilke omstændigheder Hvilke særlige forhold (sted, deltagere, proces, organisering) fremmede eller hæmmede resultaterne? Effekter hvorvidt og i hvor høj grad opnåede vi det, vil ønskede?

16 Før aktivitet Tema for evalueringen: Efterspørgsel og reel efterspørgsel Hvilken viden skal evalueringen bidrage med, og hvordan skal denne viden anvendes? Mål Hvilke mål vil I sætte op for aktiviteten? Antagelser Hvad skal aktiviteten bidrage med, for at målene bliver opfyldt?

17 Efter aktivitet Tema for evalueringen: Hvad virker? For hvem? Under hvilke omstændigheder? I hvor høj grad levede aktiviteten op til jeres forestillinger? Er der forskelle på hvem aktiviteten virker for og hvilke? Hvilke mekanismer spiller ind? Hvilke særlige forhold (sted, deltagere, proces, organisering) fremmede eller hæmmede resultaterne? Anvendelse? Hvad er den vigtigste erfaring til næste gang, I skal gennemføre aktiviteten?

18 Mellem før og efter = data Som du spørger får du svar Dataindsamlingsmetoder i praksis: Observationer Registreringer/optællinger Miniinterviews Strukturerede Ikke-strukturerede

19 Spørgsmål eller kommentarer?