Evalueringspraksis
To bud på hvad evaluering er: "Evaluering" defineres normalt som bedømmelse eller værdisættelse og har derfor nær tilknytning til værdi og vurdering. Evaluering er altså en værdisættelse af en proces, et produkt eller en hændelse. Med evaluering forstås en systematisk analyse og vurdering af pædagogiske processer, produkter og faktorer, med henblik på at planlægge, informere, rådgive, styre, justere og udvikle. 2 Schoug Psykologi & Pædagogik
Evaluering 3 Schoug Psykologi & Pædagogik
Evaluering Evaluering kan betyde at vurdere noget efter en standard eller et bestemt mål Evaluering er en systematisk og/eller kritisk vurdering eller erfaring Evaluering skal dokumentere en indsats, et resultat eller en proces Evaluering kan bruges til at justere og udvikle 4 Schoug Psykologi & Pædagogik
Evaluering knytter sig bl.a. til: Mål hvad vil vi gerne opnå? Vores teorier om hvad der virker og hvorfor De tegn på dette vi ser efter Refleksioner, erkendelser, opdagelser og læring hos de voksne Oplevelser hos børnene, der afspejler de udviklingsrum de tilbydes (om de oplever det sjovt, godt, kedeligt, spændende, osv.) Pædagogisk dokumentation dokumentation af evaluering Schoug Psykologi & Pædagogik 5
Perspektiver i evaluering Børnene dem, der mærker indsatsen Forældrene dem, der køber ydelsen Personalet dem, der leverer arbejdet Ledelsen dem, der styrer arbejdet Kommunen dem, der kontrollerer arbejdet Hvilket perspektiv skal tages i anvendelse? Hvilke stemmer skal inddrages? Schoug Psykologi & Pædagogik 6
Formål Retning Relation til den pædagogiske aktivitet Metodologiske træk Måling 7 Schoug Psykologi & Pædagogik Summativ evaluering Dokumentere resultatet med henblik på vurdering og kontrol. Produktevaluering Bagudrettet med fokus på det afsluttende produkt (effekt) Isoleret fra aktiviteten foretages efterfølgende Den evaluerende holder afstand som neutral dommer. Fejl kan ses som mangler I forhold til mål og idealprodukt. Vægt på reliabilitet dvs. kvaliteten af de data, du har fået frem. Er resultatet pålideligt? Formativ evaluering Give feedback med henblik på handling. Procesevaluering Fremadrettet med fokus på læreprocessen (mening) Integreret i processen Den evaluerende involverer sig for at understøtte ændring og udvikling. Fejl ses som potentiale for udvikling og læring. Vægt på validitet dvs. hvorvidt du undersøger det, du har sat dig for at undersøge
Overvægt til den summative side kan reducere læring og udvikling Overvægt til den formative side kan blive for hyggeligt og uforpligtende (UCN) 8 Schoug Psykologi & Pædagogik
Aktionslæringsmodel (Suzanne Krogh) 9 Schoug Psykologi & Pædagogik
Omsætte ny viden Forundring Aktionslæring Refleksion Aktion / eksperiment 10 Schoug Psykologi & Pædagogik Iagttagelse
Drøft med din sidemand: 1. Hvilke evalueringsmetoder har vi brugt til evaluering af vores lokale aktioner? 2. Hvorfor valgte jeg netop denne/disse metoder? Hvilke overvejelser gjorde jeg mig? 3. Hvordan vurderer jeg udbyttet? 11 Schoug Psykologi & Pædagogik
Undersøgelse af: Lederkvalifikationer og evalueringsopgaver Mange mangler viden om evaluering og indsigt i evalueringsmetoder Der gennemføres løbende evaluering af den daglige praksis, men ikke af større indsatser og forandringer Manglende systematik og målsætning for evalueringspraksis Ønske om at udvikle evalueringskompetence med afsæt i pædagogiske værdier 12 Schoug Psykologi & Pædagogik
Undersøgelser af evalueringspraksis 13 Kilde: Servicestyrelsen. Schoug Psykologi & Pædagogik Sprogpakken
Beskrivende eller reflekterende dokumentation? Beskrivende fotodokumentation: En børnehave er på tur i lokalområdet. Personalet tager billeder der viser turens forløb. Det er billeder af børn i busskuret, børn der kigger på svaner ved søen, børn der spiser madpakker, leger på parkens legeplads osv. I dag har vi set ællinger i søen Schoug Psykologi & Pædagogik 14
Beskrivende eller reflekterende dokumentation? Reflekterende fotodokumentation: En børnehave er på tur i lokalområdet. Et af de pædagogiske mål med turen er at få børnene til at fungere sammen som gruppe. Personalet tager billeder af situationer, hvor børnene viser opmærksomhed over for hinanden, hjælper hinanden, følges ad i en række osv. Billederne kan personalet bruge til at drøfte, hvordan turen gik i forhold til det opstillede mål. (Kilde: Struer.dk) Schoug Psykologi & Pædagogik Kasper, sofus og Walde har hjulpet hinanden med at blive dækket af blade 15
Evalueringens hvem, hvad, hvor Evalueringens formål: HVORFOR? Evalueringens genstand: HVAD? Evalueringens metode: Evalueringstidspunkt HVORNÅR? Evalueringsteknik HVORDAN? Evaluator - HVEM? Evalueringens interessenter / aktører Hvem skal bruge resultaterne Hvordan skal resultaterne bruges Hvad skal resultaterne bruges til 16 Schoug Psykologi & Pædagogik
Dataindsamlingsmetoder Kvantitativ dataindsamling Tal og værdier Præcise udtryk for det, vi undersøger Mange målinger af få informationer undersøger i bredden Fx: Spørgeskemaer Statistik, tælling (hvor ofte, hvor mange, hvor henne, osv.) Andre målinger Kvalitativ dataindsamling Mening og betydning Forstå sammenhænge og helheder i det, vi undersøger Få målinger af mange informationer undersøger i dybden Fx: Interview, fokusgruppe Iagttagelser Praksisfortællinger 17 Schoug Psykologi & Pædagogik
Hvis og når man vil opbygge og arbejde med evaluering, da må det sagt i stikord ske: afbalanceret efter de betingelser der forefindes, i respekt for institutionens kultur og medarbejdere, og ud fra en empowerment-strategi. Hvis det er tilfældet, vil arbejdet med at finde og udvikle meningsfulde evalueringstemaer, vurderingskriterier, egnede metoder, varierede former, osv. med stor sandsynlighed have gode vækstbetingelser. (Danielsen, Kampmann, Rasmussen, 2010, s. 29) 18 Schoug Psykologi & Pædagogik
Evalueringscirklen Antagelser om hvad god pædagogik er - Og hvorfor det virker DOKUMENTATION Tegn på at det virker INDSATS MÅL EVALUERING Ideer om hvordan vi når målet Schoug Psykologi & Pædagogik 19
SMTTE-modellen Schoug Psykologi & Pædagogik 20
Noget af det sjove Inddrage børnene Børn fotograferer Børneinterview Børneevaluering; smiley er Inddrage forældre Fokusgruppe Lynnedslag evaluering af en tilfældig uge Lys på et område: Hvad har vi vist opmærksomhed? Hvilke aktiviteter? Hvordan snakker vi om det? Hvad sker der/sker ikke? Schoug Psykologi & Pædagogik 21
Drøftelser i grupper: 1. Hvilke erfaringer har vi selv med evaluering? 2. Hvad evaluerer vi ofte - og hvad evaluerer vi sjældent eller aldrig? Og hvorfor? 3. Hvilke udfordringer møder vi, når vi evaluerer aktionslæringsprocesser (udfordringer i forbindelse med metoden)? 4. Hvilke udfordringer møder vi, når vi evaluerer inklusionspraksis) udfordringer i forbindelse med inklusion)? 22 Schoug Psykologi & Pædagogik
Parvise drøftelser: Hvad er 'ledelse af evalueringspraksis' for mig? Hvordan varetager jeg denne rolle? Noget jeg skal gøre anderledes/blive bedre til? 23 Schoug Psykologi & Pædagogik
Guide til evaluering af hverdagspraksis I grupper af 4 personer udarbejdes en guide for løbende evaluering af udviklingen af inklusionspraksis i institutionen. NB: Guiden skal være en vejledning og inspiration til den enkelte leder - ikke en fastlagt plan. 1. Hvad skal vi løbende evaluere på? 2. Hvordan vil vi gøre det? 3. Hvornår vil vi gøre det? 4. Hvem vil vi inddrage? 5. Hvem har hvilket ansvar? 6. Hvad er mit ansvar og opgave som leder/områdeleder? 24 Schoug Psykologi & Pædagogik