Hjemmeopgave Oplæg ved Elvi Weinreich Afleveres af de enkelte ledelsesteam mundtligt d. 9 februar 2016
Hjemmeopgaven Udarbejdelse af handling / programteori og effektevaluering (realitetstestning) af indsats for styrkelse af progression i elevernes læring med fokus på matematik
Hvilken grundlæggende forståelse af begreberne matematiske færdigheder og matematisk problemløsningligger til grund for den nationale måling af matematik? http://www.emu.dk/omraade/gsk-l%c3%a6rer/ffm/matematik http://www.emu.dk/sites/default/files/f%c3%a6lles%20m%c3%a5l%20for%20f aget%20matematik_0.pdf http://dkmat.dk/wp-content/uploads/2014/05/klaus-fink-26.05.2014.pdf Kort sagt: Hvad måler målingen? og hvad er interessant for jer? 3
Analyse af egne matematiske karaktergennemsnit 1. At undre sig og stille spørgsmål Læs jeres undersøgelse igennem! Hvad undrer jer og hvilke spørgsmål giver det anledning til at stille? Vælg det for jer som ledere vigtigste spørgsmål til videre analyse 2. Fra spørgsmål til egen antagelse Hvad er jeres egen forklaring på, hvad der kan være på færde her? Hvad bygger I jeres forklaring på? Med andre ord: Hvad er det for en årsags-virkningssammenhæng, I ser her? Årsag Virkning 4
Inviter relevante matematiske læringseksperter ind til Jeres ledelsesdrøftelser. Udveksl jeres og deres forklaringer Forklaringerne skal formuleres i en årsagsvirkningssammenhæng, Årsag Virkning 5
Ønsket om forbedret resultat 4. Formuler skriftligt, hvad I ønsker skal være resultaterne i fremtiden Årsag Virkning
Udarbejdelse af handling/ programteori og effektevaluering (realitetstestning) Undersøgelsesopgaven: Årsag Virkning Årsag- virkningsforståelsen( programteorien) skal underbygges ( evidensinformeres) Beskrives i detaljer ( metode og indsats beskrivelse) Efterprøves- hvordan Måles hvordan --------------------------------------------------------------------------------------------------------- Måling Ledelsesbeslutning er ændring nødvendig
Programteorien Programteorien udpeger det vigtige ved indsatsen ( ikke oplevelsen af om noget er godt eller skidt) En enkel programteori Lærerne får tid afsat til fælles forberedelse Lærerne forbereder sig sammen og eleverne får højere karakterer
Programteorien Der kan være flere indflydelsesveje (indsatser) Ledelse tæt på Visende sig ved? Lærerne motiveres Resultat? Velfungere nde team Lærerne kvalificeres Hvordan? Lærerne oplever sig kompeten te Resultat?
Programteori En indsats kan bestå af forskellige komponenter Velfungerende Fællesforberedende team Rum og rammer Pædagogisk kvalificering Ledelsesmæssig feedback Kollektiv motivation Elever der trives Eleverne øger deres progression i læring og deres karakternivea u
Programteorien 1. Handler om den indsats I mener, der skal til for at opnå et ønsket mål Der kan anvendes kilder til evidensinformeringen fra Officielle politiske dokumenter, policy tekster Officielle forvaltningstekster (styringstekster/ accountability tekster ) (råderummets strukturelle ansvarliggørelsesmekanismer) Forældre inddragelse Faglige tekster omformuleret af Undervisningsministeriet udvalgte faglige personer Pædagogisk - faglig teori, ( motivationsteorier, pædagogiske ( råderummets epistemologiske ansvarlighedsgørelsesmekanismer)
Programteorien 2 Ledelses faglig teori, (motivationsteorier, ledelses- og organisationsteorier, teamforståelser (råderummets epistemologiske ansvarlighedsgørelsesmekanismer) Evalueringer, undersøgelser, rapporter Fagfolks erfaringer fra hverdagens praksis Observationer, også mens indsatsens foregår, Interview med brugere, workshop Det er væsentligt at I medtænker både lærernes/ elevernes/ forældrenes / forvaltningens/ politikernes jeres (ledelsens) forventede indsats for at opnå det ønskede resultat
At stille evalueringsspørgsmålet eksempel Styrket progression i elevernes matematiske læring (viden- færdighederkunnen) Hvilken viden kan efterspørges her? Hvor meget tid er afsat til teamsamarbejdet I hvilken grad fastholdes læringsfokus i teamsamarbejdet Hvor meget har ledelsen/ eleverne/forældre/ forvaltning/ politikere/ været inddraget i processen Hvilken effekt har indsatsen haft på elevernes motivation i processen Hvilken effekt har indsatsen haft på lærernes motivation i processen Hvilken effekt har indsatsen haft på teamenes arbejdsprocesser Hvordan anvender teamene formativ og summative evalueringer
Programteori udtrykt som flow chart- hvem gør hvad hvornår Indsats kontekst- hvis- hvem og hvor og hvordan- hvornår Proces kontekst- hvis- hvem og hvor og hvordan hvornår Præstation - kontekst- hvis- hvem og hvor og hvordan hvornår Resultat
Kriterier Hvad skal der måles på Hvordan skal der måles
Metodevalg For hvert delelement man ønsker at fokusere i sin evaluering vælges data og metode ud fra, hvad der bedst belyser det/ de valgte delelementer Virkningsevaluering foreskriver ikke på forhånd noget bestemt metodevalg. Valget afhænger af de valgte delelementer
Samle dataindsamlingen Evaluator følger flowdiagrammet og vælger data ud fra de delelementer hun har valgt at fokusere på - udvælge kriterier for måling- patientsikkert sygehus se efter trykmærker- for at undgå tryksår sug, drop og slanger skal ud så hurtigt som muligt hyppig og kontinuerlig monitorering- ved afvigelser fra normalværdier ovenstående delelementer- anses som nødvendige at følge, for at det er sikkert for patienten at være på hospitalet og virkningen bliver ( kommer levende ud) Data anvendes til at vise sammenhæng eller mangel på samme mellem de forskellige delelementer i programteorien
Analysere og konkludere De to vigtigste spørgsmål der skal samles op på er: A) Om indsatsen er implementeret, så den faktisk svarer til det programteorien siger skal ske, for at virkningen indfinder sig B) Om resultatet faktisk har indfundet sig som forudsat af programteorien
Analysere og konkludere Teorifejl eller implementeringsfejl Indsatsen er implementeret korrekt Indsatsen er ikke implementeret korrekt Resultatet er indtruffet 1. Programteorien bestyrket 3. Andre forhold end indsatsen forklarer resultatet Ingen ændring i tiltro i programteorien Resultatet er udeblevet 2. Teorifejl 4. Implementeringsf ejl og muligvis teorifejl
Analysere og konkludere Teorifejl eller implementeringsfejl Indsatsen er implementeret korrekt Indsatsen er ikke implementeret korrekt Resultatet er indtruffet 1. Fortsæt indsatsen 3. Nedlæg indsatsen Resultatet er udeblevet 2. Nedlæg indsatsen 4. Reparer på implementeringen af indsatsenunder en vis usikkerhed
Analyserer og konkluderer Identificer bieffekter : Bieffekter kan være positive og negative samt forudsagte eller ikke forudsagte De bieffekter som er forudsagt i programteorien bør naturligvis undersøges. Evaluator forventes også at undersøge og afrapportere bieffekter, som ikke er forudsagt af programteorien Hvis bieffekterne indgår i evalueringens kommissorium Er af interesse for beslutningstagerne i organisationen Hvis evaluator er involveret i organisatorisk læring og udvikling Hvis evaluator i øvrigt har et klart moralsk eller er juridisk ansvar for at meddele om bieffekterne
Årsag I FORVENTES AT HAVE BESKREVET : Hjemmeopgaven Udarbejdelse af handling/ programteori og effektevaluering (realitetstestning) Årsag- virkningsforståelsen( programteorien/ handlingsteorien) evidensinformeret) Metode- indsats beskrivelsen Hvordan indsatsen skal efterprøves Hvordan indsatsen skal måles Men (endnu) ikke : Måling er Ledelsesbeslutning er ændring nødvendig Virkning
Anvendt litteratur Hanne Kathrine Krogstrup (2006) Evalueringsmodeller 2.udgave ACADEMICA Peter Dahler- Larsen & Hanne Kathrine Krogstrup (2006) Nye veje i Evaluering 1.udgave 3. oplag ACADEMICA Malene Skov Dinesen & Camilla Kølsen(2013) De Witt Essensen af Innovativ evaluering, Dansk psykologisk Forlag