Feedback er næste trin i kvalitetsarbejdet kl. 09.30 Morgenmad Kl. 10.00 Velkomst v./jan Christensen og Ebbe Hargbøl Hvad siger data fra elevtrivselsundersøgelserne om vores evne til at give feedback til eleverne? og hvad siger dette om vores evalueringskultur? Kl. 10.40 Feedback og formativ evaluering v./lektor og ph.d. Preben Olund Kirkegaard (UCN, Act2learn Pædagogik) Kl. 11.30 Metoder til forbedring af kvalitetsarbejdet på skolerne v./rikke Kirkeskov Sørup (Danmarks Evalueringsinstitut) Kl. 12.30 Frokost Kl. 13.15 Skarpe input til det videre kvalitetsarbejde i netværkene Kl. 14.45 Konferencen afsluttes Kl. 15.00 Repræsentantskabsmøde i UddannelsesBenchmark Kl. 16.00 Repræsentantskabsmødet afsluttes
Den nye aftale og reform af erhvervsuddannelserne Kvalitetsdelen i reformen Hvordan netværkene har arbejdet med kvalitetsdelen i reformen og hvordan hænger det så sammen med dagens tema?
Gennemgående princip Feed-back Hvor kommer vi fra? Feed-forward Hvad er næste trin? Feed-up Hvor skal vi hen? Inspireret af: Hattie & Timperley (2007:86): The Power of Feedback i Review of Educational Research, 77 (1): 81)-11)2).
Hvorfor evaluere? Et spørgsmål der åbner for overvejelser over evalueringens intentioner, når evalueringens formål skal bestemmes både i forhold til, hvad der skal evalueres, hvem der evaluerer, og for hvem der evalueres.
Globale og lokale perspektiver Globalt perspektiv på kvalitetsarbejdet Internationalt niveau Nationalt niveau Uddannelsesniveau Netværksniveau Institutionsniveau Afdelings-/teamniveau Klasse-/lærerniveau Elevniveau Lokalt perspektiv
Jeg bliver udfordret i undervisningen Andel af elever, der er "helt enige" eller "enige" i udsagnet 85% 80% 75% 74% 77% 66% 68% 72% 67% 70% 55% 2011 2012 2013 70% 82% EUCNVS HOLBÆK (220) EUCNVS KALUNDBORG (55) KØGE HANDELSSKOLE (172) NIELS BROCK (1084) ROSKILDE HANDELSSKOLE (428)
Virkningsfuld undervisning John Hattie (2012): Synlig læring for lærere (Tallene i parentes angiver størrelse af læringseffekt) 1. Elevforventninger (1.44) 2. Respons på intervention (1.07) 3. Lærerens troværdighed i elevens øjne (0.90) 4. Formativ evaluering (0.90) 5. Mikroundervisning (0.88) 6. Klasserumsdiskussioner (0.82) 7. Helhedsinterventioner for læringshæmmede elever (0.77) 8. Lærertydelighed (0.75) 9. Feedback (0.75) 10. Gensidig undervisning (0.74) Hilbert Meyer (2005): Hvad vi ved om god undervisning Klar strukturering af undervisningen En betydelig mængde ægte læretid Læringsfremmende arbejdsklima Indholdsmæssig klarhed Meningsdannende kommunikation Metodemangfoldighed Individuelle hensyn Intelligent træning Transparente præstationsforventninger Stimulerende læringsmiljø http://samples.pubhub.dk/9788792871008.pdf
Evidens og dømmekraft http://edu.au.dk/forskning/videoforelaesninger/evidens-og-doemmekraft/
Lærerne har inden for de seneste 2 måneder givet mig en tydelig vurdering af min indsats Total Hvordan oplever du de faglige krav i uddannelsen? For store Tilpas For små Base 6.610 322 5.229 1.030 Helt/delvis enig 4.505 208 3.715 564 68% 65% 71% 55%
Lærerne giver mig tilbagemeldinger som hjælper mig til at gøre mit skolearbejde bedre fremover Total Hvordan oplever du de faglige krav i uddannelsen? For store Tilpas For små Base 6.622 324 5.240 1.029 Helt/delvis enig 4.559 194 3.805 543 69% 60% 73% 53%
Lærerne har inden for de seneste 2 måneder givet mig en tydelig vurdering af min indsats Total Jeg er en af de bedste Hvordan klarer du dig i klassen? Der er nogle få, der er bedre end mig Der er mange, der er bedre end mig Base 6.610 1.379 3.658 1.553 Helt/delvis enig 4.505 969 2.539 984 68% 70% 69% 64%
Lærerne giver mig tilbagemeldinger som hjælper mig til at gøre mit skolearbejde bedre fremover Total Hvordan klarer du dig i klassen? Jeg er en af de bedste Der er nogle få, der er bedre end mig Der er mange, der er bedre end mig Base 6.622 1.376 3.667 1.558 Helt/delvis enig 4.559 960 2.591 1.008 69% 70% 71% 64%
Lærerne har inden for de seneste 2 måneder givet mig en tydelig vurdering af min indsats Total Har du inden for de seneste 3 måneder seriøst overvejet at stoppe på uddannelsen? Ja Nej Base 6.610 1.359 5.225 Helt/delvis enig 4.505 68% 782 58% 3.708 71%
Lærerne giver mig tilbagemeldinger som hjælper mig til at gøre mit skolearbejde bedre fremover Total Har du inden for de seneste 3 måneder seriøst overvejet at stoppe på uddannelsen? Ja Nej 6.622 1.358 5.236 Helt/delvis enig 4.559 69% 881 57% 3.761 72%
Fortolkning af data Lærerne er bedst til at håndtere midtergruppen af elever, og har tilsyneladende udfordringer med at give ordentlig feedback til de elever, der oplever de faglige krav som for store og især til de elever, der oplever de faglige krav som for små. Det er især de elever som oplever sig som blandt de fagligt svageste, der oplever ikke at få ordentlig feedback. De elever, der ikke oplever at få ordentlig feedback har i markant højere grad end andre elever seriøse overvejelser om at stoppe på uddannelsen.
Evalueringskulturer SKAL/ VIL IKKE SKAL/ VIL GODT SKAL IKKE / VIL IKKE Reaktiv evalueringskultur Laissez Faire-orienteret evalueringskultur Eksemplarisk evalueringskultur Proaktiv evalueringskultur SKAL IKKE / VIL GODT Intern motivation
Evalueringskulturer og udviklingspotentialer Fit for Action Reaktiv evalueringskultur Laissez Faire-orienteret evalueringskultur Instruktion Akkreditering Eksemplarisk evalueringskultur Proaktiv evalueringskultur Fit for Purpose Intern motivation
Kvalitetsniveauer Niveau Indhold Nøglespørgsmål Kode Evaluering Gennemføres evalueringen Data 1 systematisk? 2 Evalueringsmetode Er evalueringsmetoden holdbar? Holdbarhed (Gyldighed og pålidelighed) 3 4 Kvalitetssystem Hvordan anvendes evalueringen? Systematik (formativ og summativ evaluering) Kvalitetsmetasystem Hvordan anvendes kvalitetssystemet? Effekt (kausalitet, meningsfuldhed m.m.) 5 Kvalitetsetik Hvordan påvirker kvalitetssystemet de involverede samlet set? Det gode kvalitetsarbejde
Evalueringskulturer og kvalitetsniveauer Fit for Action Reaktiv evalueringskultur Laissez Faire-orienteret 2 evalueringskultur Instruktion 1 3 Intern motivation Akkreditering Eksemplarisk 4 evalueringskultur Proaktiv evalueringskultur 5 Fit for Purpose
Evalueringsmetoder fra Danmarks Evalueringsinstitut (EVA) http://www.eva.dk/metoder
Spørgsmål til de forskellige uddannelsesområder 1.Hvilken evalueringskultur kendetegner vores kvalitetsarbejde? 2.Hvor vil vi hen med kvalitetsarbejdet? 3.Hvad er næste trin i kvalitetsarbejdet?
Spørgsmål til de forskellige uddannelsesområder 1. Marker med et punkt i feltet, hvor I mener det ideelle kvalitetsarbejde befinder sig. 2. Marker med et andet punkt i feltet, hvor I mener I er nu. 3. Hvis stregen mellem de to felter var den lille viser på et ur, hvad ville klokken så være? (fx 01:30) 4. Hvad er behovet for næste trin i kvalitetsarbejdet på jeres uddannelsesområde? 5. Hvad kan netværket hjælpe jer med i den forbindelse? Brug eksempler, beskrivelser og sammenligninger i beskrivelsen af jeres behov. 6. Lav en væg med udgangspunkt i ovenstående spørgsmål på Padlet 7. Giv en 5 minutters præsentation af ovenstående i plenum kl. 14.15
Præsentation af behov for kvalitetsudvikling på uddannelsesområder Gymnasieområdet (stx, hhx, htx): http://da.padlet.com/wall/2014gym VUC: http://da.padlet.com/wall/2014vuc SOSU: http://da.padlet.com/wall/2014sosu Tekniske erhvervsuddannelser: http://da.padlet.com/wall/2014tekniskeud Merkantile erhvervsuddannelser: http://da.padlet.com/wall/merkantileud