DES ÅRSKONFERENCE 2014 SESSION 1C FREDAG 12. SEPTEMBER SYNLIG LÆRING - VED HJÆLP AF DE NATIONALE TEST

Transkript

1 DES ÅRSKONFERENCE 2014 SESSION 1C FREDAG 12. SEPTEMBER SYNLIG LÆRING - VED HJÆLP AF DE NATIONALE TEST v/ Martin Kronika Fliess & Jakob Wandall, NordicMetrics ApS

2 Kort om os Vi er en nyetableret virksomhed stiftet af Epinion, Brøndum & Fliess samt NordicMetrics/v Jakob Wandall Vi arbejder for at forbedre kommuners, skolers og læreres grundlag for den pædagogiske indsats Vi vil gerne koble teori med praksis og derigennem medvirke til at udbrede kendskabet til og anvendelsen af redskaber til måling af fagligt niveau og læring på et videnskabeligt grundlag Vi vil bidrage til at fremme udviklingen af it-baserede læringsredskaber på dansk grund Læs mere på nordicmetrics.com

3 Vi arbejder for At give kommunen og dennes skoler ny indsigt i og viden om elevernes faglige niveau, progression og deres potentiale for faglig vækst fokus: At give skolerne redskaber til at sætte mål for og give feedback på en inspirerende og tryg måde At dokumentere hvilke pædagogiske virkemidler der virker fokus: Hvilke uddannelsesaktiviteter og pædagogiske virkemidler har størst effekt på læring og motivation? At tilføre den nordiske uddannelsesmodel et videnskabeligt løft, der kan give både elever og lærere en enestående indsigt i elevernes faglige niveau og deres udviklingspotentiale

4 Hvem arbejder vi for? Og med hvad? Målgrupper: Forvaltning, skoleledelse og lærere Introduktion til Beregneren: Baggrund og skalaer Brug af beregneren, Standardudgaven Vurdering af resultater Brug af Skole-hjem-udgaven Anvendelse og fortolkning

5 Hvad siger de kommunale læsekonsulenter?

6 Vigtige pointer Skolerne kan ikke bedømmes på det elevgrundlag, som de tilfældigvis har fået - men de kan holdes op på hvad de gør med det Progression er den mest reelle målestok for kvalitet og for effekten af skolernes indsats De Nationale Test er designet til at være lærerens og lederens pædagogiske redskab De kan anvendes til monitorering, men ikke fungere som et rent accountability-redskab Der er ingen garanti for at viden om elevernes fremgang i sig selv giver progression men: Alternativet er at skolerne handler med bind for øjnene

7 DNT bruges ikke pædagogisk Test kan bruges pædagogisk (mhp. forbedre elevresultat) eller til policyimplementering (monitorering og/eller styring jf. Vedung: Carrots, Sticks, and Sermons) ift. personale/skoler/kommuner. Enighed blandt eksperter (Rambøll, EVA, DPU mv.) og praktikere: DNT bruges ikke pædagogisk. Men hvad skal der til? Resultaterne skal gøres fortolkelige Brugerne skal lære at fortolke dem Først herefter kan der arbejdes med deres anvendelse (pædagogisk og didaktisk implementering af ny viden)

8 Skolereformen 4 resultatmål: 3 x DNT + Trivsel DNT=Måling => Systemets performance er kun påvirkelig gennem ændringer af enkeltelevers præstationer (resten er aggregering) Lærerne er den eneste vej til eleverne. Danske lærere er generel meget dygtige undervisere. Lærerne gør generelt deres bedste!! Men de ved generelt meget lidt om elevernes progression, læring og om effekten af deres indsats. => Hvis lærerne skal gøre noget andet end i dag er viden om progression nødvendig

9 Adaptive test Adaptiv = Tilpasser sig til eleven, - Rigtige svar Sværere spørgsmål - Forkerte svar Lettere spørgsmål Adaptivitet Tilpas svære opgave Effektivitet i testningen Forudsætning: Rasch-godkendte opgaver Dygtighed og sværhed måles på samme skala Tre forskellige skalaer: Rasch-logits, 5-skalaen og 100-skalaen (percentilskalen)

10 1. Klassegennemsnit

11 2. Søjlediagram

12 3. Elevresultater, tabel

13 To skala-typer Ordinal-skalaer: De nationale test og FSA Norm- el. kriteriescorer 5-trins-, Percentil- & Karakter-skala Interval-skalaer: Videnskabelige målingen Progressionsscorer Logit, PISA, PIRLS, Lexile

14 Fordele ved begge typer Ordinal skalaer - fx percentil scorer: Sammenlignelige med landsgennemsnit, lette at forstå (ligner karakterer), Egnede til formidling fx til forældre Interval skalaer fx Progressions scorer : At følge elevernes udbytte af undervisningen Egnede til at 1. Sætte konkrete mål for elevernes udvikling/læring 2. Identificere hvor der går godt (god praksis) og galt (early warning)

15 Hvor meget betyder skalaen? Baggrund for projektet Rådmandsgade skole: Når en elev får 45 i 4. klasse og 34 i 6. klasse er han så blevet dårligere til at læse?

16 Hvor meget betyder skalaen? Lineal Tommestok

17 Hvor meget betyder skalaen? Termometer: Skalaer med forskellige nulpunkter

18 Hvor meget betyder skalaen? Ordinal- & Interval-skalaer (Percentil/Logits)

19 Hvor meget betyder skalaen? DNT Som det ser ud for læreren DNT Som det i virkeligheden er

20 Hvor meget betyder skalaen? Hvem har lært mest: - Anders, der er gået fra 1 til 10? - Sofie, der er gået fra 30 til 70? fra 1 til 10 fra 30 til 70

21 Hvor meget betyder skalaen? Raschskala ikke til at formidle Ny fælles skala, hvilken? Mange muligheder: NAEP, PIRLS, PISA, Lexiles, SAT?

22 Hvor meget betyder skalaen? Ny Skala: Fra Normal fremgang er ca. 100 om året Inspiration: Lexile skalaen Den mest udbredte US-skala (50%) Bruges til at opgøre elevdygtighed og teksteres sværhed. Udviklingsskala

23 Hvor meget betyder skalaen? Ny Skala: Fra Normal fremgang er ca. 100 om året Ny Skala: Kan bruges på tværs af klassetrin

24 Amerikansk progression Progression og spredning blandt amerikanske elevers læsescorer, NAEP 2009

25 Dansk progression Tre skalaer: S-Skala = Sprogforståelse A-Skala = Afkodning T-Skala = Tekstforståelse Fælles for de tre skalaer er: Normalområdet er Normalprogression er ca. 100 pr. år.

26

27 Gns. én elev i hver 2. klasse:

28 Research on School Effectiveness: Schools (incl. teachers) have a large effect on Growth (Added value) the student background determines the final outcome In DK in US? Final test scores School performance (growth/added value) Low High Student background (mean score entrance) Low - - High + +

29 Test scores for same class in 2, 4 & 6 grade, Reading Available today: 3 percentiles tables

30 Beregneren af omsætning I tabelform

31 Test scores for same class in 2, 4 & 6 grade, Reading Tool for flexible presentation of individual student growth results on interval scales Available today: 3 percentiles tables

32

33 Tak for opmærksomheden Jakob W: Martin KF: