Rapport om elektronisk testning af elever på Hg 1. år
Forord Uddannelseschef for Hg, Kim Larsen kigger de kommende elever over skuldrene i vores testlokale ZBC, Zealand Business College, besluttede i efteråret 2009, at alle de ca. 134 elever som havde søgt og fået bevilliget optagelse på Hg, skulle testes efter vores introduktionssamtale. ZBC og Undervisningsbanken v/bo Klercke aftalte, at det var undervisningsbankens elektroniske testmateriale, der skulle benyttes. Efter en del prøvetests var det køreklart. Testningens fag var: Talforståelse Engelsk niv. F/E og D/C Dansk niv. F/E og D/C Sprogforståelse til faget tysk er pt. under udarbejdelse. Formål: Formålet med denne testform var, og er, at inddele eleverne i klasser under forudsætning af, hvor deres egne kompetencer og forståelse for de nævnte fags områder lå. Vi har i erhvervsskole regi noteret os en faldende kompetencegrad inden for engelsk og almen talforståelse eller bare almene elementære regnestykker. Dette har skabt et spændingsfelt mellem de kompetencestærke elever, inden for de nævnte fag, og de mindre kompetencestærke dette på trods af flere års erfaring med holddannelse og differentiering af elevgrupperne, samt udvikling af materialer m.v. Alligevel må vi erkende, at hvis vi skal opfylde de samfundsmæssige og bekendtgørelsesmæssige krav, der er til vore elever, ja, så må vi forsøge at sætte ind rettidigt gerne nu end senere. Derudover er der elevernes danskfaglige kompetencer. Her har vi observeret en faldende grad af forståelse for de alment dannende og vidende kompetencer. Dette er måske ikke så overraskende som engelsk og almen talforståelse, dog må vi erkende, at bredden af elever, der bliver optaget på erhvervsuddannelsen, har relativt svage danskmæssige kompetencer. Dette være sig grammatik, udtryksform, stavning, tegnsætning m.v. Problemer som er kendte, men dog har tiltaget en del de senere år. Så vi må konstatere, at der også her er et generelt behov for, at vi skal sætte ind med en 2
række tiltag i forhold til at bedre, eller i det mindste stabilisere, elevernes danskfaglige kompetencer. (Vi kommer senere ind på de generelle tendenser i forhold til resultaterne af disse tests) Overordnet var vores helt klare formål derfor, at få afdækket eleverne faglige kompetencer inden for de nævnte fag, for så samtidig at arbejde hen imod en afklaring og en klassificering af den enkelte, men også for at blive bekræftet eller afkræftet i vores teori om, at det egentlig står relativt skidt til med elevernes faglige kompetencer. Og vi skal gøre opmærksom på, at vi her kun beskriver elevernes faglige kompetencer inden for de nævnte fag, og det vi har gjort, velvidende, at der kan være andre problemstillinger, der også gør, eller har gjort, sig gældende under deres tidligere skolegang. Og at denne rapport kun omhandler selve testningen og disses resultater og statistik deraf, samt hvilke tiltag Hg-afdelingen har gjort, for at imødekomme de krav der er, ikke mindst forsøget på at bedre elevernes umiddelbare stilling og kompetenceniveauer inden for fagene dansk, talforståelse og engelsk uagtet niveaukrav i øvrigt. I denne rapport hedder disse fag følgende: Dansk Danskværkstedet med læsevejleder (se note) Talforståelse Talværkstedet Engelsk Engelsk kommunikation Struktur opbygning: Kunsten og udfordringen var at få timerne indlagt i elevernes skema og samtidig i årsnormen for de lærere, som er en del af det team, der skal dække disse fag. Derudover var udfordringen lærerstaben, da ikke alle lærere, uagtet deres kompetencer, kunne dække disse timer, samt selvfølgelig det faktum, at undervisningen IKKE skulle afspejle de ordinære grundfag som dansk, erhvervsøkonomi og engelsk omvendt skulle undervisningen heller ikke tone for meget af folkeskole undervisning, så dette var en relativ svær proces for alle involverede parter. Løsningen har været, at alle faglærerne har lavet en lille kombination af både folkeskole og erhvervsskole fagligt indhold eller sagt på en anden måde, i eksempelvis talværkstedet er der en kombination af de sværhedsgrader og den manglende kunnen, som testene viste inden for eksempelvis procentregning, decimaler og brøker osv. Kombineret med en mere dybdegående og fortalt form for erhvervsøkonomi. Mens engelsk bygger meget på det grammatiske tillige med en del læsning og oversættelse i klassisk forstand. Alt dette er dog stadig på forsøgsstadiet. Rent skemateknisk er disse fag lagt i valgfagsblokken altså indlagt som ekstra kompetencegivende undervisning/pakker. Fordelt med en lektion danskværksted, to lektioner talværksted og en lektion engelsk kommunikation om ugen. Som udgangspunkt lyder det ikke af ret meget, men det vil på sigt afhænge af vores og elevernes evaluering ved juletid. En vigtig faktor for undervisningen var, hvornår på dagen vi lagde disse lektioner, da erfaringen viser, at alt hvad der lugter af ekstra undervisning i de tidlige morgentimer eller sene eftermiddagstimer, generelt er forbundet med et betydeligere større fravær end andre almene grundfag! Derfor har vi forsøgt at implementere disse lektioner midt på dagen, men det har rent skematisk 3
ikke været muligt. Det er dog vores ambition, at vi efter jul, med nye skemaer osv., kan erlægge disse lektioner midt på dagen, så de indgår som en naturlig del af elevernes ugeskema. Vi har dog været meget påpasselige og brugt megen energi på at fortælle eleverne, at vi IKKE er i gang med at danne A og/eller B hold eller hjælpeklasser, men at alle får, og skal have, en chance og at det er for at sikre, at de kan få et så godt grundforløb som overhovedet muligt. Derfor blev alle elever sammenkaldt til et møde i vores auditorium, hvor vi gennemgik præmisserne og testresultaterne, tillige med en forklaring på, hvorfor den elev skulle have det og det fag. (se PowerPoint bilag) I den forbindelse gjorde vi også meget ud af at forklare eleverne, at alle testresultater IKKE bare var aflæst alene ud fra testene og indskrevet i en skabelon, men at alle elevernes testresultater var sammenholdt med deres 9. klasses karakterer og afgangseksamensresultater, netop for at vi skulle være meget sikre på, at det der var elevernes testresultater, nu også var det, som andre resultater beviste. I den forbindelse skal vi bemærke, at dette ikke er en proces, der skal danne præcedens for kommende elever der testes, da disse tests fremadrettet udelukkende vil danne grundlag for elevernes placering på de forskellige hold. Men det har været os magtpåliggende her den første gang, at se på andre resultater og hører eksempelvis deres faglærere om elevernes kompetencer i de nævnte tre grundfag, da eleverne har haft otte ugers effektiv grundfagsundervisning, inden disse hold blev oprettet. I det efterfølgende vil vi komme ind på selve testene og deres resultater, samt hvad disse fortalte os med hensyn til elevernes placering. Derudover vil vi præsentere det materiale, der viser de forskellige test, tillige med vores umiddelbare konklusion og det fremadrettede arbejde omkring testningen af vores elever, diverse PowerPoints mv. er vedlagt som bilag. ZBC Zealand Business College Kim Larsen Uddannelseschef for Hg, Lasse Petersen Erhvervs- og studievejleder Hg. Koordinator 4
Selve testningen af elever: Næste udfordring var en generel bedømmelsesplan, samt den egentlig opgørelse af testene og de resultater der fremkom inden for de forskellige fagområder. Undervisningsbanken havde en facitliste, men som udgangspunkt var det vores klare holdning, at denne var vejledende, og vi ville som udgangspunkt ikke bestride denne, men vi mente også, at vi var nødt til at arbejde med vores egen, også ud fra det faktum, at vi jo sammenholdt testresultaterne med elevernes 9. klasses og deres egentlige afgangseksamen. Derfor brugte vi mange ressourcer på en egen forarbejdet facitliste/opgørelse målt procentuelt ud fra testresultaterne. Vores bedømmelsesskema kom efter megen forarbejdning til at være som nedenstående, ud fra ovennævnte kriterier og, da eleverne som udgangspunkt ville kunne have 100 % rigtige, målt i korrekt besvarelse. Note til test: Opgørelse bedømmelse: Talforståelelse: Elever, hvis score lå under 33 %, skulle anbefales talværkstedet (TF) Dansk: Elever, hvis score lå mellem 85 og 90 %, skulle anbefales at påbegynde deres undervisning på niveau E/D Elever, hvis score lå meget under 60 %, skulle anbefales læseværkstedet (LV) Engelsk: Elever, hvis score lå mellem 80 og 90 %, skulle anbefales at begynde deres undervisning på niveau E/D Elever, hvis score lå meget under 60 %, skulle som udgangspunkt starte på niveau F/F i engelsk kommunikation (EK) Tysk: (Note) Eleverne havde her ikke mulighed for pt. at blive elektronisk testet, og derfor så vi på deres tyskkarakterer fra folkeskolen. De elever, der ikke havde haft tysk, blev placeret på et hold med begynder tysk niveau F/F. Elever med ingen forkundskaber i tysk anbefales niveau F/F Elever med forkundskaber, svarende til mellem 2 3 år, er anbefalet niveau F/E Elever med forkundskaber, svarende til mellem 3-5 år, er anbefalet niveau E/D (sluttende på niveau C.) I forhold til talværkstedet, blev vi hurtigt klar over, at dette var et tilbud som skulle gælde alle 1. års elever! Som udgangspunkt virker dette rimeligt ambitiøst, men omvendt har vi også her set en generel tendens til lave karaktergivning i forhold til, hvor vigtigt dette fag er for en erhvervsskole: Derfor konkluderede vi, at alle elever på 1. år skulle deltage! Så summen var en prioritering fra vores side. 5
Også når vi kigger på, hvor mange elever der procentuelt skulle have haft talværkstedet, som aflæst af testresultaterne. Omkring læseværkstedet var det os magtpåliggende, at finde en kollega med danskmæssige kompetencer, samt de korrekte pædagogiske kompetencer, derefter er denne kollega blevet tilmeldt uddannelsen som læsevejleder. Opbygning af testene: Testpakken er gratis tilgængelig som en del af abonnementet på Undervisningsbanken. Pakken kan hentes fra undervisningsbanken under fx Merkaltilt->HG->EUD-test, og indeholder fem forskellige tests samt et analyseprogram. Dansk F/E Dansk D/C Matematik Engelsk F/E Engelsk D/C Testene downloades, pakkes ud og afvikles fra skolens server. Vi har dog den bemærkning, at man som skole skal have et relativt godt trådløst netværk, hvis man ønsker at eleverne skal testes på laptops. I vores tilfælde blev eleverne testet på stationære computere i vores kompetencecenter. Om de enkelte tests: Alle fem test udvælger spørgsmålene fra en større base af spørgsmål i et på forhånd fastlagt mønster, og blander både spørgsmål og svar, hver gang testen afvikles. Det sikrer, at to elever, der sidder ved siden af hinanden, vil opleve, at de gennemfører to forskellige testopgaver. Alle testene er beregnet til at tage 45 minutter inkl. en kort introduktion givet af testafvikleren/læreren. Opbygning af spørgsmålstyper: Dansk: Dette fag er bygget op om følgende: Grammatik Sprogbrug Auditiv forståelse Læseforståelse 6
Dansk indeholder opgaver, som er tilrettelagt ud fra: stavefejl, indsætninger, komma/punktum alfabetisk rækkefølge, modsatte ord, diktat, stil brud, flertalsform, navneord, udsagnsord, retteord, stedord, talemåde, syntaks, samt datidsform af udsagnsord. Testene har ikke en lineær progression, men en differentieret progression. Se eksempel: Opstartsbillede for eleven: 7
Eksempel på dansk: Talforståelse: Dette fag er bygget op om følgende: Ligninger Færdighedsregning Problemregning Decimaltal Brøker Procentregning Testene har ikke en lineær progression, men en differentieret progression. Se eksempel på næste side. 8
Eksempel på talforståelse: Engelsk: Dette fag er bygget op om følgende: Grammatik Auditiv forståelse Tekstforståelse Engelsk indeholder opgaver som er tilrettelagt ud fra: rigtige sætninger, stedord, udsagnsordenes bøjning, a an, samt ordstilling Testene har ikke en lineær progression, men en differentieret progression. Se eksempel på engelsk næste side: 9
Eksempel på engelsk: Antal af spørgsmål: Der er forskellige antal spørgsmål pr. testopgave. Engelsk repræsenterer 23 spørgsmål Dansk repræsenterer 25 spørgsmål Talforståelse repræsenterer 27 spørgsmål Alternativ testform 10
Bemærk at der er flere underspørgsmål ud fra disse antal spørgsmål! Selve udregningen ser således ud: Eksempel på detaljeoversigt: 11
Analyseprogram: Hver gang en elev afvikler en test, sendes resultatet pr. mail til den angivne mailadresse. Sammen med mailen følger en vedhæftet fil, der kan gemmes i en selvvalgt mappe. Når analyseprogrammet starter første gang, beder det om, at du udpeger stien til filerne, der derefter indlæses - du kan altid senere indlæse flere resultater. Programmet kan nu benyttes til at: Se hvordan den enkelte elev har klaret sig i forhold til alle andre, der har taget samme test Se hvordan den enkelte elev har klaret sig i forhold til holdet Flytte eleven til et andet hold (herunder oprette nye hold) Se hvordan eleven har klaret sig over tid (progression) Programmet er selvforklarende, men kræver Office 2007, for at kunne afvikles. Ved afviklingen sker der en automatisk registrering af den nødvendige hjælpefil (ChilkatXml.dll), hvilket i enkelte tilfælde kan blive forhindret af en meget restriktiv sikkerhedspolitik. Hvis dette sker for dig må du bede systemadministrationen registrere filen "i hånden" med regsvr32.exe Man kan selvfølgelig også vælge blot at se besvarelserne i de enkelte mails. Analyse af elevernes manglende kompetencer ud fra: Af de ca. 134 elever, der er blevet testet er der nogle generelle indikationer om, hvad disse elevers svage kompetencer bestod af inden for de forskellige fag. Hermed følger en kort oversigt: I dansk var det især flg.: Generelle stavefejl Navneord Stedord Talemåde Man kan selvfølgelig så få den opfattelse, at det var det hele, men dette er ikke tilfældet. Ovenstående er procentuelt gengangere som indikerer, at det især var her, eleverne havde manglende kompetencer. Dog skal det retfærdigvis også indskydes, at rent procentuelt er antallet af elever ikke tilsvarende stort, set i forhold til talforståelse og engelsk! 12
I talforståelse var det især flg.: Ligninger Færdighedsregning Problemregning Brøker Procentregning Det der igen gør sig gældende, er, at dette kunne være hele paletten af spørgsmål, men igen er der en progression, som betyder, at det er disse emner, som eleverne procentuelt har det meget svært med. Det er måske ikke så overraskende igennem rigtig mange år, har ovenstående voldt menneskeheden problemer. Det, der sætter det lidt i relief, er den konstante fejlmargin, og det er lidt betænkeligt, at disse er så centrale og gennemgående for ALLE elever, og altså ikke bare enkelte elever, som lige har et udfald. Dette får i hvert fald os, som uddannelsesinstitution, til at tænke grundigt over, hvad vi skal, også set i lyset af at man altid kan sige, at et fag som fx erhvervsøkonomi er et, for eleverne, nyt fag, men vi ved også, at elever med manglende kompetencer inden for almen regning vil få det svært med et fag som erhvervsøkonomi. Omvendt er det tankevækkende, at hvis disse elever får udleveret et fortrykt etableringsbudget, ja, så er der som sådan ingen problemer, for den enkelte, med at indsætte disse poster, men når så det drejer sig om fx moms (procent) eller elementær sammenlægning, ja, så er vi tilbage til udgangspunktet. Så talværkstedet er et fag, hvor vi virkelig ønsker at sætte alle vores faglige og læringsmæssige kompetencer ind netop for at styrke elevernes talmæssige kompetencer. I engelsk var det især flg.: Auditiv forståelse Grammatik Generel tekstforståelse Stedord A an Ordstilling Udsagnsord I forhold til engelsk kunne vi faktisk gentage, hvad vi har skrevet om talforståelse, dog er der den forskel, at vi reelt, igennem de seneste to til tre år, har set en markant nedgang i elevernes engelskkompetencer og den indlæring og viden, som de har med i deres bagage fra folkeskolen. Dette er indiskutabelt og det er det samme vi hører fra de kollegaer, der har vores engelskhold; alle nævner denne nedgang som et generelt problem. 13
Procentuel fordeling: Elevernes fordeling procentuelt er således: 134 elever har gennemgået testene inden for alle områder, dvs.: Talforståelse Dansk Engelsk Procentuelt var fordelingen som følger: 51,4 % af de testede elever skal have talværksted 9.7 % af alle testede elever skal have danskværksted/læsevejleder 40,2 % af alle testede elever skal have engelsk kommunikation Overrasket, nej egentlig ikke, vi har blot fået konstateret, hvad vi vel dybest set godt viste på forhånd, det der så er tilbage er, at vi nu har fået et værktøj der gør vores holddannelse mere legitim og ikke mindst mere korrekt, selvom der altid vil være en fejlmargin, men dette har vi bedt de forskellige lærere om at bedømme ved evalueringen som finder sted ved juletid. Konklusion: Vi har som sagt testet de elever som blev optaget på Hg med start her i august, grunden til dette, og at det var en elektronisk testform vi valgte, var ud fra flere kriterier. Et af de mest tunge argumenter var, at i stedet for at vi lod en dansklærer, en erhvervsøkonomilærer og en engelsklærer teste alle eleverne i vores introduktionsuger, og da det var enormt tunge tests som var bygget på skriftlighed, og alle disse efterfølgende skulle rettes, og kommunikeres ud osv., og da denne form også er meget løn og timetalstung sat i forhold til denne elektroniske testform, samt det faktum at vi nu kunne sende besked ud til eleverne allerede i starten af sommerferien, at de efter den personlige samtale de skulle have med studievejledningen inden de startede, alle skulle testes. Dette betød imidlertid at vi så kunne afsætte disse testdage, hvilket gjorde, at vi som sådan havde testresultaterne inden eleverne startede på deres første skoledag hos os. Udfordringen har så ligget i, at der jo som altid kommer en del elever som bliver optaget efterfølgende hos os, udfordringen har så været, at få disse elever testet og placeret inden at holdene blev oprettet i Easy A. Omvendt, er vi som beskrevet ovenover ikke i tvivl om, at denne elektroniske testform er vejen frem, både med hensyn til at få afdækket elevernes faglige kompetencer inden for de tunge fag, men også fordi, at vi nu har en rigtig god mulighed for at sætte ind og afhjælpe nogle af de problemstillinger som mange elever har, når de kommer til os på en Hg uddannelse, nogle problemstillinger, som i mange tilfælde måske efterhånden stiller vores Hg elever svagere på det arbejdsmarked, som vores Hg elever traditionelt jo søger på, også set i forhold til, at vores uddannelsessy- 14
stem generelt på ungdomsuddannelsen er blevet mere ugennemsigtig og uoverskuelig for et ungt menneske som skal i gang med en planlægning af sin egen fremtid. Med dette menes der, at der også qua den faglige og undervisningsmæssige brancheglidning der gennem de seneste år har fundet sted, bliver ansat en del elever med andre uddannelsesniveauer og faglige kompetencer. Derudover må vi som ungdomsuddannelse også erkende, at en del af de elever som vi, som ungdomsuddannelse optager, har nogle faglige kompetencer som er for nedadgående. Her taler vi som sådan ikke om deres sociale eller dannelsesmæssige kompetencer, men om nogle generelle faglige og vidensmæssige kompetencer! dette har dog ikke været afgørende for vores beslutning i forhold til, at teste eleverne på denne elektroniske måde. Men når dette er sagt, så er konklusionen overordnet set, at vi her med dette elektroniske testværktøj, nu kan sætte ind, og give vore unge elever en god mulighed for et kompetence løft, så alle får den uddannelse der svarer til deres egentlige kompetencer. Så fremadrettet er vores elektroniske testning af vores elever der bliver optaget på vores Hg uddannelse, kommet for at blive. Det man dog skal sikre sig er, at alle parter er blevet involveret i processen og ikke mindst bekendt med bevægelsesgrundene for denne form for testning. Derudover er der dog et kritisk spørgsmål som vi ikke har beskrevet endnu. Dette spørgsmål er et som vi tit har fået stillet, omkring vores testning, da vi jo reklamere med, at vi tester eleverne ved optagelse, om vi så ikke afskrækker nogle fra at søge optagelse? da en del elever som bliver optaget, jo godt kan have haft det svært med eksamen og diverse test. Til det må vi sige, jo måske, men det er dog ikke det vi er blevet mødt med, når vi har nævnt vores test af eleverne ved diverse arrangementer mv., og der er ingen elever som bevist har udsagt sig disse tests. Og alt i alt har de været glade for, at få deres niveau så relativt korrekt bedømt. Så summen må være, at vi også forsætter med at teste vore elever elektronisk i fremtiden, dog skal det siges, at der er aftalt en test/prøveperiode på to skoleår, inkl. testning af skolens januar optag, hvilket vil sige, at der kommer en evaluering til januar 2011, med henblik på en bedømmelse, af de hold som er i gang, derudover kommer der en samlet evaluering i juli 2011, hvor vi vil se om der er sket en generel forbedring af elevernes kompetencer, samt en elevevaluering, der gerne skulle give os et praj om, hvordan eleverne har oplevet forløbene. Lasse Petersen ZBC - Zealand Business College 15
Bilag: Følgende bilag er vedlagt denne rapport: Talværkstedet og engelsk kommunikation via dias til eleverne Elektronisk testmateriale via dias til lærerteam og elever. 16