International undersøgelse i computer- og informationskompetence Skolekoordinatormanual (Hovedundersøgelse) Forår 2013

Transkript

1 International undersøgelse i computer- og informationskompetence Skolekoordinatormanual (Hovedundersøgelse) Forår 2013 The Australian Council for Educational Research

2 Indholdsfortegnelse 1. Introduktion Dit ansvar som skolekoordinator Udvælgelse af deltagende elever og lærere Forberedelse af liste med elever (elevliste) Vejledning i at eksportere data til elevlister fra PersonaleIntra Forberedelse af liste med lærere (lærerliste) Returnering af elev- og lærerliste til Det Nationale Forskningscenter Kontrol af skolecomputerkompatibilitet og resurser (vejledning ligger på det medsendte USB-stik) Oversigt Forberedelse af testen Forberedelse af lokaler til testsessionerne Testgennemførelse ved brug af skolens computere Testgennemførelse ved brug af eksterne bærbare computere Planlægning af testsession(erne) Valg af den testansvarlige Opgaver ved ankomsten af materialerne Kontrol af og opbevaring af materialer Besvarelse af lærerspørgeskemaer Besvarelse af it-koordinatorspørgeskemaet Besvarelse af skolelederspørgeskemaet Opgaver på testdagen Dine opgaver før testgennemførelsen Opgaver under testgennemførelsen Registrering af elevernes deltagelse (elevdeltagerliste) Udfyldelse af elevdeltagerlisten Reserve-elev-id Opgaver efter testgennemførelsen Afholdelse af en erstatningstest Kvalitetskontrol af dataindsamlingsprocedurerne Returnering af materialerne til Det Nationale Forskningscenter Tjekliste for skolekoordinators arbejdsopgaver Side 2 af 23

3 1. Introduktion Tak fordi du har indvilliget i at være skolekoordinator for IEA s internationale undersøgelse i computer- og informationskompetence (ICILS). The International Association for the Evaluation of Educational Achievement (IEA) er en uafhængig international sammenslutning af nationale forskningsinstitutioner og offentlige styrelser, der har foretaget tvær-nationale studier af elevers kompetencer i mere end 50 år. Den internationale undersøgelse i computer- og informationskompetence (ICILS) er den første internationale komparative undersøgelse af elevers parathed til livet i videns- og netværkssamfundet, defineret som evnen til at bruge computere til at undersøge, skabe og kommunikere med henblik på at deltage kvalificeret i hjemmet, i skolen, på arbejdspladsen og i samfundet. Undersøgelsen vil måle og analysere forskelle i computer- og informationskompetence (CIK) for elever på 8. klassetrin. Den vil også indsamle oplysninger om de sammenhænge, hvori eleverne udvikler CIK i og uden for skolen. Din skole er blevet udtrukket til at repræsentere Danmark i den internationale undersøgelse. Som skolekoordinator vil du have en central rolle i at støtte gennemførelsen af undersøgelsen på en standardiseret måde, som igen understøtter kvaliteten af de indsamlede data og de endelige mål med undersøgelsen, der skal understøtte undervisning og udvikling af computerog informationskompetence (CIK) i og på tværs af lande. I alt omfatter ICILS fem undersøgelsesinstrumenter, der skal administreres på din skole. Elevtest (USB-baseret, et USB-stik pr. elev) Hver elev skal gennemføre to 30-minutters computerbaserede testmoduler, som omfatter autentiske opgaver i anvendelse af computere til informationssøgning, produktion og kommunikation. Elevspørgeskema (samme USB-stik som ved testen) Elevspørgeskemaet vil også blive udfyldt på computeren, det tager 20 minutter og omfatter spørgsmål om elevernes baggrund, deres brug af computerteknologi (i og uden for skolen) og deres holdninger til at bruge computer. Lærerspørgeskema Lærerspørgeskemaet, der er online (eller, hvis det ønskes, på papir), omhandler lærernes brug af computer (i og uden for skolen), deres faglige erfaringer med at bruge computer, udfordringer i forhold til at bruge computer, holdninger til brug af computer i undervisningen samt selvrapporterede kompetencer i at bruge computer. Besvarelsen af dette spørgeskema tager ca. 30 minutter. It-koordinatorspørgeskema It-koordinatorspørgeskemaet, der er online (eller, hvis det ønskes, på papir), omhandler it-infrastruktur, tilgængelighed af teknisk og pædagogisk støtte til læreres brug af it i skolen mv. Besvarelsen af dette spørgeskema tager ca.15 minutter. Skolelederspørgeskema Skolelederspørgeskema, der er online (eller, hvis det ønskes, på papir), omhandler generel information om skolen (f.eks. størrelse og placering), politikker vedrørende brug af it i skolen (herunder hvordan de er udviklet), den oplevede betydning af it- Side 3 af 23

4 anvendelse for undervisning og læring, og omfanget af lærerdeltagelse i faglige kurser. Besvarelsen af dette spørgeskema tager ca. 20 minutter Bemærk: Elevspørgeskemaet indeholder spørgsmål, hvor eleverne bliver bedt om at angive en titel på hver af deres forældre/omsorgspersoners job, samt en beskrivelse af hvad hver af forældrene/omsorgspersonerne gør i deres arbejde. Spørgsmålene bruges til at klassificere elevernes oplysninger i et internationalt klassifikationssystem. Oplysningerne er fortrolige og skal give indblik i landets samlede elevbaggrunde. De skal ikke bruges til at analysere enkelte elevers præstationer eller baggrund. Del venligst de udsendte elevfoldere ud til eleverne før testdagen, så de får mulighed for at spørge deres forældre/omsorgspersoner om, hvordan deres arbejde bedst kan beskrives. ICILS har ikke har til hensigt at bedømme elevers, skolers eller skolelederes individuelle præstationer. De indsamlede data skal give os mulighed for at tage temperaturen på uddannelsessystemer og give undervisningsfaglig, ledelsesmæssig og politisk relevant information uden at afsløre identiteten af respondenterne. Der bliver ikke offentliggjort data eller rapportering, hvor enkelte elever, lærere eller skoler kan identificeres. Hvis du har spørgsmål eller betænkeligheder eller ønsker flere oplysninger om undersøgelsen og dens mål, bedes du kontakte Det Nationale Forskningscenter via icils@dpu.dk eller telefon: Side 4 af 23

5 2. Dit ansvar som skolekoordinator Som skolekoordinator skal sikre en korrekt indsamling af oplysninger og bistå med distribution og administration af elevtesten og spørgeskemaer på din skole. Bemærk: Alt materiale der sendes fra skolen om elever og lærere opbevares sikkert og behandles fortroligt af Det Nationale Forskningscenter. Ingen personoplysninger forlader landet, idet alle elever og lærere tildeles et unikt id til brug ved databehandlingen. Du skal ligeledes udpege og bistå en testansvarlig (som kan være dig selv) til at forberede og gennemføre elevtesten (se afsnit 5.3). Når testmaterialet er blevet leveret til din skole, er du ansvarlig for at passe på de USBbaserede elevtest og elevspørgeskemaer. Bemærk: De USB-baserede elevtestematerialer er fortrolige og må ikke kopieres eller gives til nogen, der ikke er direkte involveret i testforløbet! Alt materialet, også brugte og ubrugte USB-stik, såvel som (hvis det er anvendt) papirudgaver af spørgeskemaerne til lærere, skoleleder og it-koordinator skal returneres til Det Nationale Forskningscenter. Oversigt (se også særskilt tjekliste) Dit arbejde indeholder følgende opgaver: At arrangere dato for testgennemførelsen og underrette Det Nationale Forskningscenter om datoen. At udfylde lister (elev- og lærerlister) med oplysninger om alle elever og lærere på 8. klassetrin, således at Det Nationale Forskningscenter kan udvælge de elever og lærere, der skal deltage. At køre USB-kompatibilitetstesten og udfylde svararket om skolens computerresurser og sende det til Det Nationale Forskningscenter. At modtage elevdeltagerskema (liste over udvalgte elever) og lærerdeltagerskema (liste over udvalgte lærere) fra Det Nationale Forskningscenter. At kontrollere at deltagerlister, testmaterialer og spørgeskemaer er fuldstændige efter at de er ankommet fra Det Nationale Forskningscenter, og sikre at de uddeles korrekt til elever og lærere. At sikre at alt materiale og alle svar holdes fortrolige og opbevares et sikkert sted hele tiden. Side 5 af 23

6 At arrangere lokaler, computere, elevdeltagelse osv. i samarbejde med lærere, testansvarlig og skoleledelse. At arrangere en erstatningstest hvis elevernes svarprocent er under 90%. At uddele følgebrevene med log-in-information til det online lærerspørgeskema til de lærere, der er angivet i lærerdeltagerskemaet, og sikre at spørgeskemaerne udfyldes, samt registrere status over lærerdeltagelsen i lærerdeltagerskemaet. At uddele følgebrevene med log-in-information til de online spørgeskemaer til skolelederen og skolens it-koordinator og sikre at spørgeskemaerne udfyldes. At returnere de brugte og ubrugte USB-stik, elevdeltagerskemaer, lærerdeltagerskemaer, samt skemaer og informationsark udfyldt af den testansvarlige til Det Nationale Forskningscenter. De følgende afsnit beskriver disse opgaver trin for trin. Bagerst i manualen ligger en tjekliste for skolekoordinatorens arbejdsopgaver. Side 6 af 23

7 3. Udvælgelse af deltagende elever og lærere 3.1 Forberedelse af liste med elever (elevliste) Definition: Elevmålgruppen Elevmålgruppen i ICILS består af alle elever på 8. klassetrin. Det Nationale Forskningscenter har sendt/sender dig en skabelon elektronisk (som excel-fil). Du skal udfylde denne liste med oplysninger om alle elever der går på 8. klassetrin (hvis der på jeres skoler er aldersintegrerede klasser, så skal elever der forventes at gå til 9. klasses afgangsprøve om halvandet år medtages i listen). Bemærk: Når elevlisterne udfyldes elektronisk skal du huske følgende: Undgå at slette eller at ændre på data placeholder-elementet <_list_end_>, som du finder i kolonne F nederst på elevlisten. Undgå at ændre på listestrukturen, dvs. kolonner må ikke tilføjes eller slettes. Billede 3.1. Eksempel på en udfyldt elevliste Tilføj så mange rækker i den elektroniske liste som nødvendigt. Som eksemplet viser skal du lave en liste med følgende oplysninger om hver enkelt elev på 8. klassetrin: Elevens uni-login-navn (kolonne 0) Elevens navn (kolonne 1) Elevens fødselsdato (dag, måned og år på formen DD-MM-ÅÅÅÅ, kolonne 2). Angiv manglende oplysninger om elevfødselsdatoer ved at angive koden Side 7 af 23

8 Elevens køn (kolonne 3) Angiv 1 for hunkøn og 2 for hankøn. Angiv manglende oplysninger om elevens køn ved at angive koden 9. Fritagelsesstatus (kolonne 4) Hvis eleven fritages for at deltage i testen, så angiv her grunden til fritagelsen. Det er skolens ansvar at sikre, at det kun er elever, som opfylder undtagelsesbetingelserne, der fritages fra at deltage i ICILS. I tilfælde af tvivl skal eleven altid inkluderes. Klassens navn (kolonne 5): Angiv navnet på elevens klasse, f.eks. 8.a. Det er meget vigtigt for undersøgelsens troværdighed at så få elever som muligt fritages. Overvej derfor en ekstra gang om det er muligt om eleven kan deltage. Du skal bruge de følgende koder til at angive grunden til fritagelse: Kode 1 Kode 2 Kode 3 Elever med særlige læringsbehov fysisk funktionsnedsættelse. Elever med permanent fysisk funktionsnedsættelse, som forhindrer dem i at kunne deltage. Alle elever som er i stand til at tage ICILS test bør inkluderes i testen. Elever med særlige læringsbehov social, følelsesmæssig eller intellektuel funktionsnedsættelse: Elever som formelt (af skoleledelsen, skolepsykologen eller en lignende kvalificeret fagperson) er blevet vurderet som berettigede til særlig støtte i undervisningen. Elever bør ikke fritages alene på grund af faglige præstationer eller disciplinære problemer. Det skal bemærkes, at det ikke er gyldigt at fritage elever med ordblindhed eller andre lignende indlæringsvanskeligheder. Ikke-indfødte sproglige minoriteter. Elever som ikke er i stand til at læse eller tale sproget i testen og ikke vil være i stand til at overvinde de sproglige barrierer i testsituationen. Generelt skal elever, der har modtaget mindre end et års undervisning i dansk, fritages for ICILS-testen Vejledning i at eksportere data til elevlister fra PersonaleIntra Hvis I på jeres skole anvender SkoleIntra, kan du følge denne vejledning. Åbn PersonaleIntra. Gå ind i menupunktet Værktøj, vælg Værktøjskassen. I værktøjskassen vælges klasselister. Side 8 af 23

9 For hver 8. klasse (eller hver aldersintegrerede klasse med elever på 8. klassetrin) vælger du klassen. Vælg blanketformen Uni-Login-oplysninger Gem som regneark. Åbn regnearket og kopier de to yderste rækker (BrugerId og SkoleKomNavn). Disse to rækker kan nu sættes ind i Elevlisteskema-regnearket. I klasselister vælges nu Liste over fødselsdage. Side 9 af 23

10 Kopier fødselsdagene ind i Elevlisteformular-regnearket. Angiv køn (som 1 eller 2), evt. status for fritagelse (1, 2 eller 3) og klassenavn (fx 8A) ud for hver elev. Gentag denne procedure for hver 8. klasse på skolen. 3.2 Forberedelse af liste med lærere (lærerliste) Definition: Lærermålgruppen ICILS-lærerundersøgelse retter sig mod alle lærere, der underviser i almindelige skolefag (incl. fag som idræt, håndarbejde osv.) på 8. klassetrin i ICILS-testperioden, og som har været ansat på skolen siden skoleårets begyndelse. Lærere som er langtidsfraværende i testperioden (f.eks. på barsel eller orlov) skal derfor ikke inkluderes i ICILSundersøgelsen. Desuden skal øvrigt skolepersonale, der ikke underviser i skolens fag (f.eks. skolepsykologer, støttepersoner) også ekskluderes fra lærermålgruppen. Du vil modtage en lærerliste som excel-fil fra Det Nationale Forskningscenter. Udfyld lærerlisten elektronisk med oplysninger om hver enkelt lærer, som underviser elever på 8. klassetrin ved at følge definitionen af lærermålgruppen, som beskrevet ovenfor. Tilføj så mange rækker i listen som nødvendigt. Bemærk: Når lærerlisterne udfyldes elektronisk skal du huske følgende: Tilføj læreroplysningerne ved at indsætte hele rækker, og ikke kun enkle celler. Hvis du indsætter oplysninger fra et eksternt dokument i listerne, og hvis der er flere lærere end der kan være på en standardside, skal du først tilføje nye rækker. Det gøres ved at stå i en række i skemaet og højreklikke og vælge Indsæt. Derefter vælges Hel række. Flere rækker kan herefter indsættes med CTRL+Y. Undgå at slette eller at ændre på data placeholder-elementet i <_list_end_>, som du finder i kolonne D nederst på lærerlisten. Undgå at ændre på listestrukturen, dvs. kolonner må ikke tilføjes eller slettes. Et eksempel på en udfyldt lærerliste er vist i Billede 3.2. Lærers navn (kolonne 1) Side 10 af 23

11 Lærers fødselsdato (kolonne 2) Angiv manglende oplysninger om lærerfødselsdato ved at angive kode Lærers køn (kolonne 3) Angiv 1 for hunkøn og 2 for hankøn og angiv manglende oplysninger om lærerens køn ved at angive koden 9. Lærers hovedfag (kun ét fag angives), som er det fag, der undervises mest i i indeværende år (kolonne 4): Du skal bruge følgende koder til at angive lærerens hovedfag eller angive koden 9 for manglende oplysninger om hovedfag: Kode 1 Kode 2 Kode 3 Kode 4 Sprog F.eks. dansk, engelsk, tysk, dansk som andetsprog Øvrige humanistiske fag F.eks. samfundsfag, historie Matematik, fysik, kemi, biologi, geografi Andre F.eks. musisk/kreative fag, idræt, it-fag, kristendomskundskab Data til lærerlisten kan ikke trækkes ud fra SkoleIntra direkte, men må fremfindes via klassernes skemaer. Dertil skal desuden bruges fødselsår, som heller ikke findes i SkoleIntra, men må hentes via skolens administrationssystem (fx KMD Elev eller Tabulex TEA). Side 11 af 23

12 Billede 3.2. Eksempel på en udfyldt lærerliste 3.3 Returnering af elev- og lærerliste til Det Nationale Forskningscenter Så snart du har udfyldt elev- og lærerlisten ved at følge vejledningen ovenfor, skal listerne returneres (sendes pr. ) i det elektroniske format til Det Nationale Forskningscenter: icils@dpu.dk Side 12 af 23

13 4. Kontrol af skolecomputerkompatibilitet og resurser (vejledning ligger på det medsendte USBstik) 4.1 Oversigt ICILS-elevtesten kan kun gennemføres på computer. Al testsoftware og data er lagret på USB-stik. Der anvendes et USB-stik til hver elev. For at kunne administrere elevinstrumenterne på skolen er det derfor nødvendigt at hver enkelt elev har adgang til en computer. Eftersom 20 elever skal testes på hver skole, er det muligt at lave enten to testsessioner (med 10 elever i to forskellige rum samtidigt med to testansvarlige eller i forlængelse af hinanden med én testansvarlig), eller en session med alle 20 elever. Det afhænger selvfølgelig af antallet af velegnede computere i samme rum på din skole. Nedenfor er en liste over de krav, som skolecomputerne skal opfylde for at kunne håndtere testsessionerne: Minimum 1GB RAM. Mindst en fungerende USB 2.0 port (eller hurtigere). En skærm og et videokort der understøtter en skærmopløsning på 1024x768 pixel (bemærk at der ikke bruges lyd i ICILS-testen). Et af de følgende operativsystemer: Windows 7/XP/Vista/2000/Win Server 2003/Win Server 2008 ELLER Macintosh OS eller Linux med Windows emuleringssoftware, og Minimum skærmstørrelse på 13 tommer. Bemærk: Hvis du overvejer at bruge bærbare skolecomputere, skal du venligst sikre dig at skærmene er tilpas store. Netbook-computere anses for at have for små skærme. Du modtager et USB-stik, som skal bruges ved kontrollen af skolens computeres velegnethed til at håndtere ICILS-elevtesten. På USB-stikket lille en lille vejledning i, hvordan kontrollen gennemføres og et spørgeskema om de computere, der forventes anvendt ved testen. Side 13 af 23

14 5. Forberedelse af testen 5.1 Forberedelse af lokaler til testsessionerne Der er to måder, hvorpå testen kan foregå, afhængigt af faciliteterne på din skole og resultaterne af USB-kompatibilitetstesten Testgennemførelse ved brug af skolens computere Hvis ICILS-elevtesten skal gennemføres ved brug af skolens computere, bør de anvendte rum have et tilstrækkeligt antal computere til at køre testsessionen. Følgende er mulige organiseringer: To lokaler med i alt 20 computere (som vellykket har kørt kompatibilitetstesten); Et lokale med mindst 10 eller 20 computere (som vellykket har kørt kompatibilitetstesten). Bemærk: Hvis du planlægger at bruge bærbare computere, bedes du sikre dig at hver computer er forbundet til et stik (for at sikre, at batterierne ikke svigter under testen), og at hver computer har en funktionel ekstern mus, som eleverne kan bruge Testgennemførelse ved brug af eksterne bærbare computere Hvis computerfaciliteterne på din skole ikke egner sig til administration af ICILSelevinstrumenterne, vil det blive arrangeret, at computere bliver bragt til skolen til formålet. I dette tilfælde er det nødvendigt for skolen at stille et rum til rådighed med passende skrivebordsplads, lys og elektricitet, der kan understøtte, at testen gennemføres med eksterne bærbare computere. 5.2 Planlægning af testsession(erne) Testsession(erne) kan gennemføres mellem 4. februar og 30. april. I alt er to-tre timer nødvendige for hver elevtestsession (det tager ca. en time for en enkelt person at logge hver elev på hver sin computer inden testen). Du bør planlægge at gennemføre testen på en dag, hvor der er god tid til rådighed (i et lokale med computere). Det anbefales, at testen begynder i den første del af skoledagen. Hvis testen lægges uden for skoledagen, kan det forårsage større fravær. Du bedes give Det Nationale Forskningscenter besked via om dato og klokkeslæt for testen. Hvis der er ændringer i planlægningen, bedes du straks orientere Det Nationale Forskningscenter. Læreren/lærerne og de elever, der er udtrukket til at deltage, skal orienteres om tid og sted for testen. Bed eleverne om at medbringe bøger, skoleopgaver eller lignende, så de ikke forstyrrer de elever, der har brug for mere tid til at gennemføre testen. Vedlagt den testansvarliges manual er desuden nogle hjernevrideropgaver, som kan holde eleverne beskæftiget, hvis de bliver tidligt færdige med testen. Læreren/lærerne skal desuden orienteres om, at en elev kun må forlade testsessionen, hvis det er en nødsituation (f.eks. fordi han/hun bliver syg). Fyldestgørende vejledning findes i den testansvarliges manual afsnit 3.3. Side 14 af 23

15 Som skolekoordinator er du ansvarlig for at arrangere den nødvendige mængde tid, som der er brug for til at gennemføre testen uforstyrret. Bemærk: Det tager ca. 1 time at logge 20 elever på. Skema 5.1. Tidsforbrug ved testen Aktiviteter Forberedelse af elever, læsning af vejledningen og gennemførelse af vejledningsmodulet Gennemførelse af elevtesten første modul Kort pause Gennemførsel af elevtesten andet modul Kort pause Gennemførsel af elevspørgeskemaet Indsamling af USB-stik og afslutning af sessionen. I alt Varighed 20 minutter (ca.) 30 minutter (præcis) 5 minutter (max.) 30 minutter (præcis) 5 minutter (max.) Ca. 20 minutter Ca. 5 minutter Ca. 2 timer 5.3 Valg af den testansvarlige Som skolekoordinator kan du selv fungere som testansvarlig. Alternativt udvælger du en testansvarlig på din skole. Du vil måske have brug for mere end én testansvarlig, afhængigt af din skoles testgennemførelsesplan (hvis eleverne f.eks. skal være i to forskellige rum grundet computerresurser). Når du vælger en testansvarlig (eller to), bedes du tage højde for ICILSstandarderne for de testansvarlige. Det er påkrævet, at den testansvarlige IKKE er lærer for de udtrukne elever; og Det anbefales, at den testansvarlige IKKE er del af et personale på en anden skole, hvor han/hun også skal gennemføre ICILS-testen. Disse standarder er vigtige, således at forholdet mellem den testansvarlige og de deltagende elever ikke kompromitterer troværdigheden af testsessionen. Vi anbefaler desuden, at den testansvarlige generelt er fortrolig med at bruge computer og kan håndtere enkle udfordringer i forbindelse med at bruge computere. Dette viser sig ved at man f.eks.: Ved hvordan man justerer indstillinger (såsom skærmopløsninger eller valg af printer fra et netværk). Ved hvordan man kan få adgang til filer fra en række forskellige steder, herunder USBstik og netværksdrev. Kender til de mest simple årsager til, at softwaren ikke virker som forventet (f.eks. at en åben dialogboks forhindrer softwaren i at udføre en kommando, eller at CAPS LOCK kan være årsag til at indtastning af et password mislykkes). Side 15 af 23

16 Kender de almindelige indikatorer i forbindelse med computerfunktioner (såsom at indikatorlyset viser at harddisken er aktiv, eller at det skyldes belastning på computersystemet, at cursoren bevæger sig langsomt). Når du har valgt de(n) testansvarlige, bør I gennemgå den testansvarliges manual sammen. Dette bør være afsluttet ca. en uge før testsessionen. Hvis den testansvarlige har spørgsmål, skal de besvares i god tid inden testsessionen. Kontakt gerne Det Nationale Forskningscenter, hvis I har spørgsmål. Bemærk venligst, at du skal kende testproceduren lige så nøje som den testansvarlige. Hvis han eller hun er syg eller fraværende på testdatoen, kan det være, at du skal gennemføre testsessionerne. Side 16 af 23

17 6. Opgaver ved ankomsten af materialerne 6.1 Kontrol af og opbevaring af materialer Ca. en uge inden den planlagte testdato modtager du materialerne, der er beskrevet nedenfor. En elevdeltagerliste der angiver, hvilke opgaver den enkelte elev skal have. Det samme antal USB-stik som der er angivet elever i elevdeltagerlisten (dvs. et stik til hver elev, der er udtrukket) plus tre reservestik. Følgebreve som indeholder log-in-information til lærerspørgeskemaet og et sæt lærerspørgeskemaer i papirudgave (hvis det er ønsket) og en lærerdeltagerliste over alle lærere, der skal have spørgeskemaer og følgebreve. Et følgebrev som indeholder log-in-information til skolelederspørgeskema eller skolelederskema i papirudgave (hvis det er ønsket). Et følgebrev som indeholder log-in-information til it-koordinatorspørgeskemaet eller et it-koordinatorspørgeskema i papirudgave (hvis det er ønsket). En kopi af manualen til den testansvarlige. Så snart disse materialer ankommer, bedes du kontrollere forsendelsen for at sikre, at alt er vedlagt. Hvis du ikke har modtaget et komplet sæt af testmaterialerne en uge før testdagen, skal du straks kontakte Det Nationale Forskningscenter. Som skolekoordinator er du ansvarlig for, at alle materialer bliver opbevaret sikkert forud for testen. Testmaterialer må ikke gives til nogen ud over den testansvarlige på testdagen. Den testansvarlige skal bruge USB-stikkene for at kunne udføre de indledende log-in på skærmen for alle de elever, der er udtrukket, og forberede administrationen af den computerbaserede test. De må ikke kopieres eller vises på nogen måde. Materialerne skal låses inde, når de ikke er i brug, og alt ubrugt materiale skal returneres til Det Nationale Forskningscenter. Elevtestmaterialerne må på ingen måde kopieres. Bemærk: USB-stik med elevinstrumenterne kan også bruges af den testansvarlige til at kontrollere, om skolens computere virker og til at administrere testen før testdatoen. Vejledning hertil findes i testmanualen. Hvis den testansvarlige ønsker at teste systemet og gennemprøve testen, kan du give ham/hende ET USB-stik. Alle USB-stik er identiske, så alle stik kan bruges til dette formål. Du skal venligst sikre dig, at den testansvarlige returnerer stikket straks efter at have foretaget prøvetesten 6.2 Besvarelse af lærerspørgeskemaer Du modtager en lærerdeltagerliste sammen med følgebrevene med log-in-oplysningerne til den online udfyldelse af lærerspørgeskemaerne, eller (hvis ønsket) papirudgaverne. Lærerdeltagerlisten angiver i kolonne (1), hvilke lærere der skal udfylde lærerspørgeskemaet. På baggrund af oplysningerne, der er angivet i lærerdeltagerlisten, fortsætter du således: Så snart du modtager pakken, skal du udlevere følgebrevene eller papirudgaverne af lærerspørgeskemaet til lærerne på din skole, som er angivet på lærerdeltagerlisten. Oplys Side 17 af 23

18 lærerne om, at spørgeskemaet vil tage ca. 30 minutter at udfylde, og at det besvares ved afkrydsning. Dvs. spørgeskemaet kræver ikke skriftlige svar. Det Nationale Forskningscenter vil løbende opdatere dig på deltagelsesstatus for de lærere, der besvarer spørgeskemaet online. Afhængigt af disse oplysninger kan det blive nødvendigt, at du husker lærerne på at udfylde spørgeskemaet. Indsaml alle udfyldte papirudgaver af lærerspørgeskemaet så hurtigt som muligt. Registrér lærerdeltagelsen i lærerdeltagerlisten ved at bruge følgende koder: Kode 1 Kode 2 Kode 3 Kode 4 Kode 5 Afleveret (papir) Afleveret (online) Ikke afleveret (enten ikke afleveret eller afleveret uden besvarelse) Har forladt skolen permanent Har forladt skolen midlertidigt (i længere tid) Bemærk: Bemærk, at kun lærere, hvis navne er angivet i lærerdeltagerlisten, skal have følgebrevene til udfyldelsen (online eller papirudgave) af lærerspørgeskemaet. Der må ikke ske udskiftning af lærere i denne undersøgelse. 6.3 Besvarelse af it-koordinatorspørgeskemaet Giv følgebrevet med log-in-oplysningerne til udfyldelse af spørgeskemaet til it-koordinatoren på din skole. Hvis din skole ikke har udpeget en it-koordinator, bedes du finde en anden passende person, der kan udfylde dette spørgeskema. Denne person bør være en, der er ansvarlig for (eller har kendskab til) skolens computerfaciliteter og lignende praksisser med relation til it-anvendelsen på din skole, herunder administrative forhold. I gennemsnit bør spørgeskemaet tage ca. 15 minutter at udfylde Det Nationale Forskningscenter vil løbende opdatere dig på status for besvarelse af spørgeskemaet online. Afhængigt af disse oplysninger kan det blive nødvendigt, at du husker it-koordinatoren på at udfylde spørgeskemaet. 6.4 Besvarelse af skolelederspørgeskemaet Giv følgebrevet med log-in-oplysningerne til udfyldelse af spørgeskemaet til skolelederen på din skole. Hvis din skole ikke har en skoleleder, er det dit ansvar at finde en anden passende person, der kan udfylde skolelederspørgeskemaet. Skolelederspørgeskemaet tager ca. 20 minutter at udfylde. Det Nationale Forskningscenter vil løbende opdatere dig på status for besvarelse af spørgeskemaet online. Afhængigt af disse oplysninger kan det blive nødvendigt, at du husker skolelederen på at udfylde spørgeskemaet. Sørg for at indsamle skolelederspørgeskemaet, når det er blevet udfyldt. Hvis det bliver nødvendigt, skal du huske skolelederen på at udfylde spørgeskemaet. Side 18 af 23

19 7. Opgaver på testdagen 7.1 Dine opgaver før testgennemførelsen Du skal bede den testansvarlige om at ankomme på skolen mindst 90 minutter før den egentlige testsession. På dette tidspunkt skal du give testmaterialerne til den testansvarlige. Kontrollér testlokalet for at sikre dig, at lokalet og computerne står klar til testen. Bemærk: Hvis testen udføres med brug af skolens computere, skal du venligst sikre dig, at skolens computernetværksadministrator eller it-støtteperson er til at få fat på, når den testansvarlige klargør computerne med USB-stikkene til testen, og at de er til rådighed under testsessionen, hvis der skulle opstå problemer med computerne. Vær sikker på at den testansvarlige har følgende materialer: USB-stik med elevopgaverne; Den testansvarliges ICILS 2013 Hovedundersøgelses-manual; Elevdeltagerliste; En kopi af testadministrationsskemaet og testinformationsarket (er i testmanualen); og Et ur (der placeres i testlokalet, så det er synligt for eleverne). 7.2 Opgaver under testgennemførelsen Kontrollér at den testansvarlige udfører testsessionerne i overensstemmelse med vejledningen i ICILS 2013 Hovedundersøgelses-manual til den testansvarlige, og at testadministrationsskemaet er korrekt udfyldt. Besøg testlokalet/-rne under testsessionerne for at sikre dig, at alting går godt, og hjælp den testansvarlige, hvis han/hun oplever problemer. Du kan også være til stede i lokalet under hele ICILS-testen. 7.3 Registrering af elevernes deltagelse (elevdeltagerliste) Udfyldelse af elevdeltagerlisten Elevdeltagerlisten er meget vigtig for testgennemførelsen. I særdeleshed fordi den: udpeger de elever, der er udtrukket på din skole, specificerer hvilke udgaver af elevtestinstrumenterne, som den enkelte elev, der er udtrukket, skal have; og registrerer elevernes deltagelsesstatus. Bemærk: Bemærk, at kun elever, hvis navne er angivet i elevdeltagerlisten, skal deltage i testen. Der må ikke ske udskiftning af elever i denne undersøgelse. Side 19 af 23

20 Under testgennemførelsen skal den testansvarlige registrere, hvilke elever der deltog i testen, og hvilke der var fraværende. Kolonne (8) i elevdeltagerlisten skal udfyldes til den almindelige testsession. Den røde skraverede del af kolonnen (8) skal bruges ved en evt. erstatningstest (se afsnittet 7.5 Afholdelse af en erstatningstest). Det er meget vigtigt at kontrollere, at den testansvarlige udfylder elevdeltagerlisten korrekt. Afsnittene i elevdeltagerlisterne, der dokumenterer elevernes deltagelse i den oprindelige test og i erstatningstesten, er hver delt i to kolonner: Den første korresponderer med elevtestsessionen og den anden korresponderer med spørgeskemasessionen. Som beskrevet i testmanualen skal den testansvarlige angive elevernes deltagelsesstatus i hver af disse sessioner som følgende: Kode 1 Kode 2 Kode 3 hvis eleven har forladt skolen permanent. hvis eleven var fraværende fra sessionen. hvis eleven deltog i sessionen Reserve-elev-id ICILS USB-softwaren giver mulighed for at udnytte erstatnings-id. Der er 10 pr. skole. Disse id er ikke angivet i elevdeltagerlisten og er KUN til brug i tilfælde, hvor det oprindeligt tildelte elev-id ikke kan godkendes på USB-stikket. Du vil bemærke, at de første seks cifre på elev-id i elevdeltagerlisten er identiske. De sidste to cifre tæller fra 01 til 20. Hvis der er problemer med at logge på en elevs id, er det muligt at logge på USB-stikket ved at bruge et elev-id med de samme første seks cifre, som der er på din skoles elevdeltagerliste og sætte de sidste to cifre til et tal mellem 90 og 99 (inklusive). Hvis USB-stikkene fungerer fint, men den testansvarlige ikke kan logge en elev på (efter gentagne forsøg for at sikre, at log-in-detaljerne er korrekt indtastet), skal den testansvarlige bruge reserve-id. Ved log-in vil den testansvarlige blive bedt om at indtaste elevens id, når testen er afsluttet (som angivet i elevdeltagerlisten) og fra listen at vælge en grund til, at det ekstra id er blevet brugt. Alle detaljer i denne proces er beskrevet i testmanualen. Hvis reserve-elev-id bruges, skal detaljerne angives i både elevdeltagerlisten og i testadministrationsskemaet. 7.4 Opgaver efter testgennemførelsen Straks efter testen skal den testansvarlige aflevere alle USB-stik sammen med elevdeltagerlisten og den testansvarliges informationsark. Vær venligst opmærksom på, at hele materialesættet er blevet afleveret, herunder alle ubrugte USB-stik. Kontrollér at den testansvarlige har indskrevet oplysninger om deltagelsen korrekt i elevdeltagerlisten. Hvis et USB-stik ikke er blevet brugt (f.eks. fordi den pågældende elev var fraværende ved testsessionen), skal du kontrollere at den testansvarlige har angivet dette korrekt i kolonne (8) i elevdeltagerlisten. Den testansvarlige skal udfylde testadministrationskemaet såvel som den testansvarliges informationsark undervejs i testsessionen (begge bilag er i testmanualen). Du skal kontrollere, at disse skemaer er korrekt udfyldt med de oplysninger, du finder nødvendige. 7.5 Afholdelse af en erstatningstest Det er meget vigtigt at nå en høj grad af elevdeltagelse. Erstatningstest kan være nødvendig for at opnå en høj elevdeltagelse. Det er ikke obligatorisk at foretage erstatningstest, men det Side 20 af 23

21 anbefales, hvis mindre end 90% af de udtrukne elever på din skole var tilstede under testsessionen. På de fleste skoler er 20 elever udtrukket til at deltage i undersøgelsen. Derfor bør en erstatningstest overvejes, hvis mere end 2 af de udtrukne 20 elever er fraværende ved testsessionen. Du kan diskutere nødvendigheden af en erstatningstest med Det Nationale Forskningscenter, som overvåger den samlede svarprocent i dit land. Erstatningstest skal afholdes for de fraværende elever så hurtigt som muligt efter den oprindeligt planlagte testdato. Hvis der er planlagt mere end en testsession på din skole, kan en erstatningstest afholdes for alle elever, der var fraværende fra den oprindelige testsession. Du skal følge de samme procedurer ved erstatningstesten som ved den almindelige session. Den testansvarlige skal udfylde et ekstra testadministrationsskema til erstatningstesten. 7.6 Kvalitetskontrol af dataindsamlingsprocedurerne Der er blevet gjort en stor indsats i udviklingen af standardiserede materialer og procedurer, således at de indsamlede data for ICILS i hvert land vil kunne sammenlignes i videst muligt omfang. Derfor er det vigtigt, at du nøje følger de beskrevne procedurer i denne manual, især med hensyn til: At kunne give nødvendige oplysninger til udvælgelsen af elever og lærere. At sikre undersøgelsesmaterialerne forud for testen. At planlægge testdagen (lokale, it-resurser og assistance) og timing af testsessionerne; og At aflevere materialer og udfyldte undersøgelsesdeltagerlister til Det Nationale Forskningscenter. For yderligere at sikre kvaliteten af ICILS-data, iværksættes internationale kvalitetskontrolinitiativer (foretages af IEA-Sekretariatet) og nationale kvalitetskontrolinitiativer (foretages af Det Nationale Forskningscenter), der skal dokumentere dataindsamlingsaktiviteterne. Nationale og internationale kvalitetskontrolpersoner vil komme på besøg på testdagen på ca. 10% af de deltagende skoler. Disse observatører blander sig ikke i testen på nogen måde. Deres ansvar er kun at observere, hvorvidt testsessionerne følger procedurekravene, som er beskrevet i denne manual og i den testansvarliges manual for ICILS Derfor er det vigtigt at orientere Det Nationale Forskningscenter om dato og tidspunkt for testsessionerne, således at besøgene fra kvalitetskontrollen kan planlægges i overensstemmelse hermed. Side 21 af 23

22 8. Returnering af materialerne til Det Nationale Forskningscenter Når testen er gennemført, og alle testmaterialerne er blevet indsamlet, skal du returnere alle materialer til Det Nationale Forskningscenter: Den udfyldte elevdeltagerliste (helst i elektronisk form); De brugte hhv. ubrugte USB-stik; Den udfyldte lærerdeltagerliste (helst i elektronisk form); Hvis anvendt: de udfyldte hhv. ubrugte papirudgaver af lærerspørgeskemaer, skolelederspørgeskemaer og it-koordinatorspørgeskemaer; Testadministrationsskema(er); og Den testansvarliges informationsark. Alt materiale skal helst sendes til Det Nationale Forskningscenter straks efter testgennemførelsen på testdagen, men ikke senere end 1. maj. Hvis du har spørgsmål, bedes du kontakte Det Nationale Forskningscenter. icils@dpu.dk ICILS 2013 Att. Bonnie Vittrup Institut for Uddannelse og Pædagogik Tuborgvej København NV TAK FOR DIN HJÆLP TIL AT UDFØRE DENNE VIGTIGE INTERNATIONALE UNDERSØGELSE Side 22 af 23

23 Tjekliste for skolekoordinators arbejdsopgaver Udfylde og afsende de elektroniske elev- og lærerlister Aftale tidspunkt for testgennemførelse med Det Nationale Forskningscenter Arrangere lokaler, computere, elevdeltagelse og teknisk assistance Køre USB-kompatibilitetstesten, udfylde og afsende svarskemaet om skolens computerresurser Modtage testmateriale Tjekke testmateriale for fejl og mangler Uddele følgebreve med log-in-information til de deltagende lærere, skolelederen og it-koordinatoren Udfylde lærerdeltagerliste Tjekke at samtlige spørgeskemaer (ikke elevers) er udfyldt og evt. indsamlet Tjekke elevsvarprocent og evt. aftale tidspunkt for erstatningstest Tjekke udfyldelse af elevdeltagerliste Afsende materiale til Det Nationale Forskningscenter Brugte og ubrugte USB-stik Elevdeltagerliste Lærerdeltagerliste Udfyldte og ubrugte papirudgaver af lærerspørgeskemaer, skolelederspørgeskema og it-koordinatorspørgeskema Testadministrationsskema og informationsark udfyldt af den testansvarlige Side 23 af 23