Den testansvarliges manual Del 1

Transkript

1 Den testansvarliges manual Del 1 1

2 International undersøgelse i computer- og informationskompetence Den testansvarliges manual Del 1: Forberedelse af testen (Hovedundersøgelse) Forår 2013 The Australian Council for Educational Research 2

3 Indhold 1. Introduktion ICILS-instrumenterne Instrumenter til eleverne Dine opgaver som testansvarlig Regler for gennemførelsen af testene Forberedelse før testen En uge før testen En time før testen Afprøvning af testen før gennemførelsen (valgfrit, men anbefales) Kørsel af testafprøvningen Gennemførelse af testen generel information Aftaler med skolen Testmaterialer Den testansvarliges informationsark Elevdeltagerliste Testadministrationsskema USB-stikkene Elever der ikke er i stand til at gennemføre dele eller hele testen Timing af ICILS-testen

4 1. Introduktion Bemærk: Læs venligst denne manual del 1 og 2 mindst en uge før testen finder sted. Tak fordi du har indvilliget i at være testansvarlig i IEA s internationale undersøgelse af computerog informationskompetence (ICILS). Som testansvarlig er det din opgave at sikre, at undersøgelsen bliver gennemført problemfrit og på en standardiseret måde. Dermed vil du bidrage væsentligt til ICILS mål om at forbedre kvaliteten af undervisningen i computer- og informationskompetence (CIK) for elever i Danmark. Dette er første del af den testansvarliges manual. Den introducerer til undersøgelsen og forklarer hvad den testansvarliges opgaver er før, under og efter testen. 1.1 ICILS-instrumenterne Instrumenter til eleverne Der er fire forskellige testmoduler (to til hver elev) og et spørgeskema. Det hele er samlet på et usbstik til hver elev. Elevtest. Testinstrumenterne omfatter fire forskellige 30-minutters testmoduler, hvoraf hver elev skal gennemføre to af de fire testmoduler. Hvert testmodul omfatter en række opgaver med et tema, hvor eleverne skal bruge CIK. Elevspørgeskema. Elevspørgeskemaet indsamler oplysninger om computerbrug i og uden for skolen, holdninger til teknologi, selv-rapporterede færdigheder og karakteristika for elevbaggrunde. Elevspørgeskemaet tager ca. 20 minutter at udfylde og skal udfyldes i slutningen af testen. Bemærk: Elevspørgeskemaet indeholder spørgsmål, hvor eleverne bliver bedt om at angive en stillingsbetegnelse for hver af deres forældres/omsorgspersoners arbejde, samt en beskrivelse af hvad hver af forældrene/omsorgspersonerne gør i deres arbejde. Desuden skal eleverne angive forældrenes/omsorgspersonernes opnåede uddannelsesniveau, samt forventninger til eget uddannelsesniveau. Eleverne har i den forbindelse af skolekoordinatoren fået udleveret en folder med spørgsmålene, så de får mulighed for at spørge deres forældre/omsorgspersoner om, hvordan deres arbejde bedst beskrives, og hvilket uddannelsesniveau de har. Oplysningerne er fortrolige og skal give indblik i landets samlede elevbaggrunde. De skal ikke bruges til at analysere enkelte elevers præstationer eller baggrund. 4

5 Som testansvarlig sørger du for, at de udvalgte elever arbejder med disse instrumenter: Skema 1.1: ICILS-instrumenter Instrument Elevtest første modul et af følgende: Motion efter skoletid Bandkonkurrence Skoleudflugt Åndedrættet Elevtest andet modul et af følgende: Motion efter skoletid Bandkonkurrence Skoleudflugt Åndedrættet Elevspørgeskema Varighed 30 minutter (præcis) 30 minutter (præcis) 20 minutter (ca.) 5

6 2. Dine opgaver som testansvarlig 2.1 Regler for gennemførelsen af testene Som testansvarlig skal du under testgennemførelsen rette dig efter følgende regler: Du må ikke svare på spørgsmål om testmaterialets indhold eller give specifikke oplysninger, svar eller vejledninger i testopgaverne. Det bedste svar til sådanne spørgsmål er: Jeg kan desværre ikke besvare nogen som helst spørgsmål. Bare gør dit bedste. Du skal besvare forespørgsler angående spørgsmål i elevspørgeskemaet ved at bruge testgennemførelsesbemærkningerne i appendiks B (bagest). Vær sikker på at alle elever forstår, hvad de er blevet bedt om at gøre og ved, hvordan de skal indtaste deres svar. Du må gerne besvare elevspørgsmål angående dette. Mens eleverne arbejder, skal du bevæge dig rundt i rummet og se, at de følger retningslinjerne. En elev må kun forlade testen, hvis det er en nødsituation (f.eks. fordi han/hun bliver syg). Fyldestgørende vejledning findes i afsnit 3.3. Hvis en elev kommer sent, men inden testen er begyndt, skal eleven vises hen til sin computer. Elever, der ankommer, når den egentlige test er begyndt (når eleverne er begyndt på vejledningen, og du er begyndt at læse vejledningen), skal ikke have adgang til testen. Elever skal opmuntres til at bruge samtlige 30 minutter til at gennemføre testmodulerne, men hvis en elev har besvaret spørgsmålene inden testen er ovre, må han/hun ikke forlade rummet, men skal blive siddende og løse hjernevrideropgaver eller læse stille ved sit bord. Beskriv eventuelle problemer, der opstår under testgennemførelsen på testadministrationsskemaet (se appendiks A bagest i anden del af manualen). 6

7 2.2 Forberedelse før testen En uge før testen Omkring en uge før testdagen skal du gøre følgende: Finde løsning på eventuelle spørgsmål i samråd med skolekoordinatoren, samt sikre dig, at eleverne er blevet informeret via folderen om spørgsmålene angående elevernes forventninger til eget uddannelsesniveau og deres forældres/omsorgspersoners beskæftigelse. Udfylde detaljerne i de grå afsnit af den testansvarliges informationsark, som er vedlagt som appendiks D. Dette ark kan bruges som et hurtigt tjekskema på testdagen. Sikre at alle nødvendige trin i testen er planlagt (i samarbejde med skolekoordinatoren). Dette indebærer: At computerlokalet er gjort klart med et passende antal arbejdscomputere; At klasselærere informeres om, at eleverne skal have noget at læse i ved deres bord, hvis de afslutter testen tidligt (som alternativ til de vedlagte hjernevrideropgaver); og At elevdeltagerlisten og testadministrationsskemaet udfyldes, samt planlægge testene En time før testen Omkring en time før testen skal du sikre dig, at du har alle materialerne til testgennemførelsen, som er oplistet i afsnit 3.2. Husk også at få bekræftet, at lokalet er klart til testen. Det tager ca. en time for en enkelt person at logge eleverne på hver deres computer. Udfyld venligst spørgsmål 1-6 på testadministrationsskemaet (se appendiks A), hvis du ikke allerede har udfyldt disse oplysninger. 2.3 Afprøvning af testen før gennemførelsen (valgfrit, men anbefales) Elevtesten gennemføres ved at tilslutte et USB-stik til hver computer, der bruges af en elev. USBstik er sendt til skolekoordinatoren forud for testen. Hvis du vil, kan du forberede testen ved at bruge et af USB-stikkene og køre elevvejledningen (se kapitel 4 til 7 i denne manual). Du skal huske at returnere USB-stikket til skolekoordinatoren igen. Bemærk: Vi anbefaler (hvis det er muligt) at køre afprøvningen af testen ved at bruge en computer, der skal bruges til elevtesten. Afprøvningstesten kan køres på enhver kompatibel computer og kan også bruges til at blive bekendt med testsystemet Kørsel af testafprøvningen Tilslut USB-stikket til computeren og kør testfilen (se afsnit 4.1). Udfyld log-in (se afsnit 5.1) ved at bruge elev-id: Id:

8 Instrumentnummer : 01 Kontrolsum : 895 Indtast et hvilket som helst navn (se afsnit 5.3). Systemet registrerer ikke data fra testafprøvningssessionen (heller ikke navne). Indtast password 3183 i velkomstskærmen og klik på pilen for at begynde (se kapitel 6). Du ser først skærmen til vejledningsmodulet. For at øve gennemførelsen af vejledningsmodulet, kan du følge vejledningen i afsnit 7.1, eller du kan klikke dig frem til slutningen af vejledningsmodulet. Til slut i vejledningsmodulet vil du se modulets skærm, der viser fremdriften (i selve testen vil denne skærm komme til syne både før og efter hvert modul). Indtast password 0077 for at gå videre til næste modul. Du vil nu se den første side af elevspørgeskemaet. Klik på for at gå videre til næste del. Du ser nu det første element i elevspørgeskemaet. 8

9 Klik på for at afslutte afprøvningssessionen. Du vil nu se modulets exitskærm (se afsnit 7.6). Indtast password 3721 for at afslutte afprøvningssessionen. Bemærk: Du kan køre afprøvningssessionen så ofte, som du ønsker. 9

10 3. Gennemførelse af testen generel information 3.1 Aftaler med skolen Udover at bekræfte dato, tid, sted og udvalgte elever med relevante personer på skolen, er det vigtigt, at du indgår aftaler med eleverne før og efter testen. Før hver test Det skal aftales med eleverne, at de ankommer senest fem minutter før det planlagte starttidspunkt for deres test. Efter hver test Det skal aftales med eleverne, om de skal vende tilbage til klassen efter testens afslutning, hvis det er midt i skoletiden, eller om de har fri, hvis testen afsluttes i slutningen af skoledagen. Pausematerialer Eleverne behøver ikke medbringe materialer for at kunne gennemføre testen. Men der er tildelt god tid til testmodulerne, og sandsynligvis vil nogle elever blive tidligt færdige med nogle af modulerne. Arranger derfor, at eleverne medbringer noget arbejde eller læsestof i tilfælde af, at de afslutter et modul tidligt, eller uddel de vedlagte hjernevrideropgaver. 3.2 Testmaterialer Skolekoordinatoren skal give dig et testadministrationssæt, der indeholder: Manual og manuskript til den testansvarlige (bl.a. dette dokument) Den testansvarliges informationsark (se afsnit 3.2.1) USB-stik Elevdeltagerlisten (se afsnit 3.2.2) Testadministrationsskema (til udfyldelse før og efter testen) (se afsnit 3.2.3) Den testansvarliges informationsark Den testansvarliges informationsark indeholder de oplysninger, som hjælper dig med at gennemføre testen: kontaktoplysninger for skolekoordinatoren og det tekniske personale på skolen, samt de specifikke brugernavne og passwords til skolens computere, der skal bruges til testen. Bemærk: Hvis skolens computere bruges til elevtesten, skal du få bekræftet af skolekoordinatoren, at login-oplysningerne du har fået, har været anvendt i USB-kompatibilitetstesten, og var vellykkede. Hvis dette ikke er tilfældet, anbefaler vi, at du kører afprøvningen af testen (se afsnit 2.3.1) før testen. Hvis det er muligt, skal dette helst ske før datoen for testen Elevdeltagerliste Elevdeltagerlisten omfatter alle oplysninger om hver elev i testen. Elevens fornavn 10

11 Elevens efternavn Elev-id Instrumentnummer Kontrolsum Fødselsdato Køn Fritagelsesstatus Status for deltagelse i test Status for besvarelse af spørgeskema Testgruppenummer (der kan være op til to testgrupper á 10 elever) Testsoftwaren kræver, at du ved opsætningen indtaster elev-id, testinstrumentnummer og kontrolsummen. Billede 3.1 viser et eksempel på en elevdeltagerliste, som er blevet tilsendt fra Det Nationale Forskningscenter. 11

12 Student ID Instrument Checksum Date Of Birth Gender Exclusion Status Test Session Questionnaire Session Test Session Questionnaire Session Session Group Billede 3.1: Eksempel på en udfyldt elevdeltagerliste ICILS 2013 FT - Student Tracking Form Participating Country <Country> School Name School ID 9502 Park Private School u Participation Status Main Session Make-Up Session Student Name or Number MM YYYY John Taylor Sharon Williams Michelle Lewis Elizabeth Hall Kevin Nelson Donald Anderson Lisa Jackson Linda Garcia Sabine Seaman Maria Bell Sandy White Robert White Ricarda Webbs Lisa Cockle Rob Davids Ron Smith Paul Gordon Berry Black Linda Jennings <_list_end_> Date of Birth - Month (column 5): 99 = Missing Date of Birth - Year (column 5): 9999 = Missing Gender (column 6): 1 = Female; 2 = Male; 9 = Missing Exclusion Status (column 7): 1 = Students w ith functional disabilities; 2 = Students w ith intellectual disabilities; 3 = Non-native language speakers Participation Status (column 8): 1 = Left school permanently; 2 = Absent; 3 = Participated; 4 = No parental permission Session Group (column 9): 1 = Group 1; 2 = Group 2;...; 10 = Group 10 I kolonne i elevdeltagerlisten skal du angive, hvilke elever der er til stede, og hvilke der er fraværende i hver af testene (hhv. ordinær og erstatningstest), herunder om de har gennemført testen og spørgeskemaet. Til erstatningstesten skal oplysninger om elevdeltagelsen indtastes i kolonne med de rødskraverede felter. 12

13 Du skal kode elevernes deltagelsesstatus i sessionen som følgende: Kode 1 Kode 2 Kode 3 Kode 5 Kode 6 Kode 7 Bemærk: hvis eleven har forladt skolen permanent hvis eleven var fraværende fra testen hvis eleven deltog i testen hvis eleven var tilstede i testen, men der var tekniske problemer forud for påbegyndelsen af testen, såsom inkompatibelt udstyr eller fejl ved udstyr, således at eleven ikke kunne tage testen hvis eleven deltog i sessionen, men der opstod tekniske fejl undervejs, som forhindrede eleven i at færdiggøre sessionen hvis eleven deltog i sessionen, men at data fra USB-stikket ikke kunne uploades på grund af tekniske problemer efter testens afslutning eller at USB-stikket er blevet væk Elevdeltagelsen skal angives for både testen og spørgeskema (i kolonne ). I kolonne angives hver elevs testgruppe (nummer). Hvis alle elever deltager i testen samtidig i samme lokale, skal der angives id 1 ud for alle eleverne. Hvis eleverne deles i to grupper (hvis computerresurserne på skolen kun tillader 10 elever ad gangen eller fordi der er blevet afholdt en erstatningstest), skal der angives nummer 1 ud for eleverne i den første gruppe og nummer 2 ud for eleverne i den anden gruppe. Vær sikker på, at numrene passer til angivelserne i testadministrationsskemaet (se næste afsnit) Testadministrationsskema Testadministrationsskemaet (appendiks A) giver dig mulighed for at videregive oplysninger om testen, og i særdeleshed gøre opmærksom på eventuelle problemer, der opstod under testen. Ét testadministrationsskema skal udfyldes for hver test USB-stikkene De USB-stik, du modtager, indeholder testsoftwaren. USB-stikkene skal efterfølgende overdrages til skolekoordinatoren, som vil returnere dem til Det Nationale Forskningscenter. 3.3 Elever der ikke er i stand til at gennemføre dele eller hele testen Fraværende elev Hvis en elev er fraværende på dagen for testen, skal dette registreres i elevdeltagerlisten (se afsnit 3.2.2), og erstatningstesten skal arrangeres hurtigst muligt, hvis det påkræves. Skolekoordinatoren vil informere dig om, hvornår en erstatningstest bliver nødvendig. Elever som begynder på testen, men ikke er i stand til at gennemføre den af andre grunde (såsom sygdom) Hvis en elev begynder på testen, men ikke er i stand til at gennemføre testen, fordi han/hun bliver syg eller af andre grunde, kan du afslutte testsoftwaren, når eleven har forladt lokalet. 13

14 For at afslutte testprogrammet skal disse trin udføres: Tryk F5 (dette vil opdatere opgaven) Tryk Alt + F4 samtidig (dette vil lukke testsoftwareprogrammet). 3.4 Timing af ICILS-testen ICILS-elevtestens moduler er selvstyrende (30 minutter hver). Skema 3.1 viser en oversigt over hele testarbejdet og tiderne, herunder anbefalede pauser og tidsforbrug til vejledningsmodulet og elevspørgeskemaet. Skema 3.1: Timing af ICILS-testene Aktiviteter Forberedelse af elever, læsning af vejledning, gennemførelse af vejledningsmodulet Gennemførelse af elevtesten første modul Kort pause Gennemførelse af elevtesten andet modul Kort pause Gennemførelse af elevspørgeskemaet Indsamling af testmaterialerne og afslutning af sessionen I alt Varighed 20 minutter (ca.) 30 minutter (præcis) 5 minutter (max.) 30 minutter (præcis) 5 minutter (max.) Ca. 20 minutter Ca. 5 minutter Ca. 2 timer 14