Ny version af Swift Analysis Aptitude og 3 helt nye færdighedstest Ny version af Swift Analysis Aptitude, der erstatter den hidtidige version. 3 helt nye færdighedstest: Swift Analysis Verbal & Numerical Swift Executive Aptitude Abstract Reasoning Aptitude Til Oasys-brugere: Husk at der skal oprettes nye projekter for at anvende de nye test! Fælles for alle 4 færdighedstest er: Ny avanceret scoringsmetode med større præcision i målinger. Variabelt indhold så forskellige kandidater ser forskellige spørgsmål. Nye internationale normer på flere niveauer. Nyt testrapport-format med flere relevante informationer. Kan nu også besvares på ipad og andre tablets. New Tests New Technology
Ny version af Swift Analysis Aptitude Den nye version af Swift Analysis Aptitude er opdateret med mere avanceret scoringsteknologi, variabelt indhold, nye normer og ny testrapport med flere relevante informationer for testbrugeren. Derudover kræves ikke længere Adobe Flash for at afvikle testen og den kan dermed også afvikles på ipads og andre tablets. Den nye version vil kunne køre sideløbende med den hidtidige version i Oasys i en begrænset periode. Den hidtidige version vil dog ikke kunne vælges til nye projekter pr. 25. maj 2015. Vi vil på et senere tidspunkt hjælpe med at lokalisere gamle projekter, som ikke anvender den nye version. Versionerne skelnes med følgende navne i Oasys: Hidtidig version: Swift Analysis Aptitude (IA; 2007) P2 Ny version: Swift Analysis Aptitude-Rx (IA) Bemærk: Den følgende beskrivelse af de nye færdighedstest er også gældende for den nye version af Swift Analysis Aptitude. 3 helt nye færdighedstest Vi udvider nu vores testportefølje med 3 nye færdighedstest: Type og antal spørgsmål Spørgsmål i alt Minutter i alt Swift Executive Aptitude V 8 N 8 A 12 28 18 min. Swift Analysis Verbal & Numerical V 16 N 16 32 24 min. Abstract Reasoning Aptitude A 32 32 16 min. Verbale færdigheder Måler evnen til, under tidspres, at analysere skriftlig information. Numeriske færdigheder Måler evnen til, under tidspres, at analysere numeriske data. Abstrakt ræsonnement Måler evnen til, under tidspres, at forstå rækkefølger i mønstre. Variabelt indhold Alle de nye test har variabelt (randomiseret) indhold så forskellige kandidater ser forskellige spørgsmål sammensat ud fra en pulje af spørgsmål (item-bank). Side 2 af 5
Nyt rapport-format De nye færdighedstest byder på et nyt og brugervenligt rapport-format. I det følgende beskrives indholdet i de nye testrapporter. Information om færdigheder og tempo For de test, der måler flere færdighedsområder, angives scoren på færdighed (opnået resultat) samt for tempo (hvor hurtigt der er blevet besvaret) for hver enkelt deltest. I dette eksempel fra Swift Analysis Aptitude har kandidaten arbejdet hurtigere end gennemsnittet i alle tre deltest. Tolkning af information om færdigheder og tempo Scoren på færdigheder og scoren på tempo sammenholdes i en graf på stenskalaen fra 1 til 10. Færdigheder vises fra lav præstation til venstre på grafen til høj præstation til højre. Tempo vises fra langsom nederst på grafen til hurtig øverst. Kandidater, der opnår en stenscore fra 1 til 4 har brugt mere tid på at besvare spørgsmålene end gennemsnittet (under middel). Kandidater, der opnår en stenscore på 5 eller 6 har arbejdet i samme tempo som gennemsnittet (middel). Kandidater, der opnår en stenscore fra 7 til 10 har været hurtigere til at besvare spørgsmålene end gennemsnittet (over middel). Summary - Online testadgang Testrapporterne indeholder også supplerende information om kandidatens besvarelse af testen. Denne information er en hjælp for bedømmeren til vurdering af kandidatens scorer. Udover dato og tidspunkt for hvornår besvarelsen er påbegyndt og afsluttet, kan man du også se hvis og hvor mange gange en test er blevet nulstillet af en administrator. Denne information kan være brugbar for testbrugere, idet adskillige nulstillinger kan medføre, at kandidaten begynder at kunne drage fordel af erfaringer med testformatet. Denne information kan ligeledes indikere, om der potentielt var nogle tekniske problemer eller andre forhold, der kan have haft betydning for kandidatens præstation. Man kan også se om en kandidat selv har genstartet sin besvarelse. Dette vil dog kun kunne gøres under instruktioner og de første eksempler og altså ikke efter selve testen er startet. Hvis en kandidat ekstraordinært har fået forlænget eller helt fjernet sin tidsbegrænsning, vil det ligeledes fremgå af rapporten. Eksempelrapporter kan hentes på Kundeportalen (Kurser / Færdighedstest / Eksempelrapporter). Side 3 af 5
Ny avanceret scoringsmetode Alle nye færdighedstest anvender en ny avanceret scoringsmetode kaldet Item Response Theory (IRT), som giver større præcision i målinger. Måling af færdigheder Hidtidig scoringsmetode Ved klassisk testteori, som hidtil har været anvendt ved scoring af Swift-testene, er scoren baseret på baggrund af antallet af korrekte svar (= råscore). Råscoren bliver således sammenholdt med den valgte normgruppe og resultatet bliver i standardiseret form beregnet som en percentil (%-il) og en stenscore. Eksempel ved brug af klassisk testteori: Kandidat A besvarer kun de nemmeste spørgsmål og har 5 af disse korrekt. Kandidat B besvarer de mere udfordrende spørgsmål og har 5 af disse korrekt. I dette tilfælde vil kandidat A og kandidat B opnå præcis sammen %-il og stenscore. Dette eksempel viser, at den klassiske testteori forudsætter at alle items er af præcis samme sværhedsgrad, hvilket ikke er tilfældet ved introduktionen af item-bank, og derfor ikke vil give den mest præcise måling af kandidaternes færdigheder. Ny scoringsmetode Item Response Theory (IRT) tager udgangspunkt i sværhedsgraden af hvert enkelt item (spørgsmål) i en test, frem for alene antallet af korrekte svar, som det er tilfældet ved den klassiske testteori. Dette giver en højere præcision i målingen af færdigheder og man er ude over problemstillingen i eksemplet under Hidtidig scoringsmetode, hvor to kandidater har besvaret samme antal spørgsmål korrekt, men med forskellig sværhedsgrad. IRT giver således mulighed for at tilbyde færdighedstest baseret på item-bank med items af forskellig sværhedsgrad og hvor spørgsmål hentes fra en bank og derved vil variere fra kandidat til kandidat. Måling af tempo Hidtidig scoringsmetode Ved klassisk testteori er beregning af hastigheden baseret på hvor mange spørgsmål man har besvaret på tværs af deltestene (eksempelvis verbal, numerisk, diagrammatisk i Swift Analysis Aptitude) og sammenholdt med den valgte normgruppe. Resultatet bliver i standardiseret form beregnet som en percentil (%-il) og en stenscore. Ny scoringsmetode Ved IRT-scoring beregnes tempo ud fra hvor hurtigt det enkelte spørgsmål er blevet besvaret. Denne beregning foretages ved at sammenligne kandidatens svartid med normgruppens gennemsnitlige svartid på præcis det samme spørgsmål. Dette giver en højere præcision i målingen af tempo, idet der også tages højde for hvorvidt man har besvaret de nemmeste eller de sværeste spørgsmål. Side 4 af 5
Nyt feedbackark Der er udarbejdet et nyt feedbackark til samtlige nye test (alle nye test på et ark), hvor de tilgængelige informationer fra testrapporten er indeholdt. Den eneste forskel i måden at give tilbagemelding på, er at der nu gives tilbagemelding på hvor hurtigt hver enkelt deltest er besvaret og ikke længere blot en samlet score på hastighed. Anbefalingen er stadig, at der gives tilbagemelding i kategorierne Under middel (stenscore 1-4), Middel (stenscore 5-6) og Over middel (stenscore 7-10). Feedbackark kan hentes på Kundeportalen (Kurser > Færdighedstest > Feedback-skemaer). Tilgængelige normer Følgende nye internationale normgrupper er tilgængelige for både Swift Analysis Aptitude og de nye færdighedstest: Graduates (2015) Professionals & Managers (2015) Senior Managers & Executives (2015) English as an Additional Language Group (2015) Se de detaljerede beskrivelser af normgrupperne på Kundeportalen (Kurser > Færdighedstest > Normer). Tilgængelige sprog Den nye version af Swift Analysis Aptitude er tilgængelig på samme sprog som den hidtidige version samt nogle nye sprog. De 3 øvrige nye test er tilgængelige på et bredt udvalg af sprog og nye kommer til løbende. Se den aktuelle sprogoversigt på Kundeportalen (Andet > Oasys). Ny teknologi - HTML5 De nye test anvender HTML5 og det er derfor ikke længere nødvendigt at have Adobe Flash installeret for at besvare de nye færdighedstest. HTML5 understøttes af stort set alle nye browsere (udgivet inden for de sidste 3 år) og de nye færdighedstest kan derfor besvares på både PC og tablets (med skærmstørrelse over 7 tommer). De nye test vil ikke kunne besvares på smartphones, da den lille skærmstørrelse ikke vil give kandidaterne optimale betingelser. Side 5 af 5