Vedr.: Evalueringsrapport for 2013

Transkript

1 D E T I N F O R M A T I O N S V I D E N S K A B E L I G E A K A D E M I K Ø B E N H A V N S U N I V E R S I T ET S A G S N O T A T 28. MAJ 2014 Vedr.: Evalueringsrapport for 2013 Evalueringsprocedure Evalueringspolitik og -procedure for uddannelserne på Det Informationsvidenskabelige Akademi (IVA) er udarbejdet i overensstemmelse med Det Humanistiske Fakultets politik for undervisningsevaluering og er beskrevet i detaljer på KUnet. Proceduren indebærer, at undervisningen evalueres hvert semester i form af både en mundtlig midtvejsevaluering og en skriftlig slutevaluering ved semesterets afslutning. Slutevalueringen skal suppleres af en mundtlig opsamling. Både midtvejsog slutevalueringen skal skemalægges. Slutevalueringen gennemføres i Absalon. Underviserne vælger selv, om de vil anvende et kvantitativt eller et kvalitativt evalueringsskema, og det er muligt at justere i spørgsmålene. Det er dog obligatorisk at medtage spøgsmålet om de studerendes generelle udbytte af undervisningen, da resultaterne anvendes i studienævnets opsamling. Underviseren drøfter resultatet af slutevalueringen med kollegaerne i underviserteamet, som udarbejder en kort skriftlig opsamling på evalueringen. Teamets opsamling skal svare på følgende spørgsmål: 1. Hvad er gået godt (eller særlig godt) på et modul eller på tværs af moduler? 2. Hvad skal der arbejdes videre med af positive eller negative erfaringer? 3. Hvad er absolut nødvendigt at få ændret? Præcisér gerne fra hvilke(t) niveau(-er): på fag, i team, i uddannelsesledelsen? 4. Hvilke erfaringer (positive/negative) kan viderebringes med henblik på at understøtte et godt undervisningsforløb generelt? Opsamlingen videreformidles til studienævnet, som har ansvar for den videre behandling og opfølgning.

2 Datagrundlag Denne rapport er udarbejdet på baggrund af studienævnets drøftelse af underviserteamenes opsamlinger samt nøgletal og kommentarer fra slutevalueringerne i forårs- og efterårssemesteret Nøgletallene er udregnet på baggrund af datagrundlaget i Absalon, og der er kun i begrænset omfang taget højde for evalueringer, som ikke er gennemført Absalon. Der udarbejdes ikke opsamlinger på midtvejsevalueringerne SIDE 2 AF 5 Omfang og svarprocenter I 2013 blev der gennemført 118 undervisningsforløb på IVA, hvoraf 88 (75 %) blev afsluttet med en slutevaluering Absalon. Tabel 1: Omfang og svarprocenter Undervisningsforløb i alt Evalueret i Absalon Procent Bacheloruddannelsen % Kandidatuddannelsen % Total % Det er især undervisningsforløb på bacheloruddannelsen i Aalborg og på kandidatuddannelsen i København, hvor der ikke gennemføres slutevalueringer i Absalon. I stedet printer underviserne typisk evalueringsskemaet og beder de studerende om at udfylde det i hånden. Studienævnet vil tilstræbe, at alle undervisningsforløb evalueres elektronisk i Absalon efter hvert semester. Svarprocenterne er udregnet som antallet af slutevalueringer i Absalon i procent af antal studerende, som har været aktive på Absalon i det pågældende semester. Det betyder, at den reelle svarprocent typisk vil være højere end angivet her. Der er store udsving i svarprocenterne for slutevalueringerne, idet de ligger mellem 8 % og 91 % med en middelværdi på 38 %. Det er studienævnets ambition at hæve svarprocenternes bundniveau, således at de nærmer sig det nuværende middelniveau. I første omgang vil der blive sat fokus på de undervisningsforløb med de højeste svarprocenter for at undersøge, om der er erfaringer som kan viderebringes. Evalueringsskema I forbindelse med overgangen til Absalon i 2014 er der fulgt op på enkelte grundlæggende uhensigtsmæssigheder i opbygningen af evalueringsskemaerne. Evalueringsskemaerne vil desuden blive drøftet på et seminar om undervisningsevaluering i august De studerendes vurdering af det generelle udbytte af undervisningen Både de kvalitative og de kvantitative evalueringsskemaer indeholder de studerendes vurdering af deres generelle udbytte af undervisningen. De studerende skal angive, hvor enige de er i, at undervisningsforløbet alt i alt har været udbytterigt. I tabellen nedenfor er de studerendes vurderinger samlet for hvert semester. Det giver en indikation af den overordnede tilfredshed med undervisningen på de enkelte semestre. Der skal tages forbehold for, at procenterne bygger på et relativt lavt antal evalueringer på visse semestre det gælder fx 5. og 6. semester.

3 Tabel 2: Undervisningsforløbet har alt i alt været meget udbytterigt pr. semester Undervisningsforløbet har alt i alt været meget udbytterigt Hverken Helt Overvejende enig eller enig enig Overvejende Helt Antal hold SIDE 3 AF 5 Heraf evalueret 1 SEM 28% 50% 17% 3% 1% SEM 28% 45% 13% 11% 4% SEM 22% 52% 13% 12% 1% SEM 30% 45% 13% 9% 1% SEM 17% 45% 22% 12% 5% SEM 24% 60% 8% 8% 0% 6 4 KA F 35% 39% 11% 11% 4% KA E 18% 46% 22% 12% 2% Tabellen viser, at de studerende i langt overvejende grad vurderer, at undervisningsforløbene generelt er udbytterige. Inddeling af fagelementer i A, B og C I overensstemmelse med Københavns Universitets politik for undervisningsevaluering har studienævnet inddelt de evaluerede kurser i kategorierne A, B og C. Alle 118 evalueringer er screenet på baggrund af de studerendes vurdering af deres generelle udbytte af undervisningen. De evalueringer med en tydelig vægt af henholdsvis positive eller negative vurderinger blev identificeret. Det gav to bruttolister på henholdsvis 39 evalueringer i den positive ende og 16 evalueringer i den negative ende. Disse evalueringer blev gennemlæst med henblik på dels at undersøge årsagerne til de positive og negative vurderinger og dels at udvælge de særligt velfungerende fag samt dem, hvor der er behov for justeringer. De fag, der indgår i kategori A og C, er altså udvalgt ud fra bruttolisterne på baggrund af en helhedsvurdering af følgende faktorer: Svarprocenten Antal studerende, der angiver, at undervisningen har været udbytterig i forhold til antal studerende, der angiver, at undervisningen ikke har været udbytterig Konkrete eksempler på god praksis eller problemer i de studerendes kommentarer Underviserteamets opsamling på evalueringerne De resterende fag indgår i kategori B, hvor undervisningen kan siges at fungere tilfredsstillende, og hvor der ikke er noget særligt at bemærke: Antal evaluerede fag BA Antal evaluerede fag KA Tabel 3: Fordeling af fag i kategori A, B og C A. Undervisningen fungerer særligt godt og kan være til inspiration for andre B. Undervisningen fungerer tilfredsstillende. C. Der er behov for justering af undervisningen

4 Ved nærmere gennemgang af kategori A-kurserne tegner der sig et billede af en meget velformidlet undervisning, og der kan identificeres en række fællestræk ved undervisningen på tværs af kurserne: Kurserne er præget af tydelig alignment mellem læringsmål, undervisning og prøveformer. Kursernes formål og mål formidles tydeligt og aktivt i undervisningen. Kurserne er veltilrettelagte hvad angår både struktur, fagligt indhold og pædagogisk form. Kurserne engagerer de studerende og involverer dem aktivt i undervisningen. Kurserne giver de studerende mulighed for at få feedback på deres arbejde og præstationer. Kurserne øger de studerendes interesse for faget. SIDE 4 AF 5 Ved en gennemgang af kurserne i kategori C tegner der sig et næsten modsat billede, der igen er karakteriseret ved en række fællestræk på tværs af kurserne: Kurserne er præget af manglende alignment mellem undervisning og prøveformer. Kurserne er præget af en mangelende formidling af formål, mål og krav til udprøvning. Kurserne lider under en mangel på faglig sammenhæng enten mellem kursets delemner, eller på tværs af forskellige undervisere, der underviser på kurset. Kurserne opleves som lidt ustrukturerede og usammenhængende. Studienævnets opfølgning På baggrund undervisningsevalueringerne og underviserteamenes opsamling har studienævnet udpeget 4 indsatsområder: 1. Udvikling af IVAs evalueringspolitik og evalueringsprocedure, herunder en målsætning om at få alle slutevalueringerne til at foregå i Absalon samt at øge den samlede svarprocents minimumsniveau (jf. evalueringsrapporten). 2. Mere fokus på studenterinddragende aktiviteter i undervisningen, fx gennem aktiv brug af studenteroplæg, workshops og case-arbejde og lignende. 3. Brug af studiegrupper, læsegrupper og/eller skrivegrupper på både BA og KA niveau hvorfor og hvordan? 4. Engelsk som undervisningssprog. Evalueringerne peger på problemstillinger med de kurser, der gennemføres på engelsk. Disse kurser befinder sig ikke nødvendigvis i kategori C, men da omfanget af engelsksproget undervisning stigende, er det et område, som studienævnet ønsker at sætte fokus på. Opfølgning på evalueringsrapporten for 2012 Evalueringsrapporten for 2012 var opdelt på forårs- og efterårssemesteret. IVAs nuværende evalueringspolitik og -procedure blev implementeret i foråret 2012, og erfaringerne fra de to semestre førte til mindre justeringer af evalueringsskemaerne og formen på tilbagemeldingerne til studienævnet. På baggrund af evalueringerne i forårssemestret blev der formuleret flere positive og negative erfaringer, som førte til en række opfølgningsinitiativer. I det følgende gives et par eksempler. Forårets evalueringer pegede på, at de studerendes forbere-

5 delse og deltagelse i undervisningen var for lav. På den baggrund arbejdede uddannelsesledelsen og studienævnet videre med en model for studieprocessamtaler, der er blevet tilpasset i løbet af 2013 og forventes implementeret i efteråret I evalueringerne af undervisningen i efteråret 2012 kom det frem, at der var behov for at samle op på brugen af studiegrupper på bacheloruddannelsen. Arbejdet med at forbedre modellen for studiegrupper og læsegrupper fortsætter i 2014, hvor det indgår i ovennævnte handleplan. SIDE 5 AF 5