Resultatrapport evaluering for Ergoterapeutuddannelsen i Aarhus Foråret 2014 Ref.: TRHJ Dato: 04.11.14 1
1. Indledning Hvert modul skal evalueres minimum 1 gang årligt. I foråret 2014 er der foretaget evaluering af modul 1, 3, 5, 7a, 8b, 9 og 11. Evalueringen har til formål at opnå viden om de studerendes vurdering af undervisningen med henblik på at sikre kvaliteten i undervisningen. 2. Målgruppen Det er de studerende der i foråret 2014 gik på modul 1, 3, 5, 7a, 8b, 9 og 11., som har deltaget i evalueringen. evalueringen er foretaget umiddelbart efter prøvens afvikling 3. Kontaktoplysninger på de studerende For at få en komplet liste over de studerendes e-mail adresser på det enkelte modul, så har ACmedarbejderen trukket lister fra VIA s gule sider. 4. Udformning af spørgeskemaet Der er taget afsæt i de spørgeskemaer, som blev brugt i foråret 2013, og som er udarbejdet på baggrund af en procedurebeskrivelse for modulevaluering, som dækker årene 2010-2012. Med henblik på at sikre relevansen af indholdet i spørgeskemaerne, sendes de ud til kommentering hos den ansvarlige underviser på det pågældende modul. Spørgeskemaerne er indtastet i SurveyXact. Fra efteråret 2014 vil nye spørgeskemaer tages i brug med afsæt i den nye procedurebeskrivelse, som er udarbejdet på området. 5. Udsendelse af spørgeskemaet per e-mail Spørgeskemaet blev sendt ud per e-mail via SurveyXact, og de studerende fik 14 dage til at besvare spørgsmålene. En uge inden deadline blev der sendt en e-mail ud til de studerende som endnu ikke havde besvaret spørgeskemaet for at minde dem på, at de meget gerne måtte gøre dette. Uddannelsen står selv for at sende spørgeskemaet ud samt den løbende opfølgning. 6. Fortrolighed Uddannelsen kender de studerendes e-mailadresse og fulde navn, da det er nødvendigt for at kunne gennemføre en valid undersøgelse. Men disse oplysninger vil ikke blive brugt hverken i denne rapport eller i andre sammenhænge. 2
7. Svarprocenten 1 3 5 7a 8b 9 11 Antal adspurgte studerende 62 56 50 21 25 43 51 Antal besvarelser 19 14 21 12 9 19 24 Svarprocent 30 % 25 % 42 % 57 % 36 % 44 % 47 % Svarprocenten ligger på gennemsnitlig 40 % for de 7 moduler, og vi ligger derfor væsentlig under det fastsatte niveau på minimum 60 %. 8. Repræsentativitet Alle studerende på de evaluerede moduler har fået tilsendt en e-mail med et link til modulevalueringen. Grunden til at evalueringen sendes ud til alle berørte studerende, er, for det første, at vi mener, at alle studerende skal have mulighed for at evaluere på det pågældende modul, som de netop har afsluttet. For det andet vil vi, alt andet lige, skabe basis for størst mulig repræsentativitet. Som nævnt oven for er der en svarprocent på gennemsnitlig 40 % for de 7 moduler. I denne forbindelse er det interessant at kigge på, om de 40 %, så kan karakteriseres som repræsentativ for hele målgruppen. Det er rigtig godt at få belyst de elementer, som fungerer mindre godt i undervisningen, men i den forbindelse er det dog vigtigt at holde sig for øje om det er en eller få som er utilfredse med et forløb eller om det er en utilfredshed som går igen blandt mange af modulets studerende. Når svarprocenten er lav, kan det være svært at vurdere om den feedback man får nødvendigvis er repræsentativ for alle studerende på det pågældende modul. Der kan sidde rigtig mange studerende, som er tilfredse med deres forløb, men fordi de netop er det, så ser de ingen grund til at besvare spørgeskemaet. 3
Omvendt er der også en risiko for, at studerende som er utilfredse med et forløb ikke besvare evalueringen, fordi de har en oplevelse af, at det alligevel ikke gør en forskel. I denne sammenhæng har uddannelsen en stor opgave med at gøre de studerende opmærksomme på at evalueringerne bliver taget seriøse, og at man forholder sig til de resultater der kommer ind positive som mindre positive. Se afsnit 11 hvor evalueringens hovedresultater tages under behandling. 1 9. Validitet Overordnet set er der i processen omkring udformningen af spørgeskemaerne gjort mange tanker omkring skemaernes længde og formuleringen af de enkelte spørgsmål. Selve længden på spørgeskemaet er forsøgt gjort så kort, som det var muligt uden at gå på kompromis med indholdet. De enkelte spørgsmål er søgt udformet korte og præcise, så de er nemme at forstå for de studerende. Til trods for ovenstående forholdsregler, så er der medtaget spørgsmål i evalueringen, som vi efterfølgende har fundet ud af ikke er brugbare ift. det vi skal undersøge. Der er ligeledes spørgsmål, som vi har fundet ud af, vi mangler svar på i den efterfølgende analyse. Fra 1. september 2014 har vi fået nye procedure for undervisningsevaluering, og på den baggrund skal alle spørgeskemaer kigges igennem og kvalitetssikres. Denne proces skal være med til at imødekomme ovenfornævnte udfordringer. 2 10. Procedure i databearbejdningen Data sorteres i kategorierne A, B og C. Definition af A, B og C: A elementer der fungerer særligt godt og kan være til inspiration for andre B elementer der fungerer tilfredsstillende C elementer der har behov for justeringer De data der ender i kategorien C vurderes alle sammen med henblik på om der er brug for uddybende evaluering. 1 Hansen M., Niels Henrik, mfl., Spørgeskemaer i virkeligheden, Forlaget Samfundslitteratur, side 41 60 2 Hansen M., Niels Henrik, mfl., Spørgeskemaer i virkeligheden, Forlaget Samfundslitteratur, side 91 92 4
11. Hovedresultaterne af modulevalueringerne på modul 1, 3, 5, 7a, 8b, 9 og 11 Resultater af evaluering af faget ergoterapi Ergoterapeutuddannelsen i Aarhus Ift. faget ergoterapi vurderer de studerende, som har deltaget i modulevalueringerne, at de overordnet set har fået stort til moderat udbytte af de elementer, som de er blevet undervist i. 1 3 5 7a 8b 9 11 Udbytte Stort og moderat udbytte af de elementer der undervises i Stort og moderat udbytte af de elementer der undervises i Stort og moderat udbytte af de elementer der undervises i Moderat og lidt udbytte af de elementer der undervises i Stort og moderat udbytte af de elementer der undervises i Kun klinisk undervisning Stort til moderat udbytte af de elementer der undervises i Resultater af evaluering af sidefagene Ift. sidefagene vurderer de studerende, som har deltaget i modulevalueringerne, at de overordnet set har fået moderat til lidt udbytte af de elementer, som de er blevet undervist i. Sidefag Udbytte 1 Pædagogik, sociologi, Moderat og lidt udbytte af undervisningen i sidefagene psykologi, anatomi 3 ANØ, fysiologi, psykologi, Moderat og lidt udbytte af undervisningen i sidefagene sygdomslære 5 Videnskabsteori, etik, Moderat og lidt udbytte af undervisningen i sidefagene sygdomslære, ANØ Neurofysiologi, Moderat og lidt udbytte af undervisningen i sidefagene 7a neuroanatomi, ortopædkirugi, neurologi, videnskabsteori og videnskabelig metode 8b Psykologi, psykiatri, videnskabsteori og Moderat udbytte af undervisningen i sidefagene 5
videnskabelig metode 9 - - Fysiologi, social- og Moderat udbytte af undervisningen i sidefagene 11 arbejdsmedicin, arbejdspsykologi, sociologi, social- og sundhedspolitik og lovgivning Resultater af evaluering af litteratur Relevansen af den anvendte litteratur Ift. relevansen af den anvendte litteratur vurderer de studerende, som har deltaget i modulevalueringerne, at den overordnet set har været meget relevant og en del relevant. Relevans 1 Meget relevant og en del relevant 3 Meget relevant og en del relevant 5 En del relevant 7a Meget relevant og en del relevant 8b Meget relevant og en del relevant 9-11 Meget relevant og en del relevant Sværhedsgraden af den anvendte litteratur Ift. sværhedsgraden af den anvendte litteratur vurderer de studerende, som har deltaget i modulevalueringerne, at den overordnet set har været passende. Sværhedsgraden 1 3 5 7a 8b 9-6
11 Resultater af evaluering af klinisk undervisning (modul 3 og 9) Ift. den kliniske undervisning vurderer de studerende, som har deltaget i modulevalueringerne, at de overordnet set har fået stort til moderat udbytte af de elementer, som de er blevet undervist i. 3 9 Udbytte Stort og moderat udbytte af den kliniske undervisning Stort til moderat udbytte af den kliniske undervisning Resultater af evaluering af modulprøven Sammenhængen mellem modulets indhold og modulprøven De studerende, som har deltaget i modulevalueringen, vurderer overordnet set, at der er stor og en del sammenhæng mellem modulets indhold og modulprøven. 1 3 5 7a 8b 9 11 Sammenhæng prøvens sværhedsgrad Desuden vurderer de studerende, som har deltaget i modulevalueringerne, overordnet set at modulprøvens sværhedsgrad har været passende. 1 3 5 Sværhedsgraden og for svær 7
7a 8b 9 11 Opsamling A elementer der fungerer særligt godt og kan være til inspiration for andre 1. Sværhedsgraden af den anvendte litteratur Når der kigges på hvilke elementer der fungerer særligt godt på de evaluererede moduler i foråret 2014 bør fremhæves sværhedsgraden af den anvendte litteratur, som de studerende overordnet set har vurderet til at være passende. 2. prøvens sværhedsgrad Det samme gør sig gældende for modulprøvens sværhedsgrad, som de studerende overordnet set ligeledes vurderer til at være passende. B elementer der fungerer tilfredsstillende 1. Faget ergoterapi Af elementer der fungerer tilfredsstillende kan nævnes faget ergoterapi, hvor de studerende vurderer, at de overordnet set har fået stort til moderat udbytte af de elementer, som de er blevet undervist i. 2. Relevansen af den anvendte litteratur De studerende har desuden vurderet at den anvendte litteratur overordnet set har været meget relevant og en del relevant, og det kan derfor karakteriseres som et element der fungerer tilfredsstillende. 3. Klinisk undervisning (modul 3 og modul 9) Den kliniske undervisning på modul 3 og modul 9 har også fungeret tilfredsstillende. De studerende, som har deltaget i modulevalueringerne, vurderer overordnet set, at de har fået stort til moderat udbytte af de elementer, som de er blevet undervist i. 8
4. Sammenhængen mellem modulets indhold og modulprøven Til sidst bør nævnes at sammenhængen mellem modulets indhold og modulprøven fungerer tilfredsstillende. Her har de studerende overordnet set vurderet, at der er stor og en del sammenhæng. C elementer der har behov for justeringer 1. Sidefagene Af elementer hvor der er behov for justeringer kan nævnes sidefagene. De studerende vurderer overordnet set, at de har fået moderat til lidt udbytte af de elementer, som de er blevet undervist i. Opfølgning på baggrund af rapportens resultater Der er mange elementer på Ergoterapeutuddannelsen i Aarhus som fungerer rigtig godt eller tilfredsstillende, og det er vi som uddannelse rigtig glade for. Et område, hvor de studerende overordnet set vurderer, at de får moderat til lidt udbytte er ift. sidefagene. Når man kigger i kommentarerne i evalueringerne fremhæver de studerende blandt andet det faktum, at der bør være mere sammenhæng mellem sidefagene og faget ergoterapi. Det er et område, som er blevet fremhævet i tidligere modulevalueringer, og det er et område, som uddannelsen er opmærksom på, og som man aktivt udvikler på. Af tiltag som er i gang på nuværende tidspunkt kan nævnes følgende: Ansætte timelærere på sidefagene, som bliver fast knyttet til uddannelsen. Timelærerne har knyttet en fast medarbejder fra uddannelsen til sig som kontaktperson En tæt dialog mellem timelærerne som underviser på sidefagene og de faste medarbejdere som underviser i ergoterapi. Der er fokus på pensum, indhold og didaktik. Afslutningsvis kan vi konkludere, at der ikke umiddelbart er behov for en uddybende evaluering ift. det resultat der foreligger på området for sidefag. Men her på uddannelsen vil vi naturligvis fortsætte den positive udvikling, som vi er i gang med på området. 9