EVALUERING I SURVEYXACT TRIN FOR TRIN LÆR AT TACKLE 2016 MARTS 2016 KOMITEEN FOR SUNDHEDSOPLYSNING 1
INDLEDNING Brugerorganisationer er gennem licensaftalen forpligtet til at lade kursisterne evaluere kurserne skriftligt. Spørgeskemaer til evaluering af LÆR AT TACKLE-kurserne printes ud på papir til kursisterne, der udfylder skemaet. Skemaerne indsamles, og svarene tastes ind i evalueringsredskabet SurveyXact, som Komiteen for Sundhedsoplysning stiller til rådighed for LÆR AT TACKLE-kursusudbydere. Via programmet SurveyXact kan du hurtigt og enkelt trække overskuelige tabeller og figurer ud over resultaterne fra de indtastede spørgeskemaer. Formålet med redskabet er, at du løbende kan indsamle viden om kurserne og deltagerne. Denne viden kan bruges som dokumentation og kvalitetssikring af kurserne lokalt. Derudover benyttes indtastningerne i SurveyXact til nationale rapporter, som samler data på tværs af kursusudbydere i hele landet samt kommunale rapporter, der er rapporter over den enkelte kursusudbyders kurser. Med redskabet kan du nemt indsamle og analysere data på: Kursisternes baggrund (køn, alder, ægteskabelige status, etniske baggrund, beskæftigelse, diagnose) Kursisternes tilfredshed med kurset Kursisternes udbytte af kurset Rekruttering Frafald samt årsager til frafald SUPPORT Hvis du har brug for mere viden eller hjælp ud over denne brugervejledning, tilbyder Komiteen for Sundhedsoplysning support pr. mail eller telefon. Se mere på hjemmesiden www.patientuddannelse.info eller kontakt projektkoordinator Rikke Bach Jensen Tlf. 3046 8455, e-mail: rbj@sundkom.dk Eventuelle ændringer af kontaktperson vil fremgå af siden: www.patientuddannelse.info/kontakt Når du logger dig på SurveyXact, vil du på alle sider se et telefonnummer til SurveyXact s egen support hotline. Dette nummer kan du ikke benytte. Du skal altid kontakte Komiteen for Sundhedsoplysning, hvis du har brug for support. 2
SÅDAN BRUGER DU REDSKABET TRIN FOR TRIN I det følgende beskrives trin for trin, hvordan du bruger evalueringsredskabet. TRIN 1: LOGIN Gå ind på hjemmesiden www.surveyxact.dk Alle brugerorganisationer, fx en kommune, har hvert sit område i systemet. Man har ikke adgang til hinandens data. Første gang du bruger SurveyXact, skal du gøre følgende: 1. Bed Komiteen for Sundhedsoplysning om at oprette dig som bruger. Du modtager en mail herfra med oplysninger om dit brugernavn. 2. Du modtager herefter en mail fra SurveyXact. I mailen er der 2 links. Klik på det første link. Nu kommer du til en side, hvor du skal taste brugernavn og adgangskode ind. 3. Dit brugernavn er: dit navn (fornavn og efternavn). Tast en adgangskode ind 2 gange. Du bestemmer selv, hvad adgangskoden skal være. TRIN 2: UDFYLDELSE AF SPØRGESKEMAER Til evaluering af kurset skal du bruge 2 spørgeskemaer: ét til de kursister, der har gennemført kurset og ét til dem, der er faldet fra. Du er som koordinator ansvarlig for, at der er printet skemaer både til gennemførte og frafaldne kursister. Skemaerne uddeles på det sidste modul. Alle deltagere skal udfylde og aflevere et skema, inden de går hjem fra sidste modul. Afsæt gerne 10 minutter til dette og oplys om, at den sidste kursusgang tager 10 minutter længere end de øvrige. På den måde kan kursisterne udfylde skemaerne i ro og mag. Spørgeskemaerne, der skal bruges til evalueringen, kan hentes på: www.patientuddannelse.info/koordinatorinfo/kursusevaluering Der anvendes forskellige spørgeskemaer på de fire LÆR AT TACKLE-kurser. GENNEMFØRTE En deltager regnes for gennemført, hvis vedkommende har deltaget på 4 eller flere moduler af kurset. 3
FRAFALDNE En deltager regnes for frafalden, hvis vedkommende har deltaget på 3 eller færre moduler af kurset. På afkrydsningsskemaet, som instruktørerne udfylder for hvert modul, kan du se, om en deltager er faldet fra. Kursister der har været tilmeldt kurset, men ikke er mødt op til nogen moduler, eller som har meldt fra før kursusstart, medregnes ikke her. De kursister som ikke deltager på sidste modul, eller som er frafaldet inden, skal have tilsendt spørgeskemaet til frafaldne kursister efterfølgende. Dette kan gøres ved at sende det printede skema sammen med en frankeret svarkuvert, så deltageren let kan returnere det udfyldte skema. Det er en god idé at rykke for svar, hvis du ikke får skemaet retur. Der er nemlig værdifuld viden at hente hos de kursister, der er faldet fra: Hvad er årsagen til frafaldet? Er der noget, man kan gøre anderledes for at fastholde kursisterne? Komiteen for Sundhedsoplysning arbejder på en løsning, hvor du får mulighed for at sende skemaer elektronisk til de, der ikke er tilstede på det sidste modul, både frafaldne og gennemførte. Så snart det er på plads, melder vi det ud til alle koordinatorer. OVERSIGT OVER SPØRGESKEMAER I 2016 LÆR AT TACKLE kronisk sygdom, gennemførte 2016 LÆR AT TACKLE kronisk sygdom, frafaldne 2016 LÆR AT TACKLE kroniske smerter, gennemførte 2016 LÆR AT TACKLE kroniske smerter, frafaldne 2016 LÆR AT TACKLE angst og depression, gennemførte 2016 LÆR AT TACKLE angst og depression, frafaldne 2016 LÆR AT TACKLE job og sygdom, gennemførte 2016 LÆR AT TACKLE job og sygdom, frafaldne 2016 Hvis du er i tvivl om, hvilket skema der skal benyttes, eller har andre spørgsmål, så kontakt: Rikke Bach Jensen, Projektkoordinator, Komiteen for Sundhedsoplysning Tlf. 30468455, E-mail: rbj@sundkom.dk TRIN 3: INDTASTNING AF SPØRGESKEMAER Når du er logget ind, kan du se en oversigt over dine mapper. Du har adgang til de mapper, der svarer til de kurser din kommune har angivet at I vil afholde i 2016. I mapperne skal du kun indtaste spørgeskemaer fra LÆR AT TACKLE-kurser, der er afsluttet i 2016. LÆR AT TACKLE kronisk sygdom Sygdom G 16 - forkortelsen dækker over LÆR AT TACKLE kronisk sygdom, Gennemførte 2016 (her indtastes besvarelser fra kursister, der gennemførte kurset LÆR AT TACKLE kronisk sygdom i 2016) 4
Sygdom F 16 - forkortelsen dækker over LÆR AT TACKLE kronisk sygdom, Frafaldne 2016 (her indtastes besvarelser fra kursister, der frafaldt kurset LÆR AT TACKLE kronisk sygdom i 2016) LÆR AT TACKLE kroniske smerter Smerte G 16 forkortelsen står for LÆR AT TACKLE kroniske smerter, Gennemførte 2016 (her indtastes besvarelser fra kursister, der gennemførte kurset LÆR AT TACKLE kroniske smerter i 2016) Smerte F 16 - forkortelsen står for LÆR AT TACKLE kroniske smerter, Frafaldne 2016 (her indtastes besvarelser fra kursister, der frafaldt kurset LÆR AT TACKLE kroniske smerter i 2016) LÆR AT TACKLE angst og depression A&D G 16 forkortelsen står for LÆR AT TACKLE angst og depression, Gennemførte 2016 (her indtastes besvarelser fra kursister, der gennemførte kurset LÆR AT TACKLE angst og depression i 2016) A&D F 16 - forkortelsen står for LÆR AT TACKLE angst og depression, Frafaldne 2016 (her indtastes besvarelser fra kursister, der frafaldt kurset LÆR AT TACKLE angst og depression i 2016) LÆR AT TACKLE job og sygdom J&S G 16 forkortelsen står for LÆR AT TACKLE job og sygdom, Gennemførte 2016 (her indtastes besvarelser fra kursister, der gennemførte kurset LÆR AT TACKLE job og sygdom i 2016) J&S F 16 - forkortelsen står for LÆR AT TACKLE job og sygdom, Frafaldne 2016 (her indtastes besvarelser fra kursister, der frafaldt kurset LÆR AT TACKLE job og sygdom i 2016) PROCEDURE FOR INDTASTNING 1. Du taster alle kursisternes svar ind i SurveyXact efter spørgeskemaerne er blevet udfyldt helst inden 15 dage. 2. Gå ind på www.surveyxact.dk 3. Skriv brugernavn og adgangskode. 4. Herefter kommer du ind til en side, hvor du kan se, hvilken organisation du er tilknyttet, fx Andeby Kommune 5. Klik på brugerorganisationen for at åbne den. Klik på Vis alle, for at få vist alle mapper med kurser. 6. Klik på den mappe du vil indtaste besvarelser i (fx Sygdom G 16 ). 7. Fjern markeringen ved Indtastning ved nøgle. 8. Klik på Opret. 9. OBS: Du kan opleve, at et skema ikke åbner. Det kan evt. skyldes, at du ikke har givet tilladelse til at åbne et nyt vindue. Hvis du ikke har det, er der en bjælke øverst på skærmen. Bjælken har som regel følgende tekst: Et pop up-vindue blev blokeret. Hvis du vil se dette pop up-vindue eller se yderligere indstillinger, skal du klikke her. Klik på bjælken. Du kan nu se tre valgmuligheder. Vælg Tillad altid pop up-vinduer fra dette websted... Klik ja i det vindue, der åbner. Klik forsøg igen i det andet vindue, der åbner. Det er nu muligt at se det oprettede skema. 5
10. I Distributionsform markeres Papir. 11. Lad feltet for e-mail stå tomt. 12. Klik på næste. 13. Skriv dato for kursets opstart (dd-mm-åååå), navn(e) på underviser(e) samt ét nummer for hvert skema (fx 1, 2, 3). 14. Notér det samme nummer på det tilsvarende skema i papir. 15. Klik på næste. 16. Nu kan du indtaste dit skema. 17. Når det første skema er tastet ind, klikker du på Afslut og fortsætter indtastningen af resten af skemaerne. HJÆLP TIL INDTASTNING VED BESVARELSER UDENFOR ANGIVNE KATEGORI Spørgeskemaundersøgelser- og evalueringer forudsætter at kursisterne, der udfylder spørgeskemaerne, indvilliger i at forsimple tingene og er villige til at placere sig i kategorier i de udvalgte svarmuligheder. Hvis du som indtaster af kursusevalueringerne oplever, at nogle af kursisterne har svaret uden for de angivne kategorier, og måske har sat kryds i flere bokse, så kommer der her en guide til hvordan du indtaster spørgeskemaerne. Har kursisten krydset to bokse af i spørgsmål, hvor der kun må vælges ét svar, indtastes svaret som udgangspunkt som Ubesvaret, fx i spørgsmål om køn og civilstand. I spørgsmålet om uddannelse vælges det svar med den højeste angivne uddannelse. Eksempel: i tilfælde med kryds både i Mellemlang videregående uddannelse og Lang videregående uddannelse vælges sidstnævnte. I skalaspørgsmål (i hvor høj grad enig), hvor kursisten har sat kryds imellem to bokse eller i flere bokse, vælges det svar med laveste angivne værdi. Eksempel: i tilfælde med kryds mellem I høj grad enig og Enig vælges sidstnævnte. Har kursisten i åbne svarkategorier (kommentarfelter) svaret ugyldige svar eller ligegyldige svar (fx Nej eller? til spørgsmål om yderligere kommentarer) udelades disse. Kommentarfeltet til sidst i spørgeskemaet er udelukkende til kursistens egne kommentarer. Hvis du som indtaster af kursusevalueringerne har kommentarer til indtastningen eller spørgeskemaet kan disse sendes til rbj@sundkom.dk. HVIS DU BLIVER AFBRUDT UNDER INDTASTNINGEN SurveyXact gemmer løbende dine indtastninger. For hver gang du klikker på næste og dermed går til næste side, er disse data indberettet til Komiteen for Sundhedsoplysning. Derfor er det vigtigt, at du taster hele skemaet ind på én gang. Først når du har trykket Afslut, er indtastningen brugbar i analyser til kommunale og nationale rapporter. Hvis du bliver afbrudt midt i en indtastning og ikke får trykket Afslut og du indtaster skemaet på ny, vil det blive registreret som endnu en indtastning. Det vil sige, at samme svar bliver registreret to gange. For at sikre, 6
at alle spørgeskemabesvarelser kun registreres én gang, skal du ved dobbeltindtastninger ringe eller sende en mail til Rikke Bach Jensen og oplyse undersøgelsens navn og nummer på skemaet, fx Andeby Kommune Sygdom G 15, skema 8. Så kan vi slette det skema, som ikke er fuldstændig besvaret. For at vi får de mest korrekte data til kommunale og nationale rapporter, er det vigtigt, at du er opmærksomme på at give os besked, når der laves dobbeltindtastninger, eller hvis du oplever andre problemer i forbindelse med indtastningen, så vi sammen kan sikre et godt datagrundlag til rapporterne. TRIN 4: ANALYSE AF KURSISTERNES BESVARELSER Kunne du tænke dig at bruge kursusevalueringerne fra LÆR AT TACKLE-kurserne mere aktivt? Her er nogle idéer: Feedback til instruktører: Brug dem som grundlag for at give feedback til dine instruktører hvor er de rigtig gode, hvad kan de arbejde mere med? Kvalitetssikring: Klarer dine instruktører sig godt eller er der tegn på, at der skal arbejdes med noget? Sammenlign fx på tværs af kurserne og se, om der sker en positiv udvikling. Tjek om din rekruttering fungerer efter din hensigt: Når du målgruppen ved hjælp af de rekrutteringskanaler, du anvender? Er rammerne i orden: Ligger kurset fx på et godt tidspunkt, og er lokalet tilfredsstillende? Tilfredshed og udbytte: Er nogle kursister mere tilfredse eller får mere ud af det end andre? Lav krydstabeller og find ud af det. (Se hvordan du laver krydstabeller under Analyser af sammenhænge på side 8). Der er mange muligheder for at lave analyser i SurveyXact. For at gøre det så let som muligt, følger herunder en kort guide til, hvordan du kan udarbejde en rapport over de indtastede data (det er samme procedure vi bruger, når vi i Komiteen for Sundhedsoplysning udarbejder kommunale rapporter til jer). Hvis du vil vide mere, er der nederst på siden i SurveyXact et link til Brugerhåndbog til SurveyXact. Kapitel 13 omhandler analyser og giver et overblik over hvilke muligheder, der findes og hvordan man gør. GUIDE TIL EN KOMMUNAL RAPPORT 1. Log ind på SurveyXact. Vælg det kursus du ønsker at lave en rapport over, fx Sygdom G 16. 2. Klik på fanen Analyse, som ligger øverst i den grå bjælke. 3. Herefter kommer du til en side, hvor du kan se de forskellige analysemuligheder. 4. Under overskriften Oversigt over besvarelser klik på Vis overblik. Så får du en oversigt over alle besvarelser. 5. For at få en brugbar visning af kursisternes alder, skal du ændre visningstypen. Det gør du ved at føre musen henover grafen for spørgsmål 3. Under Skift type klikker du på valgmuligheden Observationer. (Dette gælder for alle spørgsmål, hvor der angives tal, som besvarelse). 6. I skalaspørgsmål (hvor kursister angiver i hvor høj grad, de er enige i et udsagn) kan det være en fordel, at ændre visningstypen til Frekvens. På den måde får du vist hvert spørgsmål for sig. 7. Få dine analyser over i et Word-dokument a. Klik på pilen ved Eksporter. 7
b. Vælg herefter Word eller et andet format du ønsker rapporten i. c. Tryk på Hent fil d. Du kan nu arbejde med rapporten i et word-dokument. 8. Du kan også udskrive din rapport direkte fra SurveyXact. Det gør du ved at trykke på printerikonet i venstre side. 9. På side 10 kan du se eksempler på spørgsmål, der er eksporteret fra SurveyXact til Word format. UDVIDEDE ANALYSEMULIGHEDER TILFØJ ET FILTER Ofte vil der blive afholdt flere kurser i løbet af et år. Hvis du laver analysen som vist ovenfor, vil du få vist de samlede tal det vil sige tal for alle de kurser, der er indtastet i det pågældende år (fx 2016). Hvis du kun ønsker at se tal for det sidst afholdte kursus eller tal for kurser afholdt af bestemte instruktører, kan du sætte et såkaldt filter over dine data. 1. Tryk på filter-ikonet, som er indikeret med et lyn i øverste bjælke yderst til højre i toppen af siden. 2. Klik på Anden variabel under Tilføj filter. Der åbner nu et nyt vindue med en liste over spørgeskemaets spørgsmål. 3. Rul helt ned til Dato for opstart af kursus og markér denne. 4. I feltet til venstre vælger du =. 5. I tekstfeltet til højre skrives dato for opstart af kursus (dd-mm-åååå) 6. Tryk på Ok. Med dette filter vil analyserne kun indeholde besvarelser fra dette specifikke kursus. Du kan finde mere om filtre i Brugerhåndbogens kapitel 13 om analyser. Hvis du vil fjerne et filter igen skal du: 1. Trykke på filter-ikonet, som er indikeret med et lyn. 2. Under Aktivt filter, hold pilen over det filter, du har lavet, og tryk på Fjern Nu har du fjernet filteret, og kan igen lave analyser på alle besvarelserne. ANALYSER AF SAMMENHÆNGE I nogle tilfælde vil det være interessant at undersøge den umiddelbare sammenhæng mellem to spørgsmål. Dette kan vi gøre ved hjælp af funktionen Frekvens opdelt. 1. Klik på fanen Analyse, som ligger øverst i den grå bjælke. 2. Vælg Frekvens opdelt (tabel) 3. Vælg hvilke variable, der skal medtages. Vælg fx Køn 4. Vælg herefter opdelingsvariabel, dvs. den variabel der skal bruges til opdelingen. Vælg fx Hvor tilfreds har du samlet set været med kurset? 8
Du kan nu se en krydstabel, der viser hhv. de mandlige og kvindelige kursisters tilfredshed med kurset. Når man arbejder med denne type krydstabeller, skal man være varsom med sin tolkning af sammenhængene mellem to variable, fx sammenhængen mellem køn og tilfredshed. Tabellerne kan ikke med sikkerhed sige, at eksempelvis tilfredshed hænger sammen med køn, men de kan give en god indikation af, om der er en sammenhæng. EKSEMPLER PÅ TABELLER FRA SURVEYXACT EKSPORTERET TIL WORD Hvad er din etniske baggrund? (Sæt kun 1 kryds) Hvad er din etniske baggrund? (Sæt kun 1 kryds) - Anden etnisk baggrund end dansk, angiv hvilken: grønlænder Hvor tilfreds har du været med kursuslokalet? (Sæt kun 1 kryds) 9