Surveys processer, muligheder og faldgruber >>
>> Indhold 1. Undersøgelsestyper og metoder for dataindsamling 2. Kontakten med respondenten 3. Konsekvenser af valg af dataindsamlingstype og kontaktstrategi eksempel på anvendelse af e-boks 4. Spørgeskemaet og udfordringer ved spørgeskemaet ved mixed mode 2
>> Undersøgelsestyper Personundersøgelser Holdningsundersøgelser Adfærdsundersøgelser Bruger- og evalueringsundersøgelser Virksomhedsundersøgelser Ansatte i en virksomhed Noget i en given virksomhed Vi gennemfører alle slags undersøgelser, der ikke er produktspecifikke eller har kommercielt øjemed. 3
>> Metode for dataindsamling Web skemaer Telefoninterview Telefonrykning Besøgsinterview Papirskemaer 4
>> Web Hurtigere dataindsamling Ofte kortere skema Respondenten må antages at bruge internettet Respondenten kan udfylde når det passer ham/ hende Komplicerede spørgsmål er mulige (fx prioriteringer, lange tekster, sammenligninger) Svære eller sensitive spørgsmål kan være lettere at få svar på Sprogmuligheder og kulturforskelle kan overkommes 5
>> Telefon Interviewere til at motivere til deltagelse og færdiggørelse af interviewet Dermed flere komplette interview og højere svarprocent Lettere at sikre den relevante person interviewes Kontaktforsøg kan gentages flere gange Kun dem vi kan finde telefonnummer på kan indgå 6
>> Besøg Mulighed for længere interview Interview på særlige lokaliteter Mulighed for at se og høre og modtage instrukser Fysiske eller kognitive test er mulige Respondenter der skal tages særligt hånd om Alle har mulighed for at deltage 7
>> Papir Til de rigtige målgrupper Udfyldes når det passer respondenten Hjælpemidler og vejledninger kan medsendes Omkostningsfuld porto 8
>> Kombinationer, mixed-mode Kombinationer Web og telefon Web, telefon og besøg Web og papir 9
>> Kontakten med respondenten Altid skriftelig henvendelse først både ved: Web Tlf Besøg Papirbreve, mails, E-boks brev 10
>> Eksempel på brev? 11
>> Respondenterns forventninger og krav Respondenten er som en kunde, og skal behandles sådan: Venlig forespørgsel om hjælp Vi skal være tilgængelige på den platform/ metode der passer respondenten. Vi skal være tilgængelig på det tidspunkt der passer respondenten Det skal være let at komme i gang med at svare Det skal være kort brev og spørgeskema Vi skal lave skemaer og undersøgelser som respondenten vil svare på, i stedet for at forsøge at overbevise respondenten om at svare på de skemaer vi laver Spørgeskema og set-up skal være gennemtestet 12
>> Pilottest Specialuddannede interviewere Færdigt elektronisk skema til telefoninterview Omkring 20 interview Strukturerede interviews -> probing, spørge rundt om spørgsmålene, afprøvning af andre formuleringer mv. Skriftlig rapport og forslag til ændringer I spørgeskemaet Test af webspørgeskemaer via telefoninterview eller ved fremmøde 13
>> Konsekvenser af metodevalg og kontaktstrategi Web og elektroniske henvendelser er billigst, lettest og hurtigst Eksempel på E-boks test viser implikationer man skal være opmærksom på 14
>> Panel med 4 mio. danskere Alle danskere over 15 år Kontaktinformation vedligeholdes af respondenten Cpr-numre og register information Begrænsninger til offentlige kunder Webpanel rekrutteret fra vores månedlige repræsentative undersøgelser er et alternativ 15
>> Brugere af E-boks Andel af Alder brugere 95+ 14,1% 85 til 94 25,8% 75 til 84 53,5% 65 til 74 81,6% 55 til 64 92,1% 45 til 54 95,3% 35 til 44 97,1% 25 til 34 97,6% 15 til 24 98,3% I alt 89,4% 16
>> Test af dataindsamling med E-boks Marts 2016 Normal Omnibus svarprocent 61,4 pct. Invitationsbrev - post Påmindelse - post telefoninterviewning og ekstra skriftlig påmindelse for dem uden telefonnummer E-boks test svarprocent på 34 pct. af stikprøven/ 36 af de mulige E-boks invitation E-boks påmindelse Endnu en E-boks påmindelse 17
>> Detaljer Stikprøve Leveret Svar før Første påmindelse Pct af stik Svar før Anden påmindelse Pct af stik Svar før Tlfintv start Pct af stik Endelig Svarpct - web Endelig Svarpct - alle E-boks test 513 477 16 pct. 28 pct 34 pct. 34 pct. 34 pct. Omnibus 1817? 26 pct. - 34 pct. 42 pct 61 pct. 18
>> E-boks 19
>> E-boks 20
>> Hvem svarer? - Køn 70% 63% 60% 59% 50% 40% 36% 36% 30% 20% 10% 0% Alm E boks 1. Mænd 2. Kvinder 21
>> Hvem svarer? - Alder 80% 75% 70% 60% 63% 69% 50% 49% 50% 46% 40% 34% 41% 30% 30% 25% 20% 10% 0% Alm E boks 16-29 år 30-39 år 40-49 år 50-64 år 65-74 år 22
>> Hvem svarer? - Geografi 70% 63% 64% 61% 62% 60% 57% 50% 43% 40% 38% 39% 35% 30% 30% 20% 10% 0% Alm E boks 81 Nordjylland 82 Midtjylland 83 Syddanmark 84 Hovedstaden 85 Sjælland 23
>> Hvem svarer? - Uddannelse 80% 70% 64% 62% 69% 72% 60% 50% 40% 49% 40% 43% 44% 50% 30% 20% 23% 10% 0% Alm E boks 1.Grundskole 2. Ungdomsuddannelse 3. Kort videregående 4. Mellemlang videregående 5. Lang videregående 24
>> Hvem svarer? - Beskæftigelse 80% 70% 60% 56% 56% 61% 70% 68% 50% 40% 30% 28% 32% 40% 42% 33% 20% 10% 0% Alm E boks 0. Uden for arbejdsmarkedet 1. Studerende 2. lønmodtagere grundniveau 3.Lønmodtagere mellemniveau og højere 4. Selvstændige 25
>> Hvem svarer? Familieindkomst 80% 73% 70% 70% 64% 60% 60% 50% 46% 48% 44% 46% 40% 39% 30% 27% 29% 28% 20% 10% 0% Alm E boks Ingen indkomst / ukendt indkomst 0-200.000 200-350.000 350-500.000 500-750.000 750+ 26
>> Forskelle i svarmønstre Rigspolitiet - uvægtet I hvilken grad er du bekymret for kriminalitet og vold i samfundet? E-boks Alm Meget bekymret 18 24 Noget bekymret 34 32 Lidt bekymret 37 36 Slet ikke 11 7 27
>> Spørgeskemaet Hvad skal I tænke på når I udformer et spørgeskema? Grundlæggende: Spørg om noget der er let at svare på og spørg ikke om for meget af gangen Det kan uddybes 28
>> 1. Spørg til førstehåndserfaringer En spørgeskemaundersøgelses styrke ligger i, at spørge til noget respondenten ved noget om Hvad har de gjort Deres nuværende situation Deres følelser Deres opfattelser af forskellige forhold. 29
>> 2. Skriv spørgeskemaet så det kan forstås eller læses op Hvis det er interviewere, der skal stille spørgsmålene i en spørgeskemaundersøgelse, så skal formuleringerne være så entydige og præcise, at når interviewerne har læst spørgsmål og evt. intro-tekst op, som det er formuleret, så er respondenten fuldt klædt på til at kunne besvare spørgsmålet. Brug derfor fast manuskript til dataindsamlingen. Når der bruges definitioner, så bør definitionerne (ofte) nævnes før selve spørgsmålet stilles. Et spørgsmål bør afsluttes med selve spørgsmålet 30
>> Reliabilitet v. mixed-mode A1 Hvor har du drukket kaffe henne (flere svar mulige) 1. Arbejdspladsen 2. Offentlige transportmidler 3. Butikker 4. Restauranter 5. På barer 6. Andet, notér: 31
>> Reliabilitet v. mixed-mode A1 Hvor har du drukket kaffe henne.. 1. Ja 2. Nej A2 På arbejdspladsen? Hvor har du drukket kaffe henne.. 1. Ja 2. Nej I offentlige transportmidler? Hvor har du drukket kaffe henne Ja Nej Arbejdspladsen Offentlige transportmidler 32
>> 3. Skab forståelse for emnet Et spørgeskemaspørgsmål bør formuleres, så IP besvarer det samme spørgsmål, dvs. alle IP ere forstår det samme ved spørgsmålet. Så vidt det overhovedet er muligt, bør spørgsmålene formuleres således, at IP erne forstår ordenes og dermed spørgsmålets betydning således, at alle IP ere får samme oplevelse af, hvad meningen med spørgsmålet er. Der bør i videst muligt omfang indsættes definitioner og forklaringer, når det ikke kan forventes, at alle IP ere /respondenter kender eller er sikre på de anvendte begreber, vendinger eller ord. Når der i et spørgsmål refereres til en tidshorisont, så skal tidshorisonten være entydig. Når det emne, der skal afdækkes, bliver for indviklet eller kompliceret at få ind i ét spørgsmål, bør der stilles flere spørgsmål. 33
>> 4. Spørgsmålene skal være entydige Undgå at stille to spørgsmål på én gang Undgå at stille spørgsmål som tager udgangspunkt i egne antagelser eller forudsætninger. Pas på spørgsmål som kan rumme skjulte uforudsete tilfældigheder Undgå negationer 34
>> 5. Hav tydelige og meningsfulde svarkategorier Præsenter svarmulighederne for IP på en enkel og tydelig måde. Gerne flere svar spørgsmål og prioriteringer fungerer dårligt i telefonen. Gradspørgsmål overvej at undgå uligevægt i svarkategorier Undgå ledende svarkategorier 35
>> 6. Den visuelle formidling Opsæt spørgeskemaet, så det er så nemt og enkelt som muligt for både respondenten og interviewerne at læse spørgsmålene, følge instruktionerne og at afgive svar. 36
>> Opsummering - Surveys processer, muligheder og faldgruber Om forskellige undersøgelsestyper, metoder og mix af metoder Kontakten med respondenten og pilottest af spørgeskemaet Konsekvenser af metodevalg og kontraktstrategier fokus på webundersøgelser og brug af E-boks Hvad I skal tænke på når I udformer et spørgeskema: 1. Afklar forventninger til respondentens viden 2. Skriv så det umiddelbart kan læses og forstås 3. Skab forståelse hos respondenten ved definitioner og forklaringer 4. Skriv entydige spørgsmål som ikke let misforstås 5. Brug tydelige og meningsfulde svarkategorier 6. Brug den visuelle formidling rigtigt 37