Faktaark: Danske meningsmålingsinstitutters metode. 11. marts 2016 Martin Skovbjerg Jensen, analytiker, Mandag Morgen

Transkript

1 Faktaark: Danske meningsmålingsinstitutters metode 11. marts 2016 Martin Skovbjerg Jensen, analytiker, Mandag Morgen Metode: Følgende spørgsmål (se herunder) tager alene udgangspunkt i undersøgelser, der måler tilslutningen til partier, der er opstillingsberettigede ved det kommende folketingsvalg. De er i samarbejde med valgforskere og meningsmålingsinstitutter formuleret og afprøvet til at have det rette generalitetsniveau, så Mandag Morgens læsere kan få blik for forskelle melle institutterne, uden at institutterne skal gå så meget i detaljen, at det afslører forretningshemmeligheder. Spørgsmål: 1. Bruger I telefoninterview og/eller webpanel, og hvordan er den procentuelle fordeling mellem de to? 2. Hvordan rekrutterer I respondenter til jeres webpanel (gennem tilfældig rekruttering og/eller med egen-tilmelding)? 3. Hvad var svarprocenten for jeres tre seneste politiske målinger (evt. opdelt på telefon- og web-delen)? Og hvor mange runder af rykkere / opfølgende forsøg, gjorde I brug af? 4. Over hvor mange dage løber indsamlingsperioden typisk for en sådan politisk meningsmåling hos jer? 5. Hvordan håndterer I tvivlere i jeres undersøgelser? Bliver de fx regnet med til et parti, hvis de, efter først at have svaret ved ikke, ved et opfølgende spørgsmål nævner et parti (altså hvordan skelnes mellem bløde og hårde tvivlere)? 6. Bruger I nogle former for tematiske spørgsmål til politiske holdninger eller aktuelle dagsordener til at kvalificere den politiske målings resultat? Hvis ja, ønsker I at oplyse hvilke?

2 Medie Institut Bruger I telefoninterview og/eller webpanel, og hvordan er den procentuelle fordeling mellem de to? Hvordan rekrutterer I respondenter til jeres webpanel? Rekrutterin g gennem tilfældigt udvalg ifm. fx telefoninter view? Nuanceret rekruttering fra udvalgte partnerhjemm esider? Egentilmelding? Hvad var svarprocenten for jeres tre seneste politiske målinger (evt. opdelt på telefon- og webdelen)? Og hvor mange runder af rykkere / opfølgende forsøg, gjorde I brug af? Over hvor mange dage løber indsamlingsperioden typisk for en sådan politisk meningsmåling hos jer? Hvordan håndterer I tvivlere i jeres undersøgelser? Bliver de fx regnet med til et parti, hvis de, efter først at have svaret ved ikke, ved et opfølgende spørgsmål nævner et parti (altså hvordan skelnes mellem bløde og hårde tvivlere)? Bruger I nogle former for tematiske spørgsmål til politiske holdninger eller aktuelle dagsordener til at kvalificere den politiske målings resultat? Hvis ja, ønsker I at oplyse hvilke? Politiken og TV2 MEGAFON Hver anden undersøgelse er 100 % telefon og hvert anden er 80 % web og 20 % telefon Mellem 48 og 55 Vi indsamler normalt over 2-3 dage Der foretages modellering af tvivlerne efter andre spørgsmål. Metoden er forskellig fra fx valg til afstemninger., det gør vi, da det er nødvendigt. Berlings ke TNS GALLUP TNS Gallup anvender en kombination af de 2 metoder: 50/50 Typisk spørges ca alt i alt. Vi forsøger kontakt op til 8 gange på telefon og vi rykker elektronisk 3 gange TNS Gallup ønsker ikke at oplyse svarprocenten. 7 dage de bløde tvivlere, dvs. de der i 2. spørgsmål svarer et parti, regnes med ind i målingen. JP WILKE Vi bruger begge og fordelingen er 50/50. Vi har på det seneste fordoblet stikprøvestørrelsen til Vores telefonsample er tilfældigt genereret ud fra alle mobil- og fastnettelefonnumre og stratificeret på geografi og urbanisering. Ca. 95 % af vores panelister kommer ind fra andre undersøgels er Vores erfaring er, at kvaliteten af respondenter gennem denne metode er svingende. Derudover har vi member to member, hvor respondenterne kan hverve bekendte. På telefondelen var svarprocenten 43 %, og vi laver op til 7 genopkald På web-delen var svarprocenten 37 %, og vi sender 1-2 rykkere Omkring 8 dage - vi medtager de bløde tvivlere I de seneste målinger svarede 19 % i første omgang ved ikke, hvoraf 11 % var hårde tvivlere. Dvs. vi regnede de ca. 8 % med. Vi har i webdelen et batteri med ca. 14 spørgsmål om politiske holdninger. Med metoden reduced modelling bruger vi disse svar til at lave en sandsynlighedsbaseret fordeling af de hårde tvivlere, der svarer til de oplyste altså de respondenter, der nævnte et parti og også svarede på de politiske spørgsmål. Spørgsmålene stilles efter vi spørger til partivalget for at undgå framing.

3 DR EPINION Vi bruger både telefoninterviews og interviews foretaget gennem vores webpanel. Fordelingen mellem de to datakilder er 50/50, og vi foretager altid minimum 1000 interviews fra hver datakilde i vores undersøgelser. Vores udvælgelse til telefoninterviews er efter en fintmasket geografisk kvotering Epinion rekrutterer til vores webpanel gennem invitationer til brugerne på mellem forskellige hjemmesider. Det betyder, at vi kan opnå kontakte til mange forskellige dele af den danske befolkning, da vi kan sprede invitationer til at deltage i webpanelet til en række forskellige målgrupper. Svarprocenten på vores telefoninterviews gennem de seneste tre målinger er i gennemsnit 55 %. Det vil sige, at 55 % af dem, vi har opnået kontakt til, har ønsket at deltage i undersøgelsen. Ved telefoninterviews laver vi op til seks opfølgende opkald til de personer, der indgår i undersøgelsens stikprøve for at sikre, de får mulighed for at deltage i undersøgelsen I de seneste tre målinger har vi en gennemsnitlig svarprocent på 85 % i web-interviewene. Det vil sige, at 85 % af dem, der tilgår undersøgelsen, har besvaret den. Når vi laver normale politiske meningsmålinger løber dataindsamlingen altid over en uge. - de bløde tvivlere medregnes i vores målinger. Det vil sige, at vi medregner besvarelser omkring partivalg også hvis, respondenten først har svaret ved ikke, men angiver et partivalg ved det opfølgende spørgsmål. Vi afrapporterer også særskilt resultaterne for disse bløde tvivlere i vores målinger. De hårde tvivlere indgår ikke i vores målinger eller i opgørelserne over antal besvarelser, da vi erfaringsmæssigt ved, at få af dem ville stemme. Vi bruger ingen holdningsspørgsmål eller lignende til at forudsige partivalg. Der er ikke en entydig sammenhæng mellem holdninger og partivalg, og derfor skaber det mere støj i målingerne at gøre dette. Altinget NORSTAT Vores politiske index gennemføres med 50 % telefoninterview og 50% webpanel. Vi laver interview i alt, altså 500 telefon- og 500 web-interviews Telefonlisterne kvoteres efter kvoter geografisk region Rekruttering til vores panel foregår i primært via telefon ved opringning til tilfældige numre. Vi overvejer alternative kilder. Telefon: 30 % Et telefonnummer ringes op max 5 gange inden det ryger ud. Det er dog ikke alle der ringes til mere end en gang. Vi laver derfor ikke nødvendigvis genkald til alle, da vi også løbende ringer til friske numre, så kvoten kan nås på den måde. Web: % 5-7 dage de bløde tvivlere regnes med, hvis de angiver det i et opfølgende spørgsmål. Vi gør ikke noget ved hårde tvivlere. Tematiske spørgsmål med henblik på at kvalificere resultatet er ikke noget vi arbejder med. Vi sender 1 reminder.

4 Ritzau VOXMETE R Vi bruger udelukkende telefoninterview, når det gælder politiske meningsmålinger. Der gennemføres altid min interview Mht. udvælgelsen laver vi først en simpel tilfældig udvælgelse, præstratificeret på geografi, hvorefter vi opererer med kvoter på køn og alder for at sikre, at vi ender op med en repræsentativ stikprøve. Dette overflødiggør efterfølgende vejning. - Vi benytter som nævnt kun telefonintervi ew til politiske meningsmåli nger. Vi har dog et webpanel, der benyttes til andre analyser. Dette er udelukkende telefonisk rekrutteret. - - Vores opnåelse på de telefoniske meningsmålinger er lige omkring 70 % og vi kontakter alle numre op til 8 gange. 6-7 dage (fra mandag til lørdag eller søndag) - de bløde tvivlere indgår, hvis de hælder til at stemme på et givent parti, vi benytter ikke tematiske spørgsmål ifht. aktuelle dagsordener. Vi iværksætter dog løbende andre tiltag, der afdækker, hvorvidt der er risiko for, at vores målinger overeller underestimerer visse partier. Børsen GREENS Vi bruger både telefonog webinterview. Forholdet er 70 % telefon og 30 % web og der gennemføres som udgangspunkt i alt 1200 interview. Telefoninterview er kvoteret efter geografi NB: Greens Analyseinstitut (GA) har indgået en whitelabel aftale med Epinion omkring dataindsamling. Samarbejdet fungerer således ved at GA udarbejder spørgeramme, Epinion indsamler data på vegne af GA, hvorefter GA varetager analyse og databehandling frem til offentliggørelse. Respondenterne, som bliver interviewet, oplever at undersøgelsen gennemføres af Greens Analyseinstitut. Som nævnt står Epinion for al dataindsamling og vi benytter Epinions online Danmarkspanel. WEB: Invitationen blev udsendt til et repræsentativt udsnit af panelet de modtog derefter 1 reminder. Det er ikke muligt at opgøre den præcise svarprocent, men generelt ligger den på 20% hvor svarprocenten betragtes som accept-rate, dvs. beregnet som antal startende respondenter divideret med antal invitationer. Telefon: Gennemførselsprocenten varierede på de seneste tre målinger fra % Respondenterne har i de tre undersøgelser fået mellem 5 og 7 opkald. Vi indsamler typisk over 6 dage vi regner bløde tvivlere med, hvis de, efter først at have svaret ved ikke, ved et opfølgende spørgsmål nævner et parti.

5 MetroX Press YOUGOV Vi gennemfører alle interview i vores eget web-panel, som i Danmark tæller ca medlemmer. Heraf blev ca udskiftet i Vores politiske barometre er sædvanligvis baseret på ca interview Nuanceret rekruttering fordrer brug af så mange rekrutteringskilde r som muligt (eksempelvis AdWords, e- mails til medlemslister, telefonrekruterin g, bannerannonser, affiliatenetværk, annoncer i aviser, adresserede breve med flere) udfra en antagelse om, at bestemte typer af rekrutteringskilde r appellerer til forskellige typer af mennesker. Vi har valgt også at lade panelet være åbent for spontane tilmeldinger. Vi angiver normalt ikke traditionelle svarprocenter, da vi arbejder med kvoterede stikprøver. I stedet anvender vi "forventet svarandel", som lige nu er 46,7% i Danmark. Forventet svarandel er beregnet som den gennemsnitlige andel besvarelser af de seneste 5 invitationer for hvert enkelt medlem i panelet. Det skal dog tilføjes, at vi i akademiske forskerprojekter ofte anvender dedikerede stikprøver (såkaldte forskersamples), hvorpå der kan gennemføres rykkerprocedurer og beregnes egentlige svarprocenter. Dette er ofte et krav for publicering. Sædvanligvis 4-5 dage og i de faste politiske målinger altid henover en weekend. Vi tilbagefører ikke tvivlere på nogen måde. Hvis man svarer "ved ikke" på spørgsmålet om, hvem man ville stemme på, hvis der var valg i dag, så respekterer vi dette. Vi diskuterer det hver gang vi fastlægger den nye politiske vejematrice efter et valg, men har indtil videre fravalgt at kvalificere tvivlerne yderligere. Det gør vi, så vidt jeg er orienteret, heller ikke i andre lande, da vi aldrig har set overbevisende dokumentation for, at det øger præcisionen. Beregningen af partiernes vælgertilslutning udarbejdes alene ud fra de valg, som vi indbyggede i den politiske vejematrice efter seneste valg (vejning på demografiske faktorer og hvem man stemte på senest, samt behandling af tvivlere, førstegangsvælgere, de glemsomme med videre). Vi har dog flere tematiske spørgsmål i moduler på vores politiske undersøgelser (eksempelvis selv-placering på højrevenstre skala eller temaer som størst betydning for folks liv), ligesom vi stiller alle partiskiftere et åbent spørgsmål om begrundelsen for deres valg. Naturligvis analyserer vi også vælgervandringerne, men dette påvirker ikke beregningen af vælgertilslutning på partierne. Når det gælder de glemsomme vælgere, så har vi dog ændret lidt i forhold til før valget i juni 2015 (vi ændrer som udgangspunkt aldrig i den politiske vejematrivce mellem valg). Vi ved fra egne forsøg, at efter fire år kan op mod hver fjerde vælger ikke huske eller husker forkert hvem de stemte på ved sidste valg. Samtidig har andre målinger vist, at omkring hver tredje vælger har skiftet parti mellem hvert af de seneste seks valg baseret på, hvad vælgerne selv husker, og at især partihopperne har det med at glemme eller måske fortrænge? Deri kan der godt gemme sig en systematisk fejlkilde, når man skal beregne vælgervandringerne. Vi har derfor ændret rutinen således, at dét vores panelmedlemmer lige efter valget fortalte os, at de stemte, ikke vil blive opdateret, selv om de eventuelt senere fortæller os noget andet. De glemsomme vælgere kan altså stadig være glemsomme, men så husker vi for dem. Siden vi foretog ændringen har jeg haft et EU-valg til at teste effekten, og det så lovende ud. Det valg ramte vi i hvert fald meget godt, men afstanden i tid til seneste valg var naturligvis heller ikke særlig stor.