HÅNDVÆRKET BAG EXIT POLLS. Selskab for Surveyforskning 20. maj 2014

Transkript

1 HÅNDVÆRKET BAG EXIT POLLS Selskab for Surveyforskning 20. maj 2014

2 Håndværket bag exit polls Exit polls i kontekst Exit polls som det muliges kunst En exit poll i praksis Opsummering

3 Exit polls i kontekst

4 POLLING HISTORISK SET erne Fransk finansminister udtrykker bekymring om l opinion publique (lige før revolutionen) Straw poll i The Harrisburg Pennsylvanian: Andrew Jackson vs. John Quincy Adams Stigende brug af kommerciel markedsanalyse (BAT etc.) Walter Lippmann udgiver Public Opinion: Literary Digest: 3,2 mio. vælgere, Alf Landon spås som vinder Gallup: Roosevelt spås som vinder I dag Marcel Dam gennemfører en exit poll ved hollandsk parlamentsvalg Dansk Sprognævn registrerer brugen af exit poll for første gang 31 målinger offentliggøres under den danske valgkamp. Tvivlerne i centrum Nate Silvers modelbaserede prognoser ser dagens lys Fornyet debat om exit polls 4

5 EXIT POLLS OG ANDRE MENINGSMÅLINGER Væsentlige ligheder og afgørende forskelle Præcis viden om vælgernes stemmeadfærd Bruges i medierne som grundlag for nyhedshistorier, fx indtil valgresultater foreligger Stort fokus også for analyseinstitutter Sandheden er derude : Valgresultatet foreligger kort tid efter exit poll en offentliggøres Data skal indsamles på få timer Kort og intens produktionstid af resultater 5

6 Exit polls som det muliges kunst

7 EN EXIT POLL VISER TOPPEN AF ISBJERGET Simplest mulige analyse Frekvenstabel med partiernes stemmeandele Kun forudsige totalniveauet, ingen nedbrud Ofte kun ét resultat for hele landet Et hav af overvejelser ligger bag en exit poll Metodik Kommunikation Logistik Optimering af hele værdikæden En exit poll er i høj grad det muliges kunst 7

8 VÆRDIKÆDEN I EN EXIT POLL VALG AF METODE UDVÆLGELSE AF RESPONDENTER RAPPORTERING TILRETTELÆGGELSE AF KONTAKT BEHANDLING AF RESULTATERNE SPØRGESKEMA 8

9 VALG AF METODE Alle dataindsamlingsformer er forbundet med fordele og ulemper Klassisk exit poll: Exitinterview ved valgsteder Nu: Typisk stor andel telefoninterview. Det muliggør detaljeret styring og repræsentativitet for hele landet Tendens: Web bliver mere og mere repræsentativt pga. sofistikerede rekrutteringskanaler Erfaring: Metodetriangulering sikrer bedste resultat, men hvad er det optimale miks? KV13: Telefon kombineret med webinterview Telefon Web Fordele Stor volumen Typisk høj repræsentativitet Stor volumen Ingen social desirability bias Ulemper Omkostningskrævende Repræsentativitet? F2F Fokus på nøglevalgsteder Omkostningskrævende Repræsentativitet? 9

10 UDVÆLGELSE AF RESPONDENTER Populationsopgørelsen Ideelt udgangspunkt: CPR-baseret udtræk over indbyggere i Danmark, hvorfra der kan trækkes en stikprøve Kendes fra forskningsundersøgelser (Arbejdskraftundersøgelsen, Transportvaneundersøgelsen, Institut for Statskundskab m.fl.), men er ikke mulig ved kommercielle exit polls Afgørende forudsætning er anderledes: Fare for konvergens til forkert populationsandel, hvis der gennemføres flere interview Konkrete udvælgelseskilder til KV13: Telefon: Database over danske telefonnumre Afgørende at sikre samme udtrækssandsynlighed for alle respondenter Mange telefonnumre giver stor udtrækssandsynlighed Web: Epinions DanmarksPanel rekrutteret via brugervenlighedstest 10

11 TILRETTELÆGGELSE AF KONTAKT - TELEFONINTERVIEW Telefoninterview Hvilke numre skal prioriteres højest? Forholdet mellem fastnet og mobilnumre populationsfordelingen er ukendt Kort tid til dataindsamlingen systematik mht. hvem der er hjemme hvornår Afgørende med tilstrækkelig mange opkaldsforsøg frem for blot at benytte nye numre. Ellers risiko for at skumme fløden. Typisk lettest at få svar fra kvinder 55+, mens unge mænd er vanskeligere at få svar fra. Men samtidig risiko for at kime få respondenter ned Hvor lange karantæneperioder skal der benyttes? 11

12 TILRETTELÆGGELSE AF KONTAKT WEB OG PERSONLIGE INTERVIEW Webinterview Ikke mulighed for at indgå aftaler, så hvornår skal undersøgelsen sættes i gang? Hvor mange påmindelsesrunder? Hvordan sikrer vi svar fra vanskelige målgrupper? Skal der prærekrutteres? Personlige interview (bruges sjældent) Menneskelig faktor i udvælgelsen skal minimeres. Ellers tendens til at vælge nemme respondenter, og tilfældigheden forsvinder Tælleprincip kan være nyttigt ( hver n te person, der træder på tapestykke ) 12

13 SPØRGESKEMA Tilsyneladende simpelt i en rigtig exit poll Hvilket parti har du stemt på i dag? Har du stemt personligt på en kandidat? Kort skema (ca. 1 minut) giver mange interview men skemaet skal indeholde tilstrækkelig baggrundsinformation til den senere databehandling Kompleksiteten øges i prognoser før valgdagen Hvordan behandles tvivlere? Erfaringsmæssigt godt at medtage de bløde tvivlere KV13: Ved stor usikkerhed eller lav interesse tager mange vælgere stilling ud fra hvad de ville stemme til FV i morgen Kan være nødvendigt med probe -spørgsmål for at lede respondentens tanker på rette vej (fx borgmestereffekter) 13

14 BEHANDLINGEN AF DATA Korrigér for skævheder vha. vejning Vi ser typisk underrepræsentation af: Unge Socialt svage grupper Personer med lav uddannelse Vejning sikrer, at disse gruppers andel af stikprøven svarer til populationen Men vejning kan gøre mere skade end gavn: hvis de underrepræsenterede grupper skiller sig ud på ikkeobserverbare karakteristika (fx politisk interesse) eller grupper, der vægtes op, er små Jo stærkere korrelation mellem vægtvariabel og partivalg, desto større præcision giver vejningen. Politisk vejning (past voting) giver typisk den største forbedring 14

15 Exit polls i praksis

16 NÅR DER ER VALG Produktion Op mod interview gennemføres på dagen, med spidsbelastning mellem kl. 17 og 20 Massivt pres på IT-systemer og personale Bemanding Op mod 100 interviewere på arbejde Førerbunker med valgholdet typisk 4-5 kernemedarbejdere og produktionsansvarlige Intens overvågning af produktion Tæt kontakt med DR 16

17 SPØRGSMÅL EP valget

18 EPINION UNDER FV-VALGKAMPEN - SNAPSHOTS 18

19 SPØRGSMÅL? 19

20 EPINION AARHUS EPINION COPENHAGEN EPINION HAMBURG EPINION LONDON NORDHAVNSGADE AARHUS C DENMARK T: E: TV@EPINION.DK W: RYESGADE 3F 2200 COPENHAGEN N DENMARK T: E: TYA@EPINION.DK W: ERICUSSPITZE HAMBURG GERMANY T: E: TV@EPINION.DK W: AYLESBURY HOUSE, AYLESBURY STREET LONDON, EC1R ODB UNITED KINGDOM T: E: TV@EPINION.DK W: EPINION MALMÖ EPINION NUUK EPINION OSLO EPINION SAIGON ADELGATAN MALMÖ SWEDEN T: E: TV@EPINION.DK W: POSTBOKS 4079 GL-3900 NUUK GREENLAND T: E: KUF@EPINION.GL W: BISKOP GUNNERUS GATE OSLO NORWAY T: E: MRB@EPINION.NO W: 11TH FL, DINH LE BUILDING, 1 DINH LE, DIST. 4, HCMC VIETNAM T: E: OFFICE@EPINION.VN W: EPINION STAVANGER EPINION VIENNA HOSPITALSGATA STAVANGER NORWAY T: E: SM@EPINION.NO W: SEMPERSTRASSE 1/ VIENNA AUSTRIA T: E: TV@EPINION.DK W: