To spørgsmål: Hvilken betydning har de manglende svar på items for målingen af spiritualitet?

Om manglende responser i surveys: Spiritualitetsskalaen Svend Kreiner To spørgsmål: Hvilken betydning har de manglende svar på items for målingen af spiritualitet? Hvilken betydning har de manglende svar i øvrigt for den statistiske analyse af data? 1

Spiritualitetsskalaen N = 1507 1174 med svar på samtlige spiritualitets items Item Antal manglende responser Antal manglende svar % af sample Gud 103 0 77.9 Liv efter døden 150 1 15.1 Helvede 60 2 3.4 Paradis 101 3 1.6 Synd 125 4 1.1 5 0.9 2

Målingsproblemet Modellen θ = grad af spiritualitet P(Synd θ, Køn) = exp( α synd 1+ exp( α synd + θ) + θ) Estimer θ for hver person ud fra svarene på items og kilderne til differentiel item funktion Hvis svarene mangler på visse items estimeres θ ud fra de svar, der er givet. Manglende responser reducerer sikkerheden, men er ellers ikke et problem 3

En-til-en relation mellem θ og forventede scores DIF sources: M - RELIGION Q - KIRKE V - KØN DIF justerede scores MQV MQV MQV MQV MQV MQV MQV MQV MQV MQV MQV MQV MQV MQV MQV MQV score 111 211 311 411 121 221 321 421 112 212 312 412 122 222 322 422 ----------------------------------------------------------------------------------------------------------------------- 1 1.00 1.00 1.04 1.07 1.37 1.38 1.43 1.49 0.85 0.86 0.88 0.90 1.17 1.17 1.21 1.24 2 2.00 2.01 2.12 2.30 2.22 2.23 2.34 2.52 1.68 1.68 1.76 1.86 1.92 1.93 2.01 2.13 3 3.00 3.02 3.17 3.50 3.09 3.11 3.24 3.55 2.66 2.68 2.84 3.22 2.80 2.82 2.97 3.32 4 4.00 4.01 4.09 4.33 4.02 4.03 4.10 4.34 3.87 3.88 3.99 4.29 3.90 3.92 4.01 4.30 Person no. 5 Forventede total scores, hvis der er manglende svar Item responses : 1 1 0 0 - Score = 2 estimated theta: 0.1133 Equated score = 2.6307 Person no. 30 Item responses : - 0 1 1 0 Score = 2 estimated theta: -0.6457 Equated score = 2.0325 4

Hvilken betydning har det haft for den statistiske analyse, at der mangler svare på nogle items? Fem spiritualitets items + RELIGION (vigtigt/mindre vigtigt) TROENDE (ja/nej) KIRKE (folkekirkemedlem?) GÅIKIRKE (Kirkegænger) KØN KOHORTE (alder) 5

Alle analyser af items er betinget af at der er svaret på alle items Manglende item responses repræsenteres ved non-response variable Missing at random hvis disse variable er indbyrdes uafhængige af hinanden og af andre variable. 6

En analyse af de manglende responser afslører at nonresponserne er stærkt korrelerede Hvorfor? Indhold og/eller Tilfældige effekter og/eller Effekt af baggrundsvariable 7

Respons bias Hvis non-respons afhænger af nogle af de andre variable introduceres en vis grad af respons bias 8

Hvad kan vi sige om respons adfærden? Man kan i sagens natur ikke afprøve direkte, om svaret på et spørgsmål har betydning for sandsynligheden for at spørgsmålet ikke bliver besvaret, men man kan undersøge om sandsynligheden for at spørgsmålet besvares afhænger af de andre variable. Tror på Gud Procentvis andel af personer, der ikke besvarede spørgsmålet om liv efter døden Ja 10.0 % Nej 5.7 % χ 2 = 7.8 df = 1 p = 0.005 9

Resultatet af den multivariate analyse. De stiplede pile er hypotetiske 10

Oversigt over forældre til non-responses blandt items Item non-respons Forældre blandt items Andre forældre Gud Helvede Troende Liv efter døden Gud Trossamfund Helvede Liv efter døden Kohorte Paradis - Troende Synd Gud, Paradis - Sammenhængene mellem samtlige forældre vil være præget af respons bias 11

En statistisk model for non respons exp ( α ) i + β j x j P(Item i = non-response) = j 1 + exp ( α ) i + β j j x j Hvor x j kan være andre variable (svar på items, manglende respons på andre items eller exogene variable) 12

Tilføj tilfældig effekt, θ, som udtryk for at forskellige personer har forskellig tilbøjelighed til at springe spørgsmål over exp ( α ) i + θ + β j x j P(Item i = non-response) = j 1 + exp ( α ) i + θ + β j j x j β j = 0 P(Item i = non-response) = Dette er en Rasch model exp ( α i + θ ) ( α θ ) 1 + exp + i β j 0 DIF og/eller lokal afhængighed 13

Problemer, der skal løses: Er det en Rasch model eller er der tale om DIF og lokal afhængighed i spørgsmålene om ikke at besvare items? Afhænger den tilfældige effekt (θ) af de eksogene variable? Afhænger den tilfældige effekt (θ) af svarene på items eller af den latente spiritualitet og hvordan undersøger man det, når svarene mangler for nogle items? 14

Rasch-analyse af non-responser i forhold til eksogene variable Flere non-responser blandt troende end blandt ikke-troende Specifik effekt af KOHORTER på PARADIS (størst frafald blandt ældste) Specifik effekt af RELIGON på GUD (størst frafald, blandt dem, der ikke synes religion er vigtigt) 15

Analyse af effekten af svaret på om man tror på Gud på non-response Undersøg delskalaen uden non-response på GUD i forhold til om man tror eller ikke tror på GUD Generelt flere non-responser blandt dem, der tror på Gud Specifikt (og alt andet lige) flere non-responser på spørgsmålet om et liv efter døden for personer, der ikke tror på Gud 16

Samlet effekt af item responser på non-respons Item Generel effekt Mest non-respons hvis Specifik effekt Mest non-respons hvis på Gud Ja Nej på Liv efter døden Liv efter døden Ja Nej på Gud Helvede - Nej på Gud Paradis - Nej på Gud Synd - Nej på Paradis 17

Samlet model (indtil videre) Sidste spørgsmål: hvilken betydning har spiritualitet? 18

Spiritualitet non-response? Sammenhæng mellem de to skalaer er udartet (hvis spiritualitet beregnet non-respons = 0) Delskalaer er valide udtryk for det samme, som den samlede skala Sammenhængen mellem non-respons på to items og spiritualitet målt ved to andre items er et validt udtryk for effekten af spiritualitet på generel non-response disposition 19

Non-respons Spiritualitet Gamma EvigtLiv & Helvede Paradis&Synd -0.15 - EvigtLiv &Paradis Helvede&Synd -0.37 * EvigtLiv & Synd Helvede&paradis -0.05 - Helvede&Paradis EvigtLiv & Synd -0.24 * Helvede & Synd EvigtLiv & Paradis -0.63 * Paradis & Synd EvigtLiv & Helvede -0.43 * Generel effekt: Spirituelle personer svarer generelt på flere items end mindre spirituelle personer. Ingen tegn på DIF. Risikoen for at svaret mangler på et item afhænger ikke direkte af graden af spritualitet 20

Slutmodel (?) 21

Oversigt over forældre til non-responses blandt items Item non-respons Forældre blandt items Andre forældre Gud Liv efter døden, Helvede, Paradis Liv efter døden Gud - Helvede - - Paradis Synd Kohorter Synd - - - Generel disposition Spiritualitet generelt, Gud, Liv efter døden Troende 22

Diskussion? 23