PIAAC i Danmark om bortfald og vægtning Torben Fridberg Selskab for Surveyforskning 27. november 2013 1
PIAAC: Måling af færdigheder - Læsefærdigheder - Regnefærdigheder - Færdigheder i problemløsning med IT Nøglekompetencer: - den enkeltes muligheder, demokrati og medborgerskab - arbejdsmarked og konkurrenceevne 2
Måling af færdigheder: Interview i respondentens hjem Spørgeskema: ca. 40 min. Opgaver i læse-, regne og IT-færdigheder: 60 min På interviewerens PC - subsidiært: Papir og blyant Adaptiv test Forskellige kombinationer af opgaver 3
Måling af færdigheder internationalt Afgørende at det komparativt Oversættelse Skærme Test Stikprøve Dataindsamling Vægtning osv. 4
Måling af færdigheder i Danmark 7.328 respondenter i Danmark 16-65 år Stikprøve: 16.400 personer i juli 2011 Vægtning til befolkning juli 2011: 3,6 mio. Den befolkning vi siger noget om. + Interview af deltagere i PISA 2000: Rapport i 2014 5
Danske data: Antal respondenter (test) Hovedsample 16-65 år: 4.991 Ekstra sample 55-65 år: 1.007 Ekstra sample Indvandrere: 808 PISA 2000 sample: 1.864 6
Resultat af dataindsamlingen 2012 Hovedsample 16-65 år Oversample 55-65 år Oversample: I ndvandrere Antal Personer I alt I nterviewet 48,0 53,3 32,9 45,7 7.328 Ej interviewet: Forskerbeskyttelse 14,5 7,1 10,8 12,9 2.067 Udvandret, død 1,2 0,3 6,4 2,1 340 Kan ikke træffes 6,0 2,8 14,2 7,2 1.158 Vil ikke medvirke 26,2 32,1 18,9 25,5 4.087 Sprogproblemer 1,4 0.7 13,1 3,6 575 Handicap, sygdom, andet 2,7 3,8 3,7 3,0 485 I alt 100,0 100,1 100,0 100,0 16.040 Procentgrundlag, stikprøve 10.900 1.990 3.150 16.040 7
Svarprocenter i Norden (Beregnet af PIAAC Konsortiet) Finland Norge* Danmark Sverige 66 pct. 62 pct. 50 pct. 45 pct. *Hver respondent fik 500 NKR 8
Der skal vægtes på grund af Design Forskerbeskyttelse Stort bortfald som kan formodes at være skævt på grund af undersøgelsens emne og en (tids)krævende deltagelse. Vi valgte at bede Danmarks Statistik om at vægte. 9
Vi havde defineret 10 strata indenfor hvilke stikprøven blev trukket tilfældigt. Age Non-immigrants Immigrants 16-24 p1 p3 25-34 p1 p3 35-44 p1 p3 45-54 p1 p3 55-65 p2 p4 10
DS lavede bortfaldsanalyse på disse 10 strata: Register variables included in the final model 01 gross income + on-going educational level + completed educational level * mobility + family gross income * place of residence 02 completed educational level + on-going educational level + place of residence + type of family 03 place of residence + mobility + disposable income + completed educational level * family gross income 04 completed educational level + type of family + socio-economic status + place of residence + mobility + gross income 05 completed educational level + gross income + place of residence * mobility + type of family * mobility 06 family gross income + socio-economic status * ethnicity 07 completed educational level + gross income + place of residence + type of family * socio-economic stratus 08 type of family + place of residence 09 place of residence + mobility + gender 10 gross income + disposable income + TITEL type of family 29-11-2013 11
Vægtning til befolkningstal Vægte Gennemsnit 495,2 Minimum 35,7 Maximum 1.551,6 12
Gennemsnitlige vægte i de 10 strata Final full sample weight Mean N Strata code (SFI) 01 703.38 898 02 854.92 677 03 756.95 988 04 711.90 1126 05 381.67 2166 06 297.91 179 07 310.04 363 08 266.24 365 09 239.35 339 10 228.88 227 13
Højeste gennemførte uddannelse uvægtet vægtet Grundskole 23,33 1.700 26,36 953.137 Stud.eksamen 9,62 701 10,53 380.831 Erhv udd 27,74 2.022 29,03 1.049.505 KVU+MVU 26,77 1.951 24,52 886.446 LVU 12,54 914 9,56 345.753 100 7.288 100 3.615.673 14
Hvis du tænker på de sidste 12 måneder, hvor tit har du brugt sproget engelsk i dit arbejde eller uddannelse? uvægtet vægtet Aldrig 19,45 1221 18,28 575.047 Mindre end en gang om måneden 20,23 1270 19,73 620.870 Mindre end en gang om ugen men mindst en gang om måneden 14,21 892 14,24 447.992 Mindst en gang om ugen, men ikke hver dag 20,93 1314 22,8 717.369 Hver dag 25,18 1581 24,96 785.319 100 6278 100,01 3.146.596 15
Måling af færdigheder: Hensyn til begge slags usikkerhed Danmark: Gennemsnit Læsefærdigheder: 270,8 (269,6-272,0) Regnefærdigheder: 278,3 (276,9-279,7) IT-færdigheder: 283,1 (281,8-284,4) 16
Læsefærdigheder. Gennemsnitlig score. Gns. score se diff p 1 Japan 296,2 0,68 25 0,0000 2 Finland 287,5 0,67 17 0,0000 3 Holland 284,0 0,71 13 0,0000 4 Australien 280,4 0,91 10 0,0000 5 Sverige 279,2 0,68 8 0,0000 6 Norge 278,4 0,61 8 0,0000 7 Estland 275,9 0,72 5 0,0000 8 Belgien (Flandern) 275,5 0,83 5 0,0000 9 Tjekkiet 274,0 0,98 3 0,0056 10 Slovakiet 273,8 0,62 3 0,0005 11 Canada 273,5 0,57 3 0,0014 Gennemsnit 273,3 0,17 3 0,0001 12 Sydkorea 272,6 0,58 2 0,0378 13 England & Nordirland 272,5 1,02 2 0,1621 14 Danmark 270,8 0,62 0 15 Tyskland 269,8 0,92-1 0,3767 16 USA 269,8 1,05-1 0,4204 17 Østrig 269,5 0,74-1 0,1661 18 Cypern 268,8 0,75-2 0,0463 19 Polen 266,9 0,60-4 0,0000 20 Irland 266,5 0,92-4 0,0001 21 Spanien 251,8 0,71-19 0,0000 22 Italien 250,5 1,09-20 0,0000 17
Regnefærdigheder. Gennemsnitlig score. Gns. score se diff p 1 Japan 288,2 0,74 17 0,0000 2 Finland 282,2 0,70 11 0,0001 3 Belgien (Flandern) 280,4 0,83 10 0,0560 4 Holland 280,3 0,71 10 0,0425 5 Sverige 279,1 0,82 8 0,4796 6 Norge 278,3 0,79 8 0,9855 7 Danmark 278,3 0,73 7 8 Slovakiet 275,8 0,79 5 0,0216 9 Tjekkiet 275,7 0,93 5 0,0311 10 Østrig 275,0 0,88 4 0,0047 11 Estland 273,1 0,53 2 0,0000 12 Tyskland 271,7 1,00 1 0,0000 Gennemsnit 269,4 0,19-1 0,0000 13 Australien 267,6 0,95-3 0,0000 14 Canada 265,5 0,71-5 0,0000 15 Cypern 264,6 0,79-6 0,0000 16 Sydkorea 263,4 0,69-7 0,0000 17 England & Nordirland 261,7 1,07-9 0,0000 18 Polen 259,8 0,82-11 0,0000 19 Irland 255,6 1,02-15 0,0000 20 USA 252,8 1,17-18 0,0000 21 Italien 247,1 1,06-24 0,0000 22 Spanien 245,8 0,62-25 0,0000 18
Problemløsning med IT. Gennemsnitlig score. Procentandel uden test på computer Gns. score se diff p 1 Japan 38 294,0 1,19 11 0,0000 2 Finland 19 289,4 0,83 6 0,0000 3 Australien 24 288,7 0,88 6 0,0000 4 Sverige 12 287,8 0,65 5 0,0000 5 Norge 16 286,5 0,57 3 0,0001 6 Holland 13 286,4 0,76 3 0,0011 7 Østrig 27 284,0 0,73 1 0,3695 Gennemsnit 24 283,1 0,21 0 0,9320 8 Danmark 15 283,1 0,68 9 Tjekkiet 25 283,0 1,10 0 0,9402 10 Sydkorea 30 283,0 0,79 0 0,9109 11 Tyskland 19 282,6 1,04-1 0,6861 12 Canada 19 282,4 0,68-1 0,4966 13 Slovakiet 37 281,1 0,82-2 0,0595 Belgien 14 (Flandern) 21 280,8 0,82-2 0,0288 England & Nordirland 16 280,3 0,93-3 0,0171 15 16 Estland 30 277,6 1,01-5 0,0000 17 USA 20 277,4 1,15-6 0,0000 18 Irland 33 276,8 1,01-6 0,0000 19 Polen 50 274,9 1,33-8 0,0000 19
Problemløsning med IT. Gennemsnitlig score. 20
De 16-65 åriges færdigheder i fire nordiske lande 21
Læsefærdigheder. 16-65-årige født i landet. Gns. score. Gns. score se diff P 1 Japan 296,3 0,68 21 0,0000 2 Finland 290,6 0,65 15 0,0000 3 Holland 289,5 0,70 14 0,0000 4 Sverige 288,7 0,78 13 0,0000 5 Australien 284,0 0,99 9 0,0000 6 Norge 283,6 0,62 8 0,0000 7 Canada 279,5 0,65 4 0,0000 8 Estland 279,0 0,77 4 0,0002 9 Belgien (Flandern) 278,3 0,87 3 0,0052 Gennemsnit 276,5 0,18 1 0,0621 10 England & Nordirland 275,6 1,00 0 0,7867 11 Danmark 275,2 0,66 0 12 USA 275,1 1,09 0 0,9026 13 Tyskland 274,5 0,98-1 0,5409 14 Tjekkiet 274,3 0,99-1 0,4222 15 Slovakiet 274,0 0,62-1 0,1621 16 Østrig 273,7 0,80-2 0,1275 17 Sydkorea 273,2 0,58-2 0,0193 18 Cypern 270,1 0,78-5 0,0000 19 Irland 267,5 0,92-8 0,0000 20 Polen 266,9 0,61-8 0,0000 21 Spanien 254,8 0,71-20 0,0000 22 Italien 252,8 1,13-22 0,0000 22
Læsefærdigheder. 16-65-årige ikke født i landet. Gns. score. Gns. score se diff P 1 Australien 271,3 1,63 34 0,0000 2 Slovakiet 268,3 4,41 31 0,0000 3 Tjekkiet 268,1 5,45 30 0,0000 4 Irland 262,8 2,02 25 0,0000 5 Cypern 259,7 2,69 22 0,0000 6 Estland 256,2 1,49 19 0,0000 7 Canada 255,9 1,33 18 0,0000 8 England & Nordirland 254,9 3,39 17 0,0000 9 Østrig 247,9 2,11 10 0,0003 Gennemsnit 247,7 0,75 10 0,0000 10 Holland 246,8 3,04 9 0,0109 11 Norge 245,4 2,55 8 0,0158 12 Belgien (Flandern) 241,7 3,31 4 0,2889 13 Tyskland 240,7 2,59 3 0,3414 14 Finland 239,5 4,13 2 0,6745 15 USA 239,4 3,09 2 0,6136 16 Danmark 237,6 1,96 17 Sydkorea 235,4 6,52-2 0,7475 18 Sverige 235,0 1,85-3 0,3321 19 Spanien 232,2 2,61-5 0,0970 20 Italien 228,2 3,42-9 0,0174 21 Polen - - - - 22 Japan - - - - 23
Læsefærdigheder blandt 16-65-årige i Danmark. Gennemsnitlig score 1998 2012 differenc e Alle 289,0 270,8-18,25 Alle født i landet 289,3 275,2-14,1 Aldersstandardiseret / født i landet 277,8-11,6 24
Ændringer i læsefærdigheder mellem 1994-1998 og 2011-2012 1994-1998 (IALS) 2011-2012 (PIAAC) Ændring fra 1994-1998 til 2011-2012 Gns. score se Gns. score se diff se p Sverige 294,6 1,13 279,2 0,68-15,3 1,32 0,0000 Norge 294,5 1,10 278,4 0,61-16,0 1,25 0,0000 Danmark 289,0 0,81 270,8 0,62-18,3 1,02 0,0000 Finland 287,5 0,86 287,5 0,67 0,1 1,08 0,9608 Tyskland 282,2 1,02 269,8 0,92-12,4 1,37 0,0000 Holland 281,3 0,76 284,0 0,71 2,7 1,04 0,0082 Canada 278,9 2,62 273,5 0,57-5,4 2,69 0,0426 Belgien (Flandern) 277,1 3,40 275,5 0,83-1,6 3,50 0,6454 Tjekkiet 276,8 1,03 274,0 0,98-2,8 1,43 0,0473 USA 273,4 1,38 269,8 1,05-3,6 1,73 0,0401 Australien 267,7 0,95 280,4 0,91 12,7 1,32 0,0000 England & Nordirland 266,4 1,66 272,5 1,02 6,0 1,95 0,0020 Irland 264,2 3,19 266,5 0,92 2,3 3,31 0,4826 Italien 243,5 1,83 250,5 1,09 7,0 2,13 0,0010 Polen 232,2 1,09 266,9 0,60 34,7 1,25 0,0000 25
Læsefærdigheder 1998 og 2011/12 Forklaring på udvikling: - Sammensætning af befolkningen - Vedligeholdelse og udvikling af læsefærdigheder: Læser vi mindre i dag? - OECD: Forsigtighed ved brug af IALS (1998-data) Yderligere analyser bør foretages 26
Basale færdigheder særskilt for køn. Gennemsnitlig score. 27
Basale færdigheder særskilt for alder. Gennemsnitlig score. 28
De 16-65 åriges færdigheder særskilt for uddannelsesniveau 29
Læsefærdigheder, uddannelse og alder 30
Procent med ringe IT-færdigheder (uden score+niveau 0) 31
De 16-65 åriges færdigheder særskilt for oprindelsesland 32
Indvandreres færdigheder Bedre færdigheder hvis: Indvandring i skole- eller førskolealder Længere opholdstid i Danmark Sprog talt i hjemmet = dansk 33
Personer med mindre gode færdigheder findes især blandt: Ældre: Personer i alderen 45-65 år Kortuddannede: Personer alene med grundskole Uddannelsespassive = ikke deltaget i uddannelse/kursus sidste 12 måneder Ikke-vestlige indvandrere Ikke-beskæftigede - ringe erhvervserfaring Ringe helbred Svag social baggrund 34
MEN: Gruppen med mindre gode færdigheder er blandet Eksempel: Af dem med læsefærdigheder på niveau 0/1 er: 26 pct. 16-24 år 73 pct. har dansk oprindelse 33 pct. har en erhvervsuddannelse (ungdomsuddannelse) 52 pct. er i beskæftigelse 45 pct. har meget godt/fremragende helbred 35
Konklusion Læsefærdigheder dårlig international placering IT-færdigheder: OK international placering, men mange på et lavt niveau Personer med ringe færdigheder findes i mange grupper Læring: Langt de fleste siger, at de kan lide det Alder og læring fra 30-40 års alderen: Ringere færdigheder, mindre læring, mindre VEU, mindre motivation for VEU Generations- eller alderseffekt? 36
Måling af færdigheder: Arbejdsdeling Lande (Danmark): Indsamling af spørgeskema og test-data fra respondenter. Data leveres til: PIAAC-Konsortium: Udvikling af test-teori og statistiske metoder. Beregning af færdigheds-scorer, der leveres til lande bl.a. Danmark 37
Måling af færdigheder: Vore data Fra PIAAC-konsortiet har vi fået: 10 scorer for hver respondent for hhv. læse-, regne- og IT-færdigheder, dvs. 30 score-værdier i alt Varierer mellem 0 og 500 Ikke en test-score 38
Måling af færdigheder: Usikkerhed Stikprøve usikkerhed: Årsag: Vi interviewer ikke hele befolkningen, men kun en stikprøve Måleusikkerhed: Årsag: Respondenter bruger kun en time på at løse en stikprøve af opgaver, men ikke fx 12 timer Usikkerheden har praktiske/økonomiske årsager 39