Hvordan kan man evaluere effekt?
|
|
- Marie Bjerre
- 8 år siden
- Visninger:
Transkript
1 Hvordan kan man evaluere effekt? Dato Dette notat giver en kort introduktion til to tilgange til effektevaluering, som er fremherskende på det sociale område: den eksperimentelle og den processuelle tilgang. Notatet forsøger desuden at afklare, hvornår man vælger den ene tilgang frem for den anden. Ref MN 1/6 1. To tilgange til effektevaluering Effektevaluering handler om at undersøge, hvilke effekter en specifik indsats har. Det handler altså om at vurdere, hvor gavnlig en bestemt indsats er for den målgruppe, som indsatsen er rettet mod. I evalueringslitteraturen findes to overordnede tilgange til effektevaluering, som adskiller sig fra hinanden, hvad angår både videnskabsteoretisk ophav samt brug af konkrete metoder. Den ene tilgang kan kaldes for en eksperimentel tilgang, og den anden en processuel tilgang. Særligt i USA har der inden for uddannelsesområdet været en heftig og til tider uforsonlig diskussion om, hvilken tilgang der bedst sandsynliggør indsatsers effekter. I den senere tid er der kommet større fokus på, at de to tilgange producerer forskellig viden om sammenhæng mellem indsats og effekt, og at man ud fra evalueringens undersøgelsesspørgsmål kan afgøre, hvilken tilgang der er mest hensigtsmæssig (Donaldson, Christie & Mark 2009). 2. Den eksperimentelle tilgang Den eksperimentelle tilgang er udviklet inden for medicinsk forskning og er først i slutningen af 60 erne i USA blevet anvendt på det sociale område. Den eksperimentelle tilgang til effektmåling er kendetegnet ved, at man skaber betingelser for et kontrafaktisk ræsonnement. Dvs., at man skal kunne afgøre, om indsatsen skaber et resultat, som ikke ville være indtruffet, hvis indsatsen ikke havde fundet sted. Man skal altså kunne skabe et setup, der gør det muligt at sammenligne Østbanegade 55, København Ø T E eva@eva.dk F H
2 effekten i en gruppe, der modtager indsatsen (indsatsgruppen), med effekten i en gruppe, der ikke modtager indsatsen (kontrolgruppen). Den store udfordring er at sikre sig mod selektionsskævhed, dvs. at sikre, at den forskel, man evt. ser i resultater i hhv. kontrolgruppe og indsatsgruppe, kun stammer fra indsatsen og ikke skyldes forskelle i forudsætningerne i de to grupper af personer. Overordnet set er der fire muligheder for at danne en kontrolgruppe: Via lodtrækning deles modtagerne op i indsatsgruppe og kontrolgruppe En udefrakommende hændelse skaber en tilfældigt udvalgt indsatsgruppe En grænseværdi på en kontinuer skala afgør, om deltagerne får indsatsen eller ej Kontrolgruppen dannes ved statistisk sammenligning med indsatsgruppen. Ofte vil man tjekke mulighederne fra toppen af listen, da sikkerheden for at undgå selektionsskævhed i indsatsgruppen mindskes, jo længere ned på listen man bevæger sig. Disse fire måder at danne kontrolgruppe på svarer til hver sin effektmålingsmetode: lodtrækningsforsøg (RCT), naturligt eksperiment, regression discontinuity design (RDD) og matching (Shadish, Cook & Campbell 2002). 2/6 3. Den processuelle tilgang Den processuelle tilgang til effekt er blandt andet beskrevet af de britiske evalueringsforskere Nick Tilley og Ray Pawson i bogen Realistic Evaluation (1997). I Danmark har evalueringsforskeren Peter Dahler-Larsen i samarbejde med Hanne Katrine Krogstrup udviklet en tilgang, der kaldes virkningsevaluering, som i høj grad er inspireret af realistic evaluation (Dahler-Larsen & Krogstrup 2003). Det, der kendetegner den processuelle tilgang, er, at man ikke forsøger at opstille en kontrolgruppe, men i stedet opstiller en teori, der forklarer, hvorfor indsatsen kan tænkes at give resultater. Man starter altså med at sandsynliggøre vejen fra indsats til resultat med en såkaldt programteori. Bagefter forsøger man at teste hvert enkelt led i programteorien med data. Data kan være både kvantitative og kvalitative, alt efter hvad der egner sig bedst til at undersøge de enkelte led i programteorien. Evaluators opgave er herefter at analysere de samlede data og vurdere, om det er sandsynligt, at det ene led fører til det næste. En grundantagelse inden for den processuelle tilgang til effekt er, at effekterne af en indsats er stærkt kontekstafhængige. Selv hvis indsatsen er implementeret korrekt, vil man se en variation, fordi der findes virkningsmekanismer, som bliver udløst i nogle kontekster og ikke i andre. En meget væsentlig del af analysen er derfor at
3 undersøge, hvordan forskellige kontekstfaktorer spiller ind på kausale relationer mellem de enkelte led i programteorien. 4. Valg af tilgang Inden valg af tilgang er det blandt andet vigtigt at gøre sig klart, om man først og fremmest er interesseret i at fastslå, om en indsats har en effekt, eller om det mest interessante spørgsmål handler om at forstå, hvorfor en indsats har en effekt eller ej i en given kontekst. Det første er som regel mest interessant, hvis man overvejer helt at droppe (eller at indføre) en indsats mens det andet spørgsmål oftest er mest interessant, hvis man gerne vil revidere og forbedre indsatsen. Hvis man først og fremmest er interesseret i at kunne sige med en vis præcision, om A påvirker B dvs., om en velafgrænset indsats påvirker et veldefineret måleligt resultat er den eksperimentelle tilgang at foretrække. Denne tilgang giver ingen forståelse af, hvorfor indsatsen har effekt eller ej, men den eksperimentelle tilgang er den sikreste vej til at konstatere, om indsatsen har en effekt. Hvis det derimod er vigtigst at forstå indsatsens måde at virke på i en konkret sammenhæng, er det mere relevant at tage afsæt i den processuelle tilgang til at studere effekter. Den processuelle tilgang giver viden om, hvordan man bør justere indsatsen, hvilket er oplagt at gøre, hvis indsatsen på forhånd er givet, fx pga. lovgivning. 3/6 Man skelner altså mellem to typer viden: 1) Vil man undersøge, om indsatsen har effekt eller ej, fordi man overvejer at droppe, udrulle eller indføre indsatsen, bør man undersøge mulighederne for at bruge den eksperimentelle tilgang. 2) Vil man forstå, hvornår og hvordan indsatsen påvirker eller ikke påvirker et resultat, fordi man vil forbedre og justere indsatsen (men selve indsatsen er givet), bør man undersøge mulighederne for at bruge den processuelle tilgang. 5. Evidenshierarki? Kan man sige, hvilken metode der generelt er bedst til at undersøge effekter? Ja og nej! Hvis man mener, hvilken metode der sikrest kan besvare det smalle effektspørgsmål, dvs. Har A en effekt på B?, så er der inden for den eksperimentelle tilgang et klart hierarki som bestemmes af, hvor godt metoderne tager højde for selektionsskævhed i indsatsgruppen. Dette kriterium placerer det randomiserede, kontrollerede forsøg (RCT) i toppen.
4 Men i praksis er der andre forhold end de rent metodiske, der kan begrunde, at metoderne længere nede i hierarkiet er det bedste valg. Selvom forudsætningerne for RCT eksempelvis kan tilvejebringes, er det ikke sikkert, at det er muligt/ønskeligt at bruge den tid eller de ressourcer, det kræver. Der kan også være etiske begrundelser for at gå andre veje end at bruge RCT. Men rent metodisk er der altså et hierarki inden for de metoder, der knytter sig til den eksperimentelle tilgang. Men er der også et hierarki mellem de eksperimentelle effektmålingsmetoder og de processuelle, programteoretiske tilgange til at studere effekter? Dette notat er skrevet med det udgangspunkt, at det ikke giver mening at rangordne metoder, der baserer sig på de to forskellige tilgange til effekt, fordi det netop er forskellige typer spørgsmål, de er egnede til at besvare, og forskellig slags viden, de producerer. Mens den eksperimentelle tilgang kan give et kvantitativt mål for styrken af en kausalrelation, kan den processuelle tilgang bidrage til forståelse og forklaring af en sådan sammenhæng (eller fravær af samme). Den processuelle tilgang kan blandt andet besvare spørgsmålene: Hvilke led består vejen fra indsats til resultat af? Hvordan varierer resultatet alt efter hvordan indsatsen implementeres, og hvilken kontekst den foregår i? Hvordan skal man justere indsatsen, så den virker bedre? 4/6 Med den processuelle tilgang får man altså ikke et entydigt mål for styrken af kausalrelationen, men en viden, som kvalificerer forståelsen af, hvornår og hvordan sammenhængen mellem indsats og resultat opstår i en lokal kontekst. Derfor er udgangspunktet i dette notat også, at der kan være god ræson i at kombinere de to tilgange snarere end at se dem som tilgange, der udelukker hinanden. I skema på næste side er de tilgange, som vi har behandlet her, opsummeret og ordnet efter den type af spørgsmål, de er egnede til at besvare.
5 Effektspørgsmål Har A en effekt på B? Ad hvilke veje påvirker A i en specifik kontekst B? Tilgang Metode Effektræsonnement Eksperimentelle Randomiserede, metoder kontrollerede Kan give et præcist svar på styrken af kausalrelationen Kvasieksperimentelle metoder Processuel tilgang forsøg Naturligt eksperiment Regression discontinuity design Matching Regressionsanalyse Realistic evaluation Virkningsevaluering Theory of change Contribution analysis osv. Kontrafaktisk ræsonnement: tilstræber at kunne sammenligne med, hvad der var sket med målgruppen, hvis den ikke havde været udsat for indsatsen Processuelt ræsonnement: tilstræber at forstå den måde, A påvirker B på og derigennem sandsynliggøre kausalrelationen Viden Kan identificere, hvor kæden hopper af på vejen mellem indsats og resultat Kan identificere mønstre mellem lokal indsats, kontekst og resultat 5/6 Referencer: Dahler-Larsen, P. & Krogstrup, H.K. (2001). Nye veje i evaluering. Håndbog i tre evalueringsmodeller. Aarhus: Academica Pawson, R. & Tilley, N. (1997). Realistic Evaluation. London: Sage Donaldson, Steward I., Christie, Christina A. & Melvin M. Mark (2009). What counts as Credible Evidence in Applied Research and Evaluation Practice? Thousand Oaks: Sage Shadish, W.R., Cook, T.D. & Campbell, D.T. (2002). Experimental and Quasi- Experimental Designs for Generalized Causal Inference. Boston: Houghton-Mifflin
6 6/6
Effektmålinger på kommunalt niveau. Ane Andersen Institut for Design og Kommunikation Billund ErhvervsFremme
+ Effektmålinger på kommunalt niveau Ane Andersen Institut for Design og Kommunikation Billund ErhvervsFremme + Disposition Hvad er en effekt og hvorfor måle dem? Udfordringer på et kommunalt niveau 2
Læs mereSeminar i forskningsnetværket Etniske Minoriteters Sundhed d. 24. maj 2011 Susan Andersen
Effektevaluering hvorfor og hvordan? Seminar i forskningsnetværket Etniske Minoriteters Sundhed d. 24. maj 2011 Susan Andersen Kandidat i folkesundhedsvidenskab Siden november 2010 ansat på projekt Trivsel,
Læs mereEvaluering. Kolding 9. juni 2011 Professor Peter Dahler-Larsen, PhD Institut for Statskundskab Syddansk Universitet, Odense
Evaluering Kolding 9. juni 2011 Professor Peter Dahler-Larsen, PhD Institut for Statskundskab Syddansk Universitet, Odense Evalueringens Bermuda-trekant: Evaluering Systematisk, metodisk Vurdering af Ide,
Læs mereSundhedsfremme, evidens og evaluering
Sundhedsfremme, evidens og evaluering Sund By Netværket Temadag om Dokumentation og Evaluering 2. November 2016 Professor Peter Dahler-Larsen Institut for Statskundskab, KU Efterspørgsel efter viden om
Læs mereVirkningsevaluering i praksis Erfaringer og udfordringer
Virkningsevaluering i praksis Erfaringer og udfordringer Specialkonsulent Eva Pallesen Metodekonsulent Niels M. Søndergaard Danmarks Evalueringsinstitut Parallelsession 2,3. DES-konference 11. september
Læs mereHVAD VIRKER I SOCIAL FOREBYGGELSE? METTE DEDING, SFI CAMPBELL
HVAD VIRKER I SOCIAL FOREBYGGELSE? METTE DEDING, SFI CAMPBELL DISPOSITION 1. INTRODUKTION 2. EFFEKTMÅLING RANDOMISEREDE KONTROLLEREDE FORSØG 3. VIDEN FRA DANMARK OG SKANDINAVIEN 4. EFFEKTMÅLING I TIDEN
Læs merePh.d.-projekt: Virkningsevaluering af beskæftigelsesindsatser for aktivitetsparate ledige - Hvad virker for hvem under hvilke omstændigheder?
Ph.d.-projekt: Virkningsevaluering af beskæftigelsesindsatser for aktivitetsparate ledige - Hvad virker for hvem under hvilke omstændigheder? Indledning Thisted Kommune og Aalborg Universitet har igangsat
Læs mereVIDEN PÅ TVÆRS AF EFFEKTDESIGN METTE DEDING, SFI CAMPBELL
VIDEN PÅ TVÆRS AF EFFEKTDESIGN METTE DEDING, SFI CAMPBELL PRIMÆR VS. SEKUNDÆR EFFEKTFORSKNING Primær effektforskning Studium af grunddata. Undersøgelsesdesign afhænger af problemstilling og datamuligheder.
Læs mereBilag 1 - Projektbeskrivelse
Bilag 1 - Projektbeskrivelse Undervisningsevaluering og virkningsevaluering af MED-grunduddannelsen Parternes Uddannelsesfællesskab (PUF), som består af KL, Danske Regioner og Forhandlingsfællesskabet,
Læs mereTemadag om evaluering - Branchemiljørådene
Temadag om evaluering - Branchemiljørådene Hvordan kan BAR og andre aktører dokumentere effekter af sine aktiviteter? Flemming Pedersen EFFEKTEVALUERING KAN VI DET? Ønsket om at dokumentere indsatser fører
Læs mereVIRKNINGER I SYGEDAGPENGEINDSATSEN. Oplæg til AM14 Stella Mia Sieling-Monas (stms@dps.aau.dk) Aalborg Universitet
VIRKNINGER I SYGEDAGPENGEINDSATSEN Oplæg til AM14 Stella Mia Sieling-Monas (stms@dps.aau.dk) Aalborg Universitet Hvad virker i sygedagepengeindsatsen? Kort om oplægsholder & Ph.d.-projekt. Opstart 2013.
Læs mereALTERNATIVER TIL RANDOMISEREDE KONTROLLEREDE FORSØG: Mikro-økonometriske metoder. Jan Høgelund
ALTERNATIVER TIL RANDOMISEREDE KONTROLLEREDE FORSØG: Mikro-økonometriske metoder Jan Høgelund INDHOLD Introduktion Skitsering af udvalgte metoder med eksempler, styrker og svagheder Regressionsanalyse
Læs mereStrategi for forsøg og udvikling i Undervisningsministeriet
Strategi for forsøg og udvikling i Undervisningsministeriet Forord I Undervisningsministeriet (UVM) arbejder vi for, at: Alle elever og kursister skal blive så dygtige, som de kan. Uddannelserne skal
Læs mereHVAD ER EN EFFEKTMÅLING? Mette Deding
HVAD ER EN EFFEKTMÅLING? Mette Deding TILFREDSHEDSUNDERSØGELSER OG EFTERMÅLINGER 90% af dem, der modtog behandlingen var tilfredse eller meget tilfredse men det siger ikke noget om effekten 75% af dem,
Læs mereByg bro mellem aktiviteter og resultater
Byg bro mellem aktiviteter og resultater Introduktion til indsatsteori som værktøj til kvalificering af erhvervsskolernes handlingsplaner for øget gennemførelse Byg bro mellem aktiviteter og resultater
Læs mereConnie Nielsen Peter Thisted Dinesen Lars Benjaminsen Jens Bonke INTRODUKTION TIL EFFEKT- MÅLING AF SATSPULJEPROJEKTER
Connie Nielsen Peter Thisted Dinesen Lars Benjaminsen Jens Bonke INTRODUKTION TIL EFFEKT- MÅLING AF SATSPULJEPROJEKTER INTRODUKTION TIL EFFEKTMÅLING AF SATSPULJEPROJEKTER Peter Thisted Dinesen Connie Nielsen
Læs mereEffektmåling 1. Mere attraktive almene boliger?
Effektmåling 1 Mere attraktive almene boliger? Effektevaluering af Omprioriteringsloven 2000 Effektmålinger Formål med pjecerne Der er i dag et stigende fokus på effekterne af de offentlige indsatser,
Læs mereEn farbar vej mellem skyttegravene? Øvelser i integration af effektevaluering og programteori
En farbar vej mellem skyttegravene? Øvelser i integration af effektevaluering og programteori Thomas Bredgaard, lektor, ph.d. Julia Salado-Rasmussen, ph.d.-stipendiat Stella Mia Sieling, ph.d.-stipendiat
Læs mereEVALUERING AF BOLIGSOCIALE AKTIVITETER
Guide EVALUERING AF BOLIGSOCIALE AKTIVITETER Det er rart at vide, om en aktivitet virker. Derfor følger der ofte et ønske om evaluering med, når I iværksætter nye aktiviteter. Denne guide er en hjælp til
Læs mereEFFEKTMÅLING AF SOCIALE INDSATSER
EFFEKTMÅLING AF SOCIALE INDSATSER MAIKEN PONTOPPIDAN SFI DET NATIONALE FORSKNINGSCENTER FOR VELFÆRD MEGET BRUGTE ORD Effekt Evidens Dokumentation Krav om effekt og dokumentation fylder meget i kommuner,
Læs merePublikationen er udgivet af Socialstyrelsen Edisonsvej Odense C Tlf:
Retningslinjer for effektviden i Den Socialøkonomiske Investeringsmodels (SØM) vidensdatabase april 2019 Publikationen er udgivet af Socialstyrelsen Edisonsvej 1 5000 Odense C Tlf: 72 42 37 00 E-mail:
Læs mereRealistisk evaluering: Et supplement eller et alternativ til effektevaluering?
Early view 2018 Realistisk evaluering: Et supplement eller et alternativ til effektevaluering? Ph.d.-stipendiat, Institut for Statskundskab, Aalborg Universitet Resumé: Til at undersøge effekter anses
Læs mereRANDOMISEREDE FORSØG:
RANDOMISEREDE FORSØG: HVAD, HVORFOR & HVORDAN? HELLE HANSEN METTE DEDING PROGRAM 13.00-13.45 Velkomst Hvad er randomiserede kontrollerede forsøg? Randomiserede forsøg historisk set Hvorfor gennemføre RCT-studier?
Læs mereEVALUERINGS- MODELLER OG METODER NETE KROGSGAARD NISS, SENIORKONSULENT, SFI
EVALUERINGS- MODELLER OG METODER NETE KROGSGAARD NISS, SENIORKONSULENT, SFI PLAN 1. Intro til evaluering 2. Formål/anvendelse 3. Konkrete evalueringsmodeller og metoder i en klinisk undervisningskontekst
Læs mereHvorfor skændes vi? - Positioner i evidensdebatten
Hvorfor skændes vi? - Positioner i evidensdebatten ved Professor Hanne Kathrine Krogstrup, Dekan ved Det Samfundsvidenskabelige Fakultet, Aalborg Universitet SFI-konference, Det svære evidensbegreb 26.2.2013
Læs mereHjemmeopgave. Oplæg ved Elvi Weinreich. Afleveres af de enkelte ledelsesteam mundtligt d. 9 februar Ledelse & Organisation/KLEO
Hjemmeopgave Oplæg ved Elvi Weinreich Afleveres af de enkelte ledelsesteam mundtligt d. 9 februar 2016 Hjemmeopgaven Udarbejdelse af handling / programteori og effektevaluering (realitetstestning) af indsats
Læs mereStofmisbrug -bedre behandling til færre penge Munkebjerg 20-21. marts 2012
Stofmisbrug -bedre behandling til færre penge Munkebjerg 20-21. marts 2012 Professor Hanne Kathrine Krogstrup Det Samfundsvidenskabelige Fakultet Aalborg Universitet Stofmisbrug Bedre behandling for færre
Læs mereOrdbog om effektma ling
Ordbog om effektma ling Indhold Allokering... 2 Andre forskningsdesign med kontrolgruppe... 2 Andre forskningsdesign uden kontrolgruppe... 2 Campbell-samarbejdet... 3 Dokumentation... 3 Effektmåling...
Læs mereHvordan isolerer vi sammenhængen mellem indsats og resultat? Propensity score matching som metode til effektevaluering
Hvordan isolerer vi sammenhængen mellem indsats og resultat? Propensity score matching som metode til effektevaluering Niels Matti Søndergaard Metodekonsulent Danmarks Evalueringsinstitut (EVA) Rasmus
Læs mereVirkningsevaluering en metode til monitorering og evaluering af patientuddannelse. Michaela Schiøtz Cand.scient.san.publ., Ph.d.
Virkningsevaluering en metode til monitorering og evaluering af patientuddannelse Michaela Schiøtz Cand.scient.san.publ., Ph.d. Agenda 1 Hvordan forstås forandringer? Hvad er virkningsevaluering? Køreplan
Læs mereArtikler
1 af 5 09/06/2017 13.54 Artikler 25 artikler. viden Generel definition: overbevisning, der gennem en eksplicit eller implicit begrundelse er sandsynliggjort sand dokumentation Generel definition: information,
Læs mereBRUG AF FORANDRINGSTEORI
BRUG AF FORANDRINGSTEORI PLAN Forandringsteori Virkningsevaluering Gruppearbejde med case Lidt om: Moderatorer Indikatorer og deres kvalitet 21-04-2016 2 HVORFOR BRUGE FORANDRINGSTEORI? Som supplement
Læs mereVidensbegreber vidensproduktion dokumentation, der er målrettet mod at frembringer viden
Mar 18 2011 12:42:04 - Helle Wittrup-Jensen 25 artikler. Generelle begreber dokumentation information, der indsamles og organiseres med henblik på nyttiggørelse eller bevisførelse Dokumentation af en sag,
Læs mereProjektbeskrivelse. Effekter af 10. klasse - Del 3 af evalueringen af 10. klasse
Projektbeskrivelse Effekter af 10. klasse - Del 3 af evalueringen af 10. klasse Undervisningen i 10. klasse er et uddannelsestilbud til alle skoleelever i Danmark. Fra skoleåret 2008/09 har den politiske
Læs mereForandringsteori og virkningsevaluering. Nete K. Niss, Chefanalytiker, Oxford Research 21/
Forandringsteori og virkningsevaluering Nete K. Niss, Chefanalytiker, Oxford Research 21/11-2018 Plan Forandringsteori Virkningsevaluering Gruppearbejde med case Lidt om: Moderatorer Indikatorer og deres
Læs mereMetodedebatten om evidens
Metodedebatten om evidens Temadagen Evidensbaseret biblioteksudvikling d. 30/3-2011. Olaf Rieper Forskningschef i AKF Anvendt KommunalForskning www.akf.dk Oplæggets struktur Begrebet evidens Evidensdebattens
Læs mereUdfordringer på evalueringsfronten i Danmark. Olaf Rieper forskningschef AKF Anvendt Kommunal Forskning
Udfordringer på evalueringsfronten i Danmark Olaf Rieper forskningschef AKF Anvendt Kommunal Forskning Tanker om titlen Udfordringer i to betydninger: Hvilke krav og forudsætninger stiller udviklingen
Læs mereDILEMMAERNE I LODTRÆKNINGSFORSØG - PÅ DET SOCIALE OMRÅDE MAIKEN PONTOPPIDAN, SFI INGE HAUCH, HOLSTEBRO KOMMUNE
DILEMMAERNE I LODTRÆKNINGSFORSØG - PÅ DET SOCIALE OMRÅDE MAIKEN PONTOPPIDAN, SFI INGE HAUCH, HOLSTEBRO KOMMUNE DISPOSITION Præsentation af deltagere RCT og etiske dilemmaer - Maiken Praktiske erfaringer
Læs mereEvaluering og implementering
Evaluering og implementering Specialuddannelsen for psykiatrisk sygepleje Jesper Buchholdt Gjørup 8. og 9. marts 2018 Formålet med undervisningen at bidrage til at implementere uddannelsesordningen for
Læs mereKvantitative evidensbaserede metoder, hvordan?
Kvantitative evidensbaserede metoder, hvordan? Det er vigtigt at evaluere sociale indsatser. Ikke mindst for at kunne kortlægge, hvordan de deltagende i diverse indsatser bliver hjulpet, men også til at
Læs mereRANDOMISEREDE FORSØG:
RANDOMISEREDE FORSØG: HVAD, HVORFOR & HVORDAN? MAIKEN PONTOPPIDAN Ph.d. studerende, Public Health SFI og KU Børn og Familie EFFEKTSTIGEN 2 HVORFOR RCT? Det bedste design til effektmåling Pga. den tilfældige
Læs mereHvad virker for hvem på beskæftigelsesområdet? Hvordan kan det måles og evalueres?
Hvad virker for hvem på beskæftigelsesområdet? Hvordan kan det måles og evalueres? Thomas Bredgaard, lektor, ph.d. Julia Salado-Rasmussen, ph.d.-stipendiat Stella Mia Sieling, ph.d.-stipendiat FORSA Årsmøde,
Læs mereEffektmåling. Ulf Hjelmar. Workshop. forskningsprogramleder Anvendt KommunalForskning (AKF)
Effektmåling Workshop Ulf Hjelmar forskningsprogramleder Anvendt KommunalForskning (AKF) www.akf.dk Agenda 1. Hvordan skabes en god evalueringspraksis, så man i højere grad kan dokumentere og sammenligner
Læs mereKapitel 12. Virkningsevaluering (Thomas Bredgaard, Julia Salado- Rasmussen og Stella Mia Sieling-Monas)
Under udgivelse i T. Bredgaard, red. Evaluering af offentlig politik og organisationer, Hans Reitzels forlag (udkommer primo 2016) Kapitel 12. Virkningsevaluering (Thomas Bredgaard, Julia Salado- Rasmussen
Læs mereEvaluering kom ind i dansk sprogbrug fra slutningen af 60erne via det amerikanske ord evaluation.
Evaluering Evaluering kom ind i dansk sprogbrug fra slutningen af 60erne via det amerikanske ord evaluation. En skal for det første tilvejebringe informationer, der kan danne grundlag for beslutninger
Læs mereLånesparekasser i Malawi: et RCT projekt
Lånesparekasser i Malawi: et RCT projekt Helene Bie Lilleør Selskab for Surveyforskning 15. september, 2011 Om evaluering af sociale interventioner Medicinske vs. samfundsfaglige evalueringsmetoder Evalueringer
Læs merekl. 14.30-16.00 Torsdag d. 1. oktober 2015
Workshop 1 kl. 14.30-16.00 Torsdag d. 1. oktober 2015 Stella Mia Sieling-Monas, Ph.d.-stipendiat, Institut for Statskundskab, Aalborg universitet stms@dps.aau.dk Kontroverser i forskning i socialt arbejde
Læs mereINTRODUKTION TIL KVANTITATIV EVALUERING. Helle Hansen, SFI Tine Lesner, Socialstyrelsen
INTRODUKTION TIL KVANTITATIV EVALUERING Helle Hansen, SFI Tine Lesner, Socialstyrelsen PROGRAM 10.00-10.45 Velkomst Hvad er randomiserede kontrollerede forsøg? - Når det går godt og når det går knap så
Læs mereEffekter af fondsprojekter og regionale mål af Karin Jørgensen, KRU, Region Hovedstaden og Maria Rye Dahl, DAMVAD
Effekter af fondsprojekter og regionale mål af Karin Jørgensen, KRU, Region Hovedstaden og Maria Rye Dahl, DAMVAD Sessionens program Præsentation og formål Stigende fokus på evaluering af resultater og
Læs mereOLE WINCKLER ANDERSEN
STUDIER I GLOBA L POLITIK OG SIKK ER HED HJÆLPER VI? EN INTRODUKTION TIL OLE WINCKLER ANDERSEN EVALUERING AF EVA BROEGAARD UDVIKLINGSBISTAND JENS KOVSTED J U R I S T- O G Ø K O N O M F O R B U N D E T
Læs mereHvordan måler vi effekten af forebyggelse? Ulf Hjelmar
Hvordan måler vi effekten af forebyggelse? Ulf Hjelmar forskningsprogramleder Anvendt KommunalForskning (AKF) www.akf.dk Agenda 1. Hvordan måles effekt? 2. Effekt af forebyggende hjemmebesøg 3. Opsummering
Læs mereEvalueringsguide. Fase 1: Opstart af evalueringsindsats Indledningsvis kan man med fordel stille følgende spørgsmål til projektet:
Evalueringsguide Denne guide er udarbejdet af Region Sjælland, Regional Udvikling, som inspiration til at evaluere og effektmåle projekter gennemført med tilskud fra de regionale udviklingsmidler. Evalueringsguiden
Læs mereSamarbejde om elevernes læring og trivsel En guide til at styrke samarbejdet mellem forvaltning og skoleledelse
Samarbejde om elevernes læring og trivsel En guide til at styrke samarbejdet mellem forvaltning og skoleledelse Indhold 3 Hvorfor denne guide? 4 Data bedre data frem for mere data 7 SKOLE 2 12 4 10 6 Sparring
Læs mereHvordan ved vi om vi hjælper? Effekt- og virkningsevaluering af udviklingsbistand
Enhedens navn Hvordan ved vi om vi hjælper? Effekt- og virkningsevaluering af udviklingsbistand Eva Broegaard Ninja Klejnstrup Særlig tak til: Ole Winckler Andersen, Danida/OECD Henrik Hansen, Institut
Læs mereDet da evident! Evidensbaserede indsatser har længe været på dagordenen. EVIDENS Af Sine Møller
EVIDENS Af Sine Møller Det da evident! Uden dokumentation for effekten risikerer vi, at behandlingen enten ikke virker eller gør mere skade end gavn, påpeger psykolog i Socialstyrelsen. Vi får aldrig garantier,
Læs mereKommunale data og økonomiske analyser Hvilke muligheder er der i de kommunale data for at måle effekt (og omkostningseffektivitet?
Kommunale data og økonomiske analyser Hvilke muligheder er der i de kommunale data for at måle effekt (og omkostningseffektivitet?) Professor Dorte Gyrd-Hansen Leder, Center for Sundhedsøkonomisk Forskning
Læs mereEVALUERINGSTEORI LÆRINGSSEMINAR, DES-KONFERENCEN 2011 BENTE BJØRNHOLT OG CARSTEN STRØMBÆK PEDERSEN
EVALUERINGSTEORI LÆRINGSSEMINAR, DES-KONFERENCEN 2011 BENTE BJØRNHOLT OG CARSTEN STRØMBÆK PEDERSEN PROGRAMMET I DAG 1. Introduktion 2. EvalueringsteoriER ikke bare én men mange 3. Evalueringsplanen og
Læs mereDEN KOMMUNALE INDASTS OVERFOR DE SVAGE LEDIGE
DEN KOMMUNALE INDASTS OVERFOR DE SVAGE LEDIGE DISPOSITION EN UNDERSØGELSE OM BESKÆFTIGELSESPOLITISKE TILTAG OVERFOR SVAGE LEDIGE Veje til beskæftigelse. En kvalitativ undersøgelse af sagsbehandlernes forestillinger
Læs mereProgramteori: Fra indsats til virkning
Programteori: Fra indsats til virkning Rikke Krølner rkr@niph.dk Adjunkt, centerkoordinator Ph.d., cand.scient.san.publ. Center for Interventionsforskning Forskningsprogrammet for Børn og Unges Sundhed
Læs mereEffektmåling 2. Hurtigt i gang. Evaluering af et forsøg med en tidlig og intensiv beskæftigelsesindsats
Effektmåling 2 Hurtigt i gang Evaluering af et forsøg med en tidlig og intensiv beskæftigelsesindsats Effektmålinger Formål med pjecerne Der er i dag et stigende fokus på effekterne af de offentlige indsatser,
Læs mereInspirationsmateriale fra anden type af organisation/hospital. Metodekatalog til vidensproduktion
Inspirationsmateriale fra anden type af organisation/hospital Metodekatalog til vidensproduktion Vidensproduktion introduktion til metodekatalog Viden og erfaring anvendes og udvikles i team. Der opstår
Læs mereDIO. Faglige mål for Studieområdet DIO (Det internationale område)
DIO Det internationale område Faglige mål for Studieområdet DIO (Det internationale område) Eleven skal kunne: anvende teori og metode fra studieområdets fag analysere en problemstilling ved at kombinere
Læs mereBibDok. Guide til BibDok. En metode til at dokumentere effekt af bibliotekets indsatser
BibDok En til at dokumentere effekt af bibliotekets er Guide til BibDok BibDok understøtter en systematisk refleksiv praksis. Det er derfor væsentligt, at I følger guiden trin for trin. 1. Sammenhæng mellem
Læs mereFRIT VALG PÅ ALLE HYLDER? OM AT VÆLGE EVALUERINGSMODEL MED OMHU
FRIT VALG PÅ ALLE HYLDER? OM AT VÆLGE EVALUERINGSMODEL MED OMHU T H OMAS BREDGAARD & J U L I A S A L A D O - R A S M U S SEN D E S GÅ- H J E M - M Ø D E, K O R A, Å R H U S 2 6 O K T O B E R 2 0 1 6 Dagens
Læs mereHVAD HJÆLPER DE SYGEMELDTE? - EN EVALUERING AF BESKÆFTIGELSESINDSATSEN PÅ SYGEDAGPENGEOMRÅDET
HVAD HJÆLPER DE SYGEMELDTE? - EN EVALUERING AF BESKÆFTIGELSESINDSATSEN PÅ SYGEDAGPENGEOMRÅDET DES Årskonference 2015 Stella Mia Sieling-Monas (stms@dps.aau.dk) Aalborg Universitet www.hvadvirkerforhvem.wordpress.com
Læs mereNy Nordisk Skole. Arbejdshæfte til forandringsteori
Ny Nordisk Skole Arbejdshæfte til forandringsteori Introduktion Ny Nordisk Skole handler om at styrke dagtilbud og skoler, så de har de bedste forudsætninger for at give børn og unge et fagligt løft. Dette
Læs mereMetoder og struktur ved skriftligt arbejde i idræt.
Metoder og struktur ved skriftligt arbejde i idræt. Kort gennemgang omkring opgaver: Som udgangspunkt skal du når du skriver opgaver i idræt bygge den op med udgangspunkt i de taksonomiske niveauer. Dvs.
Læs mereProjektmodel med indsatsteori
Projektmodel med indsatsteori Guide til systematisk udviklingsarbejde i dagtilbud, skole og SFO Dette notat giver inspiration til hvordan kommuner kan iværksætte systematisk udviklingsarbejde i et tværgående
Læs mereTIDSSKRIFT FDR EVALUERING I PRAKSIS NR.13 DECEMBER 12. I. d. LOV - en strategi for å fremme læring. Design i evaluering
TIDSSKRIFT FDR EVALUERING I PRAKSIS NR.13 DECEMBER 12 I. d LOV - en strategi for å fremme læring Design i evaluering Anmeldt af ledelses Egon Petersen Hanne Kathrine Krogstrup konsulent EP-[onsultlng,
Læs mereEVIDENSBASERET COACHING
EVIDENSBASERET COACHING - SAMTALER BASERET PÅ DEN BEDST TILGÆNGELIGE VIDEN VED FORMAND FOR SEBC, EBBE LAVENDT STIFTER@SEBC.DK, WWW.EVIDENSBASERETCOACHING.DK Der vil være en times forelæsning efterfulgt
Læs mereEtibaprojektet. Design,problemstillinger og analyse
Etibaprojektet Kjeld Høgsbro, AKF Betty Nørgaard Nielsen, MC ETIBA: En forskningsbaseret evaluering af rehabiliterings- og træningsindsatsen for børn med autisme, herunder evaluering af behandlingsmetoden
Læs mereMIDTVEJSEVALUERING 20 SAMARBEJDSKOMMUNER TEMADAG: 20 SAMARBEJDSKOMMUNER 2015/05/07
MIDTVEJSEVALUERING 20 SAMARBEJDSKOMMUNER 01 02 03 Dagsorden 01 Hvorfor en midtvejsevaluering? 02 Refleksioner og anbefalinger til det fremadrettede arbejde 03 Spørgsmål HVORFOR EN MIDTVEJSEVALUERING? HVAD
Læs mereFra regnskapspligt og resultatstyring til opbygning af evalueringskapacitet
Fra regnskapspligt og resultatstyring til opbygning af evalueringskapacitet Professor Peter Dahler-Larsen, PhD Institut for Statskundskab, Københavns Universitet Disposition Evalueringskapacitet i kontekst
Læs mereOm evaluering af projekter og programteori
Om evaluering af projekter og programteori Søren Andkjær, Lektor Ph.d. Trine Top Thagaard Wengel, Videnskabelig Ass. Forskningsenheden Active Living Institut for Idræt og Biomekanik, Syddansk Universitet
Læs mereForskning og evidens i dagtilbud En guide til at vurdere viden om dagtilbud
Forskning og evidens i dagtilbud En guide til at vurdere viden om dagtilbud Indhold 3 Introduktion 4 Hvad er forskning af høj kvalitet og evidens om dagtilbud? 8 Evidensbaserede programmer 10 Vurdér forskningens
Læs mereAnalyse af virkninger af den teknologiske udvikling - Review af effektstudier
Projektsbekrivelse Analyse af virkninger af den teknologiske udvikling - Review af effektstudier Disruptionrådets sekretariat Den 28. juni 2017 J.nr. Der ønskes en analyse af effekterne af den teknologiske
Læs mereEvaluering af "Flere i job og Uddannelse" - Hjørring Kommunes investering i arbejdsrettet rehabilitering
Ph.d.-projektbeskrivelse Evaluering af "Flere i job og Uddannelse" - Hjørring Kommunes investering i arbejdsrettet rehabilitering Rasmus Ravn, ph.d.-studerende Aalborg Universitet, Institut for Statskundskab
Læs mereNOTAT Stress og relationen til en række arbejdsmiljødimensioner
Louise Kryspin Sørensen Oktober 2016 NOTAT Stress og relationen til en række arbejdsmiljødimensioner DSR har i foråret 2015 indhentet data om sygeplejerskers psykiske arbejdsmiljø og helbred. I undersøgelsen
Læs mereEvaluering af virkemidler i arbejdsmiljøindsatsen
Evaluering af virkemidler i arbejdsmiljøindsatsen Arbejdsmiljøkonferencen D. 11. november 2013 Hans Jørgen Limborg Partner Teamarbejdsliv Peter Hasle Professor Aalborg Universitet Efter et langt liv som
Læs mereEFFEKT OG EVIDENS: HVAD, HVORFOR OG HVORDAN? HELLE HANSEN NETE KROGSGAARD NISS
EFFEKT OG EVIDENS: HVAD, HVORFOR OG HVORDAN? HELLE HANSEN NETE KROGSGAARD NISS RAMMEN FOR FØRSTE DEL AF OPLÆGGET Et overordnet perspektiv på effektmåling Forklaring af begreber Hvordan kan man måle effekt
Læs mereMETODEEVALUERING AF JOBKONSULENTINDSATSEN FOR FLYGTNINGE OG INDVANDRERE I ÅRHUS KOMMUNE 2009
METODEEVALUERING AF JOBKONSULENTINDSATSEN FOR FLYGTNINGE OG INDVANDRERE I ÅRHUS KOMMUNE 2009 AALBORG UNIVERSITET FORÅR 2009 1 METODEEVALUERING AF JOBKONSULENTINDSATSEN FOR FLYGTNINGE OG INDVANDRERE I ÅRHUS
Læs mereVEJLEDNING TIL EFFEKTKÆDE
VEJLEDNING TIL EFFEKTKÆDE Indledning Formålet med effektkæden er at have et værktøj til at planlægge og styre vores indsatser efter, hvad der giver effekt for borgerne. Samtidig kan effektkæden bruges
Læs mereLedelsesevaluering. Formål med afsæt i ledelsespolitik og ledelsesværdier. Inspiration til forberedelse og gennemførelse
Ledelsesevaluering Inspiration til forberedelse og gennemførelse At gennemføre en ledelsesevaluering kræver grundig forberedelse for at give et godt resultat. Her finder I inspiration og gode råd til at
Læs mereOpgave del 1-Diskussion af udbuddets form og indhold... 2. Indledning:... 2. Hvilken form for viden efterspørger Socialstyrelsen?...
Opgave del 1-Diskussion af udbuddets form og indhold... 2 Indledning:... 2 Hvilken form for viden efterspørger Socialstyrelsen?... 2 Evidensbaseret politik... 3 Programteori også kaldet forandringsteori...
Læs mereVelkommen til Ny Nordisk Skole. Ved Danmarks Evalueringsinstitut (EVA) August 2013
Velkommen til Ny Nordisk Skole Ved Danmarks Evalueringsinstitut (EVA) August 2013 Ny Nordisk Skole - i en nøddeskal Ved Katja Munch Thorsen Danmarks Evalueringsinstitut (EVA) August 2013 Målene for Ny
Læs mereSeptember 2012. Resume: Efterskolerne og uddannelsesmobilitet. Udarbejdet af DAMVAD for Efterskoleforeningen
September 2012 Resume: Efterskolerne og uddannelsesmobilitet Udarbejdet af DAMVAD for Efterskoleforeningen For information on obtaining additional copies, permission to reprint or translate this work,
Læs mereEt oplæg til dokumentation og evaluering
Et oplæg til dokumentation og evaluering Grundlæggende teori Side 1 af 11 Teoretisk grundlag for metode og dokumentation: )...3 Indsamling af data:...4 Forskellige måder at angribe undersøgelsen på:...6
Læs mere1. Hvad er det for en problemstilling eller et fænomen, du vil undersøge? 2. Undersøg, hvad der allerede findes af teori og andre undersøgelser.
Psykologiske feltundersøgelser kap. 28 (Kilde: Psykologiens veje ibog, Systime Ole Schultz Larsen) Når du skal i gang med at lave en undersøgelse, er der mange ting at tage stilling til. Det er indlysende,
Læs mere(bogudgave: ISBN , 2.udgave, 4. oplag)
Videnskabsteori 1. e-udgave, 2007 ISBN 978-87-62-50223-9 1979, 1999 Gyldendalske Boghandel, Nordisk Forlag A/S, København Denne bog er beskyttet af lov om ophavsret. Kopiering til andet end personlig brug
Læs mereOm at sætte mål for og måle resultater af en kommunal naturfagstrategi
Om at sætte mål for og måle resultater af en kommunal naturfagstrategi Olga Trolle, cand.pæd. i pædagogisk sociologi, konsulent, Institut for Naturfagenes Didaktik, KU & NEUC 12-06-2018 2 Formål: At øve
Læs mereSkriftlig eksamen i samfundsfag
OpenSamf Skriftlig eksamen i samfundsfag Indholdsfortegnelse 1. Introduktion 2. Præcise nedslag 3. Beregninger 3.1. Hvad kan absolutte tal være? 3.2. Procentvis ændring (vækst) 3.2.1 Tolkning af egne beregninger
Læs mereProjektbaserede eksamener Cand.merc. i økonomistyring og informatik *
Februar 2007 / PNB Projektbaserede eksamener Cand.merc. i økonomistyring og informatik * Dette notat har til formål at give nogle generelle retningslinjer for, hvorledes eksamener med udgangspunkt i skriftlige
Læs mereHoney og Munfords læringsstile med udgangspunkt i Kolbs læringsteori
Honey og Munfords læringsstile med udgangspunkt i Kolbs læringsteori Læringscyklus Kolbs model tager udgangspunkt i, at vi lærer af de erfaringer, vi gør os. Erfaringen er altså udgangspunktet, for det
Læs mereBILAG 2 DESIGN OG METODE- BILAG
Til Undervisningsministeriet Dokumenttype Bilag Dato August 2014 BILAG 2 DESIGN OG METODE- BILAG BILAG 2 DESIGN OG METODEBILAG INDHOLD Design- og metodebilag Error! Bookmark not defined.1 1.1 Forskningsdesign
Læs mereArtikler
1 af 5 09/06/2017 13.47 Artikler 26 artikler. persontilstand Generel definition: tilstand hos en person, der vurderes i forbindelse med en indsats Persontilstanden vurderes og beskrives ud fra den eller
Læs mereDansk-historieopgaven (DHO) skrivevejledning
Dansk-historieopgaven (DHO) skrivevejledning Indhold Formalia, opsætning og indhold... Faser i opgaveskrivningen... Første fase: Idéfasen... Anden fase: Indsamlingsfasen... Tredje fase: Læse- og bearbejdningsfasen...
Læs mereUdvidet evalueringsmodel på Roskilde Bibliotekerne - Winters integrerede evalueringsmodel for implementering af vedtagne politiker (policy)
Udvidet evalueringsmodel på Roskilde Bibliotekerne - Winters integrerede evalueringsmodel for implementering af vedtagne politiker (policy) Winters model bruges på Roskilde Bibliotekerne til evaluering
Læs mereDokumentation på dagsordenen! Nye kommuner, nye krav
Dokumentation på dagsordenen! Nye kommuner, nye krav Dokumentation (ordbog): at fastslå ved hjælp af (især) skriftlige beviser Dokumentation i daglig tale: statistik, rapporter, redegørelser, forskning,
Læs mereKRIMINALPRÆVENTIVE INDSATSER GUIDE TIL VIDENSBANK
Til Københavns Kommune Dokumenttype Guide til vidensbank Dato Maj 2013 KRIMINALPRÆVENTIVE INDSATSER GUIDE TIL VIDENSBANK Mangler billede INDHOLD 1. Introduktion til vidensbanken 2 2. Hvilken viden indeholder
Læs mere