Bilag 3 Evalueringsdesign for forsøgsprojekt

Relaterede dokumenter
EVALUERINGSDESIGN: HOLMSTRUPGÅRDS BESKÆFTIGELSESRETTEDE INDSATS

Kamilla Bolt og Marie Jakobsen

Behandlingseffekter for klienter 25+ Alkoholområdet

ASI-forsorg Landsrapport DEFACTUM. Social, sundhed & arbejdsmarked. Side 1

Borgerevaluering af Akuttilbuddet

CENTER FOR FORSORG OG SPECIALISEREDE INDSATSER

Analyse af kontanthjælpsmodtagere i matchkategori 3 Tilbud

EKP RESULTAT- OG EFFEKTAFRAPPORTERING Enheden for Kriminalpræventive Programmer (EKP) 15. april Udarbejdet af:

En styrket udredningskapacitet inkl. en styrket myndighedsindsats

Ansøgning om støtte til projekt Avancementsmentor Opfølgning på undersøgelsen "Små skridt - store forandringer" (Socialministeriets j.nr.

Nedenstående er eksempler på, hvordan et realistisk og ambitiøst mål kunne se ud for hvert af de forslag til mål, som findes i grundlagspapiret.

Spørgeskema. Til anvendelse i implementering af de nationale retningslinjer for den sociale stofmisbrugsbehandling

Guide til forandringsteori og resultatopfølgning

"Midt om natten - et natværested for sindslidende og udsatte grupper" Projekt 46

Pulje til indsats for jobparate kontanthjælpsmodtagere

B i l a g 1 : P r o j e k t b e s k r i v e l s e. Virksomhedscentre og ressourceforløb

Undervisnings på forskellige niveauer i grundfag efter reformen

Business case Efterværn

DEN KOMMUNALE INDASTS OVERFOR DE SVAGE LEDIGE

AT ARBEJDE MED FORANDRINGSTEORIER STARTKONFERENCE STARTKONFERENCE 2015/03/11

Indsatsmodel i 'Flere skal med' Arbejdsmarkedsfastholdelse

BILAG 3. Metode og Datagrundlag. De kvalitative data. Forsøgsprojekt med sociale mentorer

Business case Udbud: Aktivitetsparate kontanthjælpsmodtagere

Bilag 2 - Kravspecifikation. 1. Indledning. 2. Baggrund. 3. Beskrivelse af evalueringsopgaven. Dato

Godkendelse af effektanalyse vedr. 1. halvår 2016

Notat. Café Parasollen - Projekt 64. Projekt nr. 64. Mads Sinding Jørgensen. Dato for afholdelse. 13.september Godkendt d.

Slutevaluering af projekt Styrket indsats på kost- og motionsområdet

Socialudvalgets grundlag for det socialpolitiske arbejde

Sammenfatning af kortlægning om unge hjemløse i Aarhus Kommune.

Projekt Seniorkorps Støtte til udsatte unge i Struer kommune gennem etableringen af et lokalt korps af frivillige

HJEMLØSESTRATEGI HOVEDRESULTATER FRA EVALUERINGEN

BTU - Brobygningsforløb 2018

Effektmåling. Ulf Hjelmar. Workshop. forskningsprogramleder Anvendt KommunalForskning (AKF)

Vedtaget i Kommunalbestyrelsen den 1. februar Frederiksberg Kommunes udsattepolitik

En sammenhængende indsats for. langvarige modtagere af offentlig forsørgelse

Aktivitetsnavn: Trappen. Indhold (aktivitetsbeskrivelse):

BEREGNING AF SOCIAL VÆRDI. hvilke resultater kan sammenlignes?

Notat. Ungeindsats. Erhvervs- og Beskæftigelsesudvalget. Inden for beskæftigelsesområdet defineres unge som værende under

Notat. Arbejdsprojekt Gårdbutik Projekt 160. Projekt nr Mads Sinding Jørgensen. Dato for afholdelse Godkendt d.

Områdebaserede beskæftigelsesindsatser for kontanthjælpsmodtagere og selvforsørgede i København

LG Insight Kort evalueringsbeskrivelse

TVÆRFAGLIGT VELFÆRDSPROGRAM 4. MAJ 2018

T r i v s e l o g S u n d h e d. Misbrugspolitik. Juni 2010

STRATEGI FOR DET RUMMELIGE ARBEJDSMARKED

Notat. Fundamentet Social coaching til udstødte og marginaliserede - Projekt 133. Projekt nr Daniel Schwartz Bojsen og Jørgen Anker

Faglige kvalitetsoplysninger> Støtte- og inspirationsmateriale > Dagtilbud

En sammenhængende indsats for. langvarige modtagere af offentlig forsørgelse

Projekt Mentorkorps. Ansøgning om midler til etablering af eksternt mentorkorps. Med fokus på en styrket kvalitativ, fleksibel og koordineret indsats.

Velfærdspolitisk Analyse

Beskæftigelsesplan 2018

1.Egen bolig/støtte i egen bolig

I dette notat præsenteres analyseresultater, der supplerer evalueringen af stressklinkkerne fra april Notatet redegør for følgende analyser:

Kvalitetsstandard for personlig rådgiver og kontaktperson for børn og unge på handicapområdet

Det kontrollerede forsøg: På rette vej i Job Forsøgsperioden: nov til marts 2012 (indtag af borgere i perioden nov til marts 2011)

Ansøgning om midler til kompetenceudvikling af mentorer i Mentornetværk Mariagerfjord

Pkt.nr. 4. Aktiverings- og sociale projekter - forslag til tilretning

Projekt Unge - godt i gang - formål og indsats

Multikorps tager sig af: Børn og unge som samarbejdspartnere og borgere er bekymret for,

Koordinerende indsatsplan

EVALUERING AF BOLIGSOCIALE AKTIVITETER

Side2. Dokumentationsrapport forår 2016

Målgruppen Jobpoint et særligt tilrettelagt tilbud for indsatsklare kontanthjælpsmodtager match 2 i aldersgruppen fra 25 år og opefter.

VEJLEDNING TIL EFFEKTKÆDE

Brøndby Kommunes kvalitetsstandard for StøtteKontaktPerson

Sundhedssamtaler på tværs

Erfaringer med forandringsteori og resultatstyring Jobcenterchef Lise Willer

Notat til Statsrevisorerne om beretning om effekten af integrationsindsatsen over for nyankomne udlændinge. April 2010

Pulje til særlig indsats til ledige over 50 år

Psykiatri- og misbrugspolitik

BESKÆFTIGELSESINDSATSEN IFØLGE BORGERNE I FRIKOMMUNER FEBRUAR 2014

BILAG 1B: OVERSIGTSSKEMA

Beskæftigelsesplan 2017

Beskæftigelsespolitik

Resultatdokumentation. Infomøde for sociale tilbud 2. november 2015

11:30 12:00 Præsentation af evalueringsmodel metode og effekt

Side2. Dokumentationsrapport efterår 2017

Koordinationsworkshop

Socialt udsatte borgeres brug af velfærdssystemet. Samfundsøkonomiske aspekter. Lars Benjaminsen

Serviceinformation. Indsats til borgere med skizofreni. jf. Lov om social service 119

BI_1b: Virksomhedsrettet indsats for udsatte borgere

Psykiatri- og misbrugspolitik

Familiebaggrund og social marginalisering. Lars Benjaminsen

LUP Psykiatri Regional rapport. Indlagte patienter. Region Hovedstaden

KL budskaber til reform af kontanthjælpen

Evaluering af frikommuneforsøget: Dispensation ift. forholdstallet i virksomhedspraktik og løntilskud

JOBCENTER MIDDELFART. Evalueringsrapport. Job- og Kompetencehuset. 3. Kvartal 2012

MindLab. Institution MindLab. Forfattere Christian Bason, innovationschef Niels Hansen, projektleder. Opgavetypen der eksemplificeres Vidensproduktion

OPFØLGNING PÅ BESKÆFTIGELSESINDSATSEN I LANGELAND KOMMUNE

U d s att E p o l i t i k L Y N G B Y - TAA R B Æ K KO M M U N E

Statistik for Jobcenter Aalborg

ASI forsorg Solvang

Svar på 10-dages forespørgsel fra Venstre og Liberal Alliance: Afdækning af hvordan Det Sociale Frikort anvendes i Aarhus Kommune

Pulje til styrket indsats for ordblinde og læse-, skrive- og regnesvage

Notat. Rehabilitering af socialt udsatte - Projekt 176. Projekt nr Dato for afholdelse. 12.september Godkendt d.

Forsøget er blevet evalueret af Michael Rosholm og Michael Svarer i samarbejde med Rambøll, og resultaterne er nu klar til offentliggørelse.

FØR- OG EFTERMÅLING FØRSTE SKRIDT PÅ VEJEN HELLE HANSEN, SFI

EVALUERING AF PROJEKTERNE - FORMÅL, INDHOLD OG TIDSPLAN STARTKONFERENCE STARTKONFERENCE 2015/03/11

Frikommuneforsøg I. Evaluering af frikommuneforsøget: Dispensation ift forholdstallet i virksomhedspraktik

SOCIALT FRIKORT TIL SOCIALT UDSATTE

Yngre personer med stofmisbrug i behandling

Transkript:

Dato: 10.1.2007 Sagsnr.: 2007-1979 Dok.nr.: 2007-11152 Bilag 3 Evalueringsdesign for forsøgsprojekt Med udgangspunkt i beskrivelsen af forsøgsprojektet (se bilag 2) er der på forhånd udarbejdet et design for evaluering af forsøgsprojektet. Evalueringsdesignet beskriver de metoder, som vil blive anvendt i evalueringen og de succeskriterier, som skal anvendes til at opgøre og måle, om indsatsen har været en succes. Evalueringsdesignet vil blive konkretiseret, når der er ansat en evaluator og kan, såfremt der opstår behov for det, justeres undervejs. Målgruppe Målgruppen for projektet er socialt udsatte stofmisbrugere og hjemløse, der har modtaget passiv kontanthjælp gennem længere tid, og som har tilbagevendende, komplekse problemer af fysisk, psykisk og art. Målgruppen er karakteriseret ved at have en svingende (forskellig fra dag til dag) evne til at drage omsorg for sig selv og deltage i sociale fællesskaber og aktivitets- og beskæftigelsestilbud. Målgruppen er ligeledes svær at nå, at fastholde og at motivere til en kontinuerlig deltagelse. Målgruppen kan nærmere præciseres som 30-55 årige mænd, der enten er i længerevarende substitutionsbehandling med tilknytning til en behandlingsenhed eller tilknyttet et hjemløsetilbud i Københavns Kommune, og som har været på passiv kontanthjælp i 40-60 måneder inden for de seneste 5 år. Forsøgsprojektets konkrete målgruppe er stofmisbrugere og hjemløse tilknyttet behandlingsenhederne Amager og Nord, samt Kirkens Korshærs Herberg i Hillerødgade og Bocentret og Herbergscentret på Sundholm. Selvom forsøget har en målgruppe det primært retter sig mod, kan alle brugere, der har kontakt med disse tilbud kan blive deltagere i forsøgsprojektet. Formål Formålet med forsøgsprojektet er at afprøve om et socialt aktiveringstilbud i form af et Dag til dagtilbud kan medvirke til at: 1. Forbedre livskvaliteten for socialt udsatte stofmisbrugere og hjemløse. 2. Forebygge yderligere udstødning af socialt udsatte stofmisbrugere og hjemløse. 3. Bidrage til social integration af socialt udsatte stofmisbrugere og hjemløse, herunder mindske barriererne for en tilknytning til arbejdsmarkedet for dem, der er parate hertil. Det er endvidere et delformål for forsøgsprojektet, 4. At tilbuddet kan motivere, tiltrække og fastholde socialt udsatte stofmisbrugere og hjemløse som deltagere i projektet.

Side 2 af 14 Metoder I forsøgsprojektet anvendes følgende metoder: 1. Social aktivering i Dag-til-dag projektet. 2. Personlig rådgivning efter behov. 3. Samarbejde med behandlingsenheder og botilbud om evt. at følge op på og tage sig af den videre støtte til den enkelte. 4. Samarbejde med Beskæftigelses- og Integrationsforvaltningen om at følge op på de deltagere, der gerne vil videre i et andet beskæftigelsestilbud. 5. Brug af tidligere misbrugere og hjemløse, som rollemodeller, oplægsholdere og mentorer. 6. Opsøgning og motivation af målgruppen på behandlingsenheder og botilbud 7. Brugerinddragelse. EVALUERINGSDESIGN FOR FORSØGSPROJEKTET Evalueringen vil bestå af en formativ evaluering, bestående af observationsstudier, kvalitative interview og dialog med deltagere, medarbejdere og samarbejdspartnere. Den formative evaluering skal sammen med resultaterne fra effektevalueringen medvirke til at understøtte metodeudvikling undervejs i forsøgsfasen. Evalueringen vil endvidere bestå af en summativ evaluering en effektevaluering, der skal opsummere og dokumentere, om forsøget opnår den ønskede effekt i forhold til de mål, der er opstillet for indsatsen. Herunder dokumentere om man kan tilskrive den opnåede effekt andre forhold end forsøgsindsatsen. Den formative evaluering Der gennemføres en formativ evaluering af opsøgnings- og motivationsfasen, samt aktivitetsfasen. Den formative evaluering skal medvirke til at understøtte udviklingen af metoder undervejs i projektperioden og dokumentere, om der er sammenhæng mellem de anvendte metoder og effekt. Der gennemføres observation af information, opsøgning og motivation af målgruppen på behandlingsenheder og herberger og det beskrives, hvilke metoder der anvendes. Rekrutteringen følges løbende. Der gennemføres observation af hverdagen i Dag- til dag-projektet (arbejdets udførelse og organisation, relationer mellem deltager og medarbejder, det sociale samvær indbyrdes mellem deltagerne, relationerne til omverdenen, dagsrytmen i projektet). På basis af observationsstudier af forsøgsprojektets dagligdag, kvalitative interview med deltagere og fokusgruppeinterview med medarbejdere og samarbejdspartnere afdækkes de anvendte metoder (social aktivering, personlig rådgivning, samarbejde med eksterne parter, rollemodeller, opsøgning og motivation samt brugerinddragelse) i forhold til om de er hensigtsmæssige og bidrager til realisering af forsøgsprojektets formål. Resultater fra effektmålingen inddrages i vurderingen af metoderne. Metoderne justeres i samarbejde med projektets medarbejdere og deltagere undervejs i forsøgsfasen. Der gennemføres en spørgeskemaundersøgelse af frontpersonalet i behandlingsenheder, botilbud og jobcentre ved start og sluttidspunktet for forsøgsprojektet med henblik på at

Side 3 af 14 belyse om de har ændret holdning til målgruppens behov for og muligheder for at indgå i aktivitets- og beskæftigelsestilbud undervejs i projektperioden. Spørgeskemaundersøgelsen skal belyse om systemets barrierer i forhold til målgruppen er mindsket undervejs. Når der er ansat en evaluator vil den formative evaluering blive konkretiseret og der vil blive udarbejdet konkrete redskaber observationsskemaer, spørgeskema, interviewguides m.v. Den summative evaluering - Effektevalueringen Effektevalueringen skal måle om forsøgsprojektet formår at indfri følgende formål: 1. En forbedring af deltagerne livskvalitet. 2. Forebygge en yderligere social udstødning af deltagerne. 3. Bidrag til social integration, herunder at nedbryde barrierer for en tilknytning til arbejdsmarkedet for dem, der er parate til det. 4. At motivere målgruppen til at deltage i projektet og at fastholde deltagerne i projektet Enhver social indsats bygger på en række antagelser om, hvad der vil føre til den ønskede effekt. Ved evalueringer af sociale indsatser kaldes disse ofte for forandringsteorier. Der er to forandringsteorier i forsøgsprojektet. Først og fremmest er der en antagelse om, at den særlige sociale aktiveringsmetode (som mere detaljeret er beskrevet i beskrivelsen af forsøgsprojektet bilag 2) vil føre til forbedring af livskvalitet, forebyggelse af yderligere social udstødning og bidrage til social integration. Dernæst er der en antagelse om, at en særlig opsøgende og motiverende indsats vil få målgruppen til at deltage i forsøgsprojektet og fastholde dem i projektet. Opstilling af forandringsteorierne i skematiskform er en god hjælp til at anskueliggøre hvilken indsats effekt der skal måles. Disse forandringsteorier er vist i figur 1 og figur 2. Figurerne skal læses fra højre til venstre således, at de illustrerer en art årsagskæde hvad fører til hvilken effekt. Kategorierne skal forstås som følger: Slutdeltager: beskriver den gruppe der udsættes for indsatsen. Ressourcer: beskriver de forskellige ressourcer i form af ansatte, lokaler, samarbejdspartnere m.m. som er med til at producere indsatsen. Aktiviteter: beskriver selve indsatsen i form af de aktiviteter den bestå af. Output: beskriver det umiddelbare resultat af indsatsen. Effekten på kort og lang sigt: beskriver hvilken effekt på slutbrugerne, indsatsen menes at have (formålet med forsøgsprojektet - på kort og lang sigt). Set i det lys, er målet med effektmålingen at sandsynliggøre den konkrete årsagskæde i en given forandringsteori. De to forandringsteorier gennemgås nedenfor for at illustrere årsagskæden. Gennemgangen sker dog ikke i detaljen, da målet her er at beskrive evalueringen og ikke selve forsøgsprojektet. For en nærmere gennemgang af forsøgsprojektet henvises der til bilag 2.

Side 4 af 14 Figur 1. Forandringsteori for formål 1, 2 og 3 at forsøgsprojektet kan forbedre livskvalitet, forebygge yderligere udstødning og bidrage til social integration. Slutdeltager Ressourcer Aktiviteter Output Effekt på Effekt på 30-55 årige stofmisbrugere i substitutionsbeha ndling og/eller tilknyttet hjemløsetilbud, som har været på passiv kontanthjælp i 40 60 mdr. indenfor de sidste 5 år - Dag til dagprojektet (medarbejdere, lokaler mv.) - Behandlingsenheder og botilbud - Jobcenter - Jobkonsulent - Rollemodeller - Social aktivering - forskellige former for konkrete arbejdsopgaver - Socialt samvær - Personlig rådgivning - Samarbejde med behandlingsenheder, botilbud om evt. yderligere hjælp/ støtte - Samarbejde med jobcentre om beskæftigelsestilbud - Oplæg ved tidligere stofmisbrugere - Fælles aktiviteter ifm. aflønning - Brugerinddragelse Socialt aktiverede stofmisbrugere og hjemløse kort sigt og hjemløse med forbedret livskvalitet og hjemløse hvor yderligere udstødelse er forebygget (deres social situation er stabiliseret) og hjemløse hvis social integration er forbedret og hjemløse med reducerede barrierer i forhold til arbejdsmarkedet lang sigt og hjemløse med forbedret livskvalitet og hjemløse hvor yderligere udstødelse er forebygget (deres stabile social situation er fastholdt) og hjemløse hvis social integration er forbedret og hjemløse med reducerede barrierer i forhold til arbejdsmarkedet Den første forandringsteori bygger på en antagelse om, at hvis målgruppen udsættes for en bestemt social aktiveringsmetode et Dag-til-dag projekt med de i figuren beskrevne aktiviteter vil målgruppens livskvalitet forbedres, yderligere social udstødning vil undgås, målgruppen vil være bedre social integreret samt have fået reduceret en række af deres barrierer i forhold til arbejdsmarkedet. Den særlige aktiveringsmetode som målgruppen udsættes for består af en række aktiviteter i form af beskæftigelse, socialt samvær, personlig rådgivning, oplæg ved rollemodeller og samarbejde med behandlingsenheder, botilbud og jobcentre m.v. Det er disse aktiviteter sammen med en række ressourcer (dag-til-dagprojektets medarbejdere og fysiske rammer, behandlingsenheder, botilbud, jobcentre, jobkonsulenter og rollemodeller) som forventes at ville føre til en indfrielse af forsøgsprojektets 1., 2. og 3. formål. Effekten forventes at være større på lang sigt end på kort sigt. Det vil sige at effekten forventes at ville omfatte flere og påvirke dybere jo længere tid en person udsættes for forsøgsprojektet. Dog skiller målsætningen om at forsøgsprojektet vil føre til forebyggelse af yderligere social udstødning sig ud. Her forventes der på langt sigt en fastholdelse af den stabile situation, som er opnået på kort sigt. Der forventes således ikke som udgangspunktet en yderligere stabilisering, men den vil kunne forekomme.

Side 5 af 14 Hvornår der konkret er tale om en effekt, opgøres ved hjælp af en række succeskriterier, som gennemgås senere i designet. Figur 2. Forandringsteori for formål 4 - at forsøgsprojektet kan motivere, tiltrække og fastholde deltagere. Slutdeltager Ressourcer Aktiviteter Output Effekt på kort 30-55 årige stofmisbrugere i substitutionsbeh andling og/eller tilknyttet hjemløsetilbud, som har været på passiv kontanthjælp i 40 60 mdr. indenfor de sidste 5 år - Dag til dagprojektet - 1-2 pædagoger fra hver af behandlingsenhe derne Amager og Nord, samt Kirkens Korshærs Herberg i Hillerødgade og Bocentret og Herbergscentret på Sundholm. - Information - Opsøgende arbejde - Personlig motivation - Motivation i form af møder - Opsamling og kørsel til Dag til Dagprojektet - Samarbejde - Deltagelse i Dag til Dagprojektet Fremmøde og deltagelse i Dag til dagprojektet sigt Fremmøde og deltagelse i Dag til dagprojektet Effekt på lang sigt Fastholdelse i Dag-til-dag projektet Den anden forandringsteori bygger på en antagelse om, at hvis målgruppen udsættes for en særlig form for opsøgende arbejde, information, personlig kontakt og en række andre motiverende aktiviteter vil målgruppen blive motiverede til at deltage i Dag til Dagprojektet. Teorien er således, at motivationen på kort sigt vil føre til deltagelse og på lang sigt til, at deltagelsen vil blive mere længerevarende. Selve deltagelsen i Dag til Dagprojektet er også en del af den motiverende indsats, således at selve aktiviteterne i Dag til Dagprojektet tænkes at ville virke motiverende (F.eks. muligheden for at arbejde). Det er effektmålingens formål at sandsynliggøre disse to forandringsteorier. Til dette anvendes der 2 metoder: 1. Analyse af indsatsens effekt via en kontrolgruppe. 2. Analyse af om den opnåede effekt kan tilskrives andre forhold end forsøgsindsatsen. I det følgende beskrives hvordan vi konstruerer kontrolgruppen. Forsøgsprojektgruppe og kontrolgruppe Der gennemføres en registerbaseret beskrivelse af målgruppen for forsøgsprojektet ud fra udvalgte parametre: køn, alder, kontanthjælpsydelser, misbrug og behandling, brug af hjemløsetilbud, samt kriminalitet, samt indlæggelser på somatiske og psykiatriske hospitaler de sidste 5 år. Målgruppen opdeles efter bydelstilknytning i 2007 i to grupper, således at brugere i bydele, der hører ind under Behandlingsenhed Nords og Behandlingsenhed Amagers optageområde, samt brugere fra Kirkens Korshærs Herberg i Hillerødgade, Herbergscentret og Bocentret på Sundholm udgør den målgruppe, som forsøgsprojektgruppen/deltagerne rekrutteres fra. Mens brugere i bydele, der hører ind under Behandlingsenhed Indre og Behandlingsenhed Vests optageområde, samt brugere

Side 6 af 14 på Mændenes Hjem udgør kontrolgruppen og dermed ikke får mulighed for at deltage i forsøgsprojektet. Forsøgsprojektgruppen og kontrolgruppen udgør hver ca. 225 personer. Det forventes, at ca. 60 75 personer vil deltage i forsøgsprojektet i løbet af forsøgsperioden på 16 måneder. Efterhånden som forsøgsprojektet får deltagere ind matches disse med tilsvarende brugere fra kontrolgruppen, så deltagergruppen og den konkrete kontrolgruppe matcher hinanden på en række variable. Deltagergruppens resultater vil blive holdt op mod den konkrete kontrolgruppe. Figur 3. viser en oversigt over forsøgsprojektgruppe og kontrolgruppe, samt de data, der indsamles i forbindelse med den registerbaserede analyse og effektmålingen.

Forsøgsprojektgruppe Kontrolgruppe Data* Deltagere tilknyttet behandlingsenhederne Amager og Nord, samt Kirkens Korshærs Herberg i Hillerødgade og Bocentret og Herbergscentret på Sundholm. Brugere tilknyttet behandlingsenhederne Indre og Vest, samt herberget Mændenes Hjem Deltagere ud af ca. 225 brugere af tilbuddene Forventet antal deltagere i forsøgsprojektet 60 75 over 16 mdr. Forsøgsprojektgruppen: Data vedr. 2005/6 Udvalgt blandt ca. 225 brugere af tilbuddene Den konkrete kontrolgruppe: Data vedr. 2005/6 * ASI-data indsamles ved indskrivning i forsøgsprojekt (0) og efter 3 og 6 mdr. Øvrige data indsamles for 2005/6 og i 2007 og 2008. Side 7 af 14 Køn Alder Etnicitet Forsørgelse Ledighed Varighed af aktiveringstilbud Skolegang Erhvervsuddannelse Misbrugets art Hovedstof Domfældelser Somatisk sygdom Psykisk sygdom Vitalstatus Addiction Severity Index: - belastning fysisk - belastning psykisk - belastning socialt - antal dage i beskæftigelse - antal dage med kriminalitet - antal dage med bolig - antal dage med brug af illegale stoffer - antal dage med domfældelser Der indsamles data på forsøgsprojektgruppen og den konkrete kontrolgruppe for 2005/6 med henblik på at belyse om en given effekt af forsøget kan tilskrives andre forhold end indsatsen, som f.eks. forskelle i udgangsposition. Elementer i effektevalueringen Der indgår en række elementer i effektmålingen. Disse elementer handler om hvor vi får data fra, til hvad de skal bruges og i hvilket omfang de involverer brugerne. Overordnet set gennemføres effektevaluering på aktivitetsdelen i Dag-til-dag projektet og på opsøgnings- og motivationsdelen og omfatter både deltagergruppen og den konkrete kontrolgruppe. Der gennemføres en løbende registrering af fremmøde i projektet. Der gennemføres en registerbaseret opfølgning på deltagergruppen og den konkrete kontrolgruppe. Den registerbaserede opfølgning baseres på data fra Addiction Severity Index (ASI), og på interne og eksterne registre.

Side 8 af 14 Det forudsættes, at hovedparten af forsøgets målgruppe (med tilknytning til behandlingsenhederne) har gennemført et ASI-opfølgningsinterview foretaget af behandlingsenhederne i hhv. 2007 og 2008. For deltagergruppen vil der være tale om et ekstra opfølgningsinterview 3 måneder og 9 måneder efter første fremmøde. Besvarelserne vil være registreret i den elektroniske brugerjournal. For deltagere, der kun har haft tilknytning til et herberg vil datagrundlaget for sammenligningen være registerdata fra interne og eksterne registre. Dette gælder også for de personer i den konkrete kontrolgruppe, som kun har været tilknyttet et herberg. Indfris formålene forbedret livskvalitet, forebyggelse af social udstødning og social integration af målgruppen gennem forsøgsindsatsen? Der udvælges fra ASI-opfølgningsinterviewet spørgsmål om antal dage med fysisk, psykisk og social belastning som indikatorer på livskvalitet. Der udvælges fra opfølgningsinterviewet antal dage med beskæftigelse, antal dage med kriminalitet, antal dage med bolig, samt antal dage med brug af illegale stoffer, som indikatorer på social udstødning og social integration. Der udvælges fra Kriminalregistret data om de to gruppers domfældelser i projektperioden. Der udvælges fra Beskæftigelses- og Integrationsforvaltningen data om varighed i aktiveringstilbud efter Lov om Aktiv Beskæftigelsesindsats, og fra Socialforvaltningen om varighed af kontanthjælp. Der udvælges fra Folkeregistret data om vitalstatus. Deltagergruppens og den konkrete kontrolgruppes besvarelser ved tid 1 og tid 2 sammenlignes. Det vurderes, hvorvidt en evt. forskel mellem deltagergruppen og den konkrete kontrolgruppes niveau for livskvalitet og social udstødning og social integration målt ud fra de udvalgte indikatorer mellem tid 1 og 2 kan tilskrives forsøgets indsats eller andre faktorer. Indfris formålet om at motivere målgruppen til at deltage i projektet og om at fastholde deltagere i projektet? Der gennemføres en analyse af, om forsøgsprojektet har formået at opnå kontakt med målgruppen og at fastholde målgruppen. Analysen indeholder en analyse af antal deltagere, deltagernes fremmødehyppighed, antal gengangere og belægningsprocent. Succeskriterier Til de to forandringsteorier knytter der sig en række succeskriterier. Succeskriterierne knytter sig konkret til de formulerede effekter på kort og lang sigt. Således omfatter tabel 1 til og med 8 effekterne i figur 1, mens tabel 9 knytter sig til forandringsteorien i figur 2. Succeskriterierne handler om, hvordan vi opgør eller måler, om forsøgsprojektet har været en succes eller med andre ord om forsøgsprojektet har haft en effekt på forsøgsprojektgruppen. Da vi ikke kender forsøgsprojektgruppen (alene af den grund at projektet ikke er startet endnu, og ingen endnu deltager i forsøgsprojektet), kan vi ikke fastsætte konkrete talværdier for succeskriterierne. Dette har dog mindre betydning, da en måling af effekt

Side 9 af 14 handler om at sandsynliggøre, at en given udvikling (f.eks. en reduktion i antallet af kriminelle handlinger) hænger sammen med forsøgsprojektets indsats. Det konkrete niveau for de kriminelle handlinger er derfor uden større betydning, det er udviklingen og evt. niveauet i forhold til andre, som er interessant. For hver af de i forandringsteorien nævnte effekter på kort og lang sigt opstilles i det følgende en række succeskriterier. Disse succeskriterier kan ikke stå alene, og det er derfor den samlede vurdering af alle kriterierne, som skal danne grundlag for en vurdering af, om forsøgsprojektet indfrier sine tre formål. I løbet af arbejdet med opgørelsen af succeskriterierne, kan der vise sig andre forhold, som kan være med til at dokumentere eller belyse forsøgsprojektets mulige effekt. I det omfang disse afdækkes, vil de blive taget med i den endelige afrapportering. Tabel 1: Succeskriterier i forhold til målet om at personer i deltagergruppen skal forbedre deres livskvalitet på kort sigt. De dimensioner Der er tale om en succes, livskvalitet måles på Fysisk situation sammenhæng af deres fysiske belastning*. Omfatter kun data fra personer ved deres 3. måned i projektet. Data fra ASI (Addiction Severity Index). Psykisk situation sammenhæng Social situation (venner og netværk) af deres psykiske belastning*. sammenhæng af deres sociale belastning*. * ASI (Addiction Severity Index) opgør hvor belastet en person er på forskellige områder. Note: I forsøgsprojektet opgøres ASI ved første indskrivning og efter tre måneder i projektet. Tabel 2: Succeskriterier i forhold til målet om at personer i deltagergruppen skal forbedre deres livskvalitet på lang sigt. De dimensioner Der er tale om en succes, livskvalitet måles på Fysisk situation reduceret deres fysiske belastning* mere end en tilsvarende kontrolgruppe. forsøgsgruppen, som har deltaget i mere end 9 måneder. Data fra Psykisk situation Social situation (venner og netværk) Fysisk situation Psykisk situation reduceret deres psykiske belastning* mere end en tilsvarende kontrolgruppe. reduceret deres sociale belastning* mere end en tilsvarende kontrolgruppe. forsøgsprojektet og reduktionen af deres fysiske belastning*. ASI (Addiction Severity Index).

Side 10 af 14 forsøgsprojektet og reduktionen af deres psykiske belastning*. Social situation (venner og netværk) forsøgsprojektet og reduktionen af deres sociale belastning*. * ASI (Addiction Severity Index) opgør hvor belastet en person er på forskellige områder. Note: ASI opgøres en gang om året. Første opgørelse foretages primo 2007, der vil derfor først kunne foretages en opgørelse af succeskriterierne efter ASI-opgørelsen i 2008. Tabel 3: Succeskriterier i forhold til at der på kort sigt skal ske en forebyggelse af yderligere social udstødning blandt personer i deltagergruppen (en stabilisering af deres sociale situation). De dimensioner den Der er tale om en succes, sociale situation måles på Kriminalitet sammenhæng deltaget i forsøgsprojektet og stabilisering/reduktionen af deres Omfatter kun data fra personer ved deres 3. måned i projektet. Data fra ASI (Addiction Severity Index). kriminalitet belastning*. Bolig situation sammenhæng deltaget i forsøgsprojektet og stabilisering/reduktionen af deres boligmæssige belastning*. Misbrug sammenhæng deltaget i forsøgsprojektet og stabilisering/reduktionen af deres stofmisbrugs belastning*. * ASI (Addiction Severity Index) opgør hvor belastet en person er på forskellige områder. Note: I forsøgsprojektet opgøres ASI ved første indskrivning og efter tre måneder i projektet. Tabel 4: Succeskriterier i forhold til målet om, at der på lang sigt skal ske en forebyggelse af yderligere social udstødning blandt personer i deltagergruppen (i form af en fastholdelse af deres stabiliseret sociale situation.) De dimensioner den sociale situation måles Der er tale om en succes, på Kriminalitet Bolig situation Misbrug reduceret deres kriminalitet belastning* mere end en tilsvarende kontrolgruppe. Og hvis deltagergruppens reduktion er på niveau med eller større end reduktionen ved opgørelsen på kort sigt. reduceret deres boligmæssige belastning* mere end en tilsvarende kontrolgruppe. Og hvis deltagergruppens reduktion er på niveau med eller større end reduktionen ved opgørelsen på kort sigt. reduceret deres stofmisbrugs belastning* mere end en tilsvarende kontrolgruppe. Og hvis forsøgsgruppen, som har deltaget i mere end 9 måneder. Data fra ASI (Addiction Servity Index).

Side 11 af 14 deltagergruppens reduktion er på niveau med eller større end reduktionen ved opgørelsen på kort sigt. Kriminalitet forsøgsprojektet og reduktionen af deres kriminalitets belastning*. Og hvis reduktionen er på niveau med eller større end reduktionen ved opgørelsen på kort sigt. Bolig situation forsøgsprojektet og reduktionen af deres boligmæssige belastning*. Og hvis reduktionen er på niveau med eller større end reduktionen ved opgørelsen på kort sigt. Misbrug forsøgsprojektet og reduktionen af deres stofmisbrugs belastning*. Og hvis reduktionen er på niveau med eller større end reduktionen ved opgørelsen på kort sigt. * ASI (Addiction Servity Index) opgør hvor belastet en person er på forskellige områder. Note: ASI opgøres en gang om året. Første opgørelse foretages primo 2007, der vil derfor først kunne foretages en opgørelse af succeskriterierne efter ASI-opgørelsen i 2008. Tabel 5: Succeskriterier i forhold til målet om at personer i deltagergruppen skal have forbedret deres sociale integration på kort sigt. De dimensioner den Der er tale om en succes, sociale situation måles på Kriminalitet sammenhæng af deres kriminalitet belastning*. Omfatter kun data fra personer ved deres 3. måned i projektet. Data fra ASI (Addiction Servity Index). Bolig situation sammenhæng af deres boligmæssige belastning*. Misbrug sammenhæng af deres stofmisbrugs belastning*. * ASI (Addiction Servity Index) opgør hvor belastet en person er på forskellige områder. Note: I forsøgsprojektet opgøres ASI ved første indskrivning og efter tre måneder i projektet.

Side 12 af 14 Tabel 6: Succeskriterier i forhold til målet om at personer i deltagergruppen skal have forbedret deres sociale integration på lang sigt. De dimensioner den sociale situation måles Der er tale om en succes, på Kriminalitet Bolig situation Misbrug Kriminalitet Bolig situation Misbrug Kriminalitet Psykisk situation reduceret deres kriminalitet belastning* mere end en tilsvarende kontrolgruppe. Og hvis deltagergruppens reduktion er på niveau med eller større end reduktionen ved opgørelsen på kort sigt. reduceret deres boligmæssige belastning* mere end en tilsvarende kontrolgruppe. Og hvis deltagergruppens reduktion er på niveau med eller større end reduktionen ved opgørelsen på kort sigt. reduceret deres stofmisbrugs belastning* mere end en tilsvarende kontrolgruppe. Og hvis deltagergruppens reduktion er på niveau med eller større end reduktionen ved opgørelsen på kort sigt. forsøgsprojektet og reduktionen af deres kriminalitets belastning*. Og hvis reduktionen er på niveau med eller større end reduktionen ved opgørelsen på kort sigt. forsøgsprojektet og reduktionen af deres boligmæssige belastning*. Og hvis reduktionen er på niveau med eller større end reduktionen ved opgørelsen på kort sigt. forsøgsprojektet og reduktionen af deres stofmisbrugs belastning*. Og hvis reduktionen er på niveau med eller større end reduktionen ved opgørelsen på kort sigt. Hvis omfanget af domfældelser blandt personerne i deltagergruppen reduceres mere end for en tilsvarende kontrolgruppe. Hvis omfanget af indlæggelser med psykisk sygdom blandt personerne i deltagergruppen reduceres mere end for en tilsvarende kontrolgruppe. forsøgsgruppen, som har deltaget i mere end 9 måneder. Data fra ASI (Addiction Servity Index). deltagergruppen, som har deltaget i mere end 9 måneder. Data fra Kriminalregisteret. deltagergruppen, som har deltaget i mere end 9 måneder. Data fra Det psykiatriske centralregister.

Side 13 af 14 Fysisk situation Hvis omfanget af indlæggelser med somatisk sygdom blandt personerne i deltagergruppen reduceres mere end for en tilsvarende kontrolgruppe. deltagergruppen, som har deltaget i mere end 9 måneder. Data fra Landspatientregisteret. * ASI (Addiction Servity Index) opgør hvor belastet en person er på forskellige områder. Note: ASI opgøres en gang om året. Første opgørelse foretages primo 2007, der vil derfor først kunne foretages en opgørelse af succeskriterierne efter ASI-opgørelsen i 2008. Tabel 7: Succeskriterier i forhold til målet om at personer i deltagergruppen skal have mindsket deres barriere for en tilknytning til arbejdsmarkedet på kort sigt. De dimensioner den Der er tale om en succes, arbejdsmarkedsmæssige tilknytning måles på Beskæftigelse Hvis omfanget af personer i deltagergruppen, som er på aktive ydelser eller i beskæftigelse stiger mere end for en tilsvarende kontrolgruppe. Omfatter kun data fra personer ved deres 3. måned i projektet. Data fra Københavns Kommunes Økonomisystem. Beskæftigelse sammenhæng af deres beskæftigelsesmæssige belastning*. Omfatter kun data fra personer ved deres 3. måned i projektet. Data fra ASI (Addiction Severity Index). * ASI (Addiction Severity Index) opgør hvor belastet en person er på forskellige områder. Note: I forsøgsprojektet opgøres ASI ved første indskrivning og efter tre måneder i projektet. Tabel 8: Succeskriterier i forhold til målet om at personer i deltagergruppen skal have mindsket deres barriere for en tilknytning til arbejdsmarkedet på lang sigt. De dimensioner den Der er tale om en succes, arbejdsmarkedsmæssige tilknytning måles på Beskæftigelse Hvis omfanget af personer i deltagergruppen, som er på aktive ydelser eller i beskæftigelse stiger mere end for en tilsvarende kontrolgruppe. deltagergruppen, som har deltaget i mere end 9 måneder. Data fra Københavns Beskæftigelse sammenhæng af deres beskæftigelsesmæssige belastning*. Kommunes Økonomisystem. deltagergruppen, som har deltaget i mere end 9 måneder. Data fra ASI (Addiction Severity Index). * ASI (Addiction Severity Index) opgør hvor belastet en person er på forskellige områder. Note: ASI opgøres en gang om året. Første opgørelse foretages primo 2007, der vil derfor først kunne foretages en opgørelse af succeskriterierne efter ASI-opgørelsen i 2008.

Side 14 af 14 Tabel 9: Succeskriterier i forhold til målet om at motivere målgruppen til at deltage i projektet på kort og lang sigt. De dimensioner motiveringen Der er tale om en succes, måles på Gengangere Gengangere Gengangere Belægningen Belægningen Belægningen Når antallet af gengangere er det samme eller større end sammenlignelige nystartede projekter*. Dog undtaget de personer, som efter deltagelse opnår beskæftigelse eller et beskæftigelsesfremmende tilbud. Når antallet af gengangere er det samme eller større end sammenlignelige projekter*. Dog undtaget de personer, som efter deltagelse opnår beskæftigelse eller et beskæftigelsesfremmende tilbud. Når antallet af gengangere er det samme eller større end sammenlignelige nystartede projekter*. Dog undtaget de personer, som efter deltagelse opnår beskæftigelse eller et beskæftigelsesfremmende tilbud. Når belægningsprocenten er det samme eller større end sammenlignelige projekter*. Når belægningsprocenten er det samme eller større end sammenlignelige projekter*. Når belægningsprocenten er det samme eller større end sammenlignelige projekter*. Efter 3 måneder Efter 9 måneder Når forsøgsprojektet slutter Efter 3 måneder Efter 9 måneder Når forsøgsprojektet slutter * Konkret sker sammenligningen med Dag-til-dag projektet i Bergen og Projekt Fram i København. Oplever deltagerne, at Dag- til dag projektet bidrager til at forbedre deres livskvalitet, og er det vigtigt for dem? Der gennemføres en kvalitativ interviewundersøgelse af brugernes udbytte af indsatsen mht. oplevet livskvalitet og afhjælpning af livskvalitetsproblemer. Interviewguidens temaer baseres på spørgsmål om oplevet livskvalitet, (se kapitel 6 i vidensindsamlingen) som har betydning for deltagerne, og som social aktivering forventes at kunne påvirke. Brugernes udbytte vurderes ud fra, om de f.eks. oplever, at deltagelsen har bidraget til at opfylde et behov for struktur i hverdagen eller ej, og om dette opleves som vigtigt eller betydningsfuldt for brugerne. Det kvalitative interview lader brugeren komme til orde og give respons ud fra egne vurderinger. Brugernes besvarelser kategoriseres ud fra de valgte temaer som hhv. ja og nej. Dermed kan besvarelserne tælles op, og der kan laves indbyrdes sammenligninger mellem forskellige grupper blandt deltagerne.