Dokumentation på dagsordenen! Nye kommuner, nye krav

Transkript

1 Dokumentation på dagsordenen! Nye kommuner, nye krav Dokumentation (ordbog): at fastslå ved hjælp af (især) skriftlige beviser Dokumentation i daglig tale: statistik, rapporter, redegørelser, forskning, cases skrift/lyd/billeder Evaluering (ordbog): At foretage en vurdering

2 Økonomiaftaler de sidste år: Krav om øget dokumentation og mere systematisk evaluering af resultater

3 Hvorfor dokumentation? Nationale krav om gennemsigtighed Redskab til at få lokale tilbud af høj kvalitet Forskningens behov Borgernes behov Mediernes behov

4 Udfordringer Dokumentationskultur Kompetencer Standarder IT

5 Metoder til evaluering og dokumentation Monitorering vs. evaluering Intern vs. ekstern evaluering Effektevaluering vs. procesevaluering Formative vs. summative evalueringer

6 En pragmatisk tilgang Hvor mange penge og hvor meget tid skal der bruges? Ambition skal matche kompetencer Kommunens behov i fokus Tilpasning til politisk efterspørgsel Kontrolgrupper, men ikke nødv. RCT

7 Forskning en kommunal opgave? Kommunale data nødvendige for at blive klogere på, hvilke forebyggelsesindsatser der virker bedst i en dansk kommunal kontekst Og kommunale data er nødvendige for at få viden om hensigtsmæssig organisering og implementering Men de færreste kommuner kan løfte opgaven selv: Samarbejde m andre kommuner Samarbejde m forskere

8 Dokumentation skal tænkes ind fra starten! Behov for før-målinger Tænk dokumentation ind i planlægningsfasen

9 Typer af målepunkter Ressourcer Aktiviteter Effekt

10 Rammeindsatser vs. tilbud Rammeindsatser Bred, relativt uspecificeret målgruppe Konkrete tilbud Konkret indsats rettet mod specifik udvalgt målgruppe Sund kost i børnehaver Mere idræt i skolen Rygestopkursus Indsats over for overvægtige børn Den relevante dokumentation afhænger af, om det er en rammeindsats eller et tilbud

11 Dokumentation i forhold til projektet Evaluering, som gennemføres af COWI Til Sundhedsstyrelsen hvad er der kommet ud af de mange penge? Dokumentation til brug internt i kommunen Ledelsesinformation: hvad er der kommet ud af indsatsen? Hvad har vi fået ud af at deltage i projektet? Skal projektet fortsætte, når projektpengene løber ud? Læring: hvad er der kommet ud af indsatsen, hvor skal vi justere for at få bedre effekt?

12 Indsatsområder i handleplaner Begrænse tilgængeligheden af alkohol Kommunen som arbejdsplads personalepolitik De professionelle funktioner de mange faggrupper i kommunerne, der møder borgerne Kommunens institutioner skoler, daginstitutioner, idrætshaller Rådgivning og alkoholbehandling

13 Kommunens institutioner Rammeindsats! Ressourcer: personaletimer i hhv forvaltninger og institutioner, uddannelse, informationsmateriale Aktiviteter: Er politikker vedtaget, er de implementeret?, hvad er der sat igang af konkrete tiltag? Effekt: spørgeskemaundersøgelse fx i skoler (evt. kombineret med andre forebyggelsestemaer) eller bl.a. brugere af idrætshaller. Stikprøver eller totalundersøgelser? Har indsats virket? Hvorfor/hvorfor ikke? (Læring!) Effekt kan også kortlægges kvalitativt fx gennem interview med nøglemedarbejdere/udvalgte brugere eller der kan anvendes observationsmetoder

14 De professionelle funktioner Rammeindsats eller konkret tilbud? Ressourcer: personaletimer i forvaltninger, uddannelse, informationsmateriale, udgifter/merudgifter til de tilbud, der visiteres til Aktiviteter: Hvor mange visiteres til konkrete tiltag? (Hvis få: det bør det undersøges hvorfor), Hvem tager imod et tilbud og hvem gør ikke? Effekt: Effekt af konkret tilbud blev vanerne ændret? Effekt afledt på sagsbehandlerens område: kom personen i job? Blev en bedre forælder?

15 Rådgivning og alkoholbehandling Konkret tilbud! Ressourcer: personaletimer i forvaltning, personaletimer i konkret tilbud, lokaler, informations- og undervisningsmateriale, uddannelse Aktiviteter: Udbredelse og omfang, karakteristika af deltagerne, fremmøde, andel, der gennemfører Effekt: Ændrede alkoholvaner, fx. Målt gennem spørgeskema. Husk førmåling, efter-måling og opfølgende måling

16 Kobling til kommunens øvrige styring Overensstemmelse! Nødvendigt med klare målbare mål Hvordan indtænkes dokumentation og evaluering i de fremtidige beslutninger? Integration i kvalitetsmodeller

17 Læring Læring Netværk samarbejd om dokumentation og evaluering Feedback til udførerledet!

18 KL s anbefalinger ift. dokumentation 1. Kommunens behov bør være i centrum 2. Indsatsen skal være omkostningseffektiv 3. Minimum: en monitorering af indsatsten i form af nøgletal 4. Feedback til udførerledet 5. Effektmålinger bør indtænkes førmålinger er her vigtige 6. RCT-målinger - kun i begrænset omfang 7. Behov for udvikling af standarder 8. Bidrag til forskning men find samarbejdspartnere (andre kommuner og forskningsinstitutioner) 9. Dan netværk, hvor der samarbejdes om dokumentation 10. IT-platform - undersøg om eksisterende systemer kan dække behovet