Evaluering af KLIKOVAND 2012-2014 For KLIKOVAND af Oxford Research D. 17. juni 2015
Baggrund og formål med evalueringen af KLIKOVAND 2012-2014 Projektet KLIKOVAND (KLIma, KOmmuner, VAND), der er et fagligt samarbejde mellem størstedelen af kommunerne i regionen (22), vand- og spildevandsselskaber (12) og Region Hovedstaden har til formål at skabe rammerne for vidensopbygning, vidensdeling og erfaringsudveksling inden for klimatilpasning. Målet er bl.a. at kunne håndtere skybrud bedre i fremtiden. Projektet har løbet i tre år fra 2012-2014 og fortsætter i perioden 2015-2017 med KLIKOVAND 2.0 Nærværende evaluering belyser brugernes - dvs. ledere og medarbejde i kommuner og vand- og spildevandsselskaber - opfattelse og udbytte af KLIKOVAND for perioden 2012-2014 med særlig fokus på resultater (brugernes output), synlighed og formidling. Evalueringen peger desuden fremad og kommer med anbefalinger til det fremadrettede arbejde i KLIKOVAND.
Hvad bygger evalueringen af KLIKOVAND 2012-2014 på? Løbende dialog med: KLIKOVANDs projektledelse Survey med brugere - 70 gennemførte spørgeskemaer (svarprocent på 45 pct.) Interview med 5 interne og 15 brugere Evaluerings- og fortolknings seminar mhp. kvalificering af resultater og anbefalinger
Svær KLIKOVAND opstart, men skibet er på rette kurs Klimatilpasningsplaner er en relativt ny opgave for kommunerne (aftale mellem KL og regeringen sommeren 2012). Mange spørgsmål ift. hvordan opgaven skulle gribes an og klimatilpasningsarbejdet i kommunerne gribes an forskelligt, de er på forskellige stadier og ressourcerne hertil er også på forskellige niveauer og så er der forsyningerne. Det gør det svært at lave arrangementer og produkter, der passer til alle brugere Ny(e) projektleder(e) midtvejs i processen fra fokus på at skabe netværk til et større fokus på efterspurgte leverancer og opfyldelse af resultatkontrakten Det har også taget tid at sætte retning for KLIKOVAND - trial and error tilgang - og at finde sin værdiskabende rolle - raison d'être - blandt andre initiativer såsom Vand i Byer og Regnvandsforum Det har taget tid at opbygge et værdiskabende netværk og skabe ejerskab hertil der er nu en platform for det videre (sam)arbejde Samlet set er brugerne generelt tilfredse og mange får et værdifuldt output fra KLIKOVAND, omend der er plads til forbedringer
KLIKOVANDs resultater KLIKOVAND er kommet i mål med alle delleverancer i resultatkontrakten, herunder afholdelse af en lang række arrangementer og udarbejdelse af produkter inden for fire spor/indsatser jura, kompetenceudvikling, processer/beslutningsstøtte og formidling/kommunikation. Enkelte af de oprindelige leverancer er blevet ændret undervejs som en tilpasning til ændrede behov i målgruppen, jf. afrapportering til Region Hovedstaden februar 2015 Der er etableret en velfungerende KLIKOVAND organisation med en styregruppe, et forretningsudvalg, en overordnet projektleder, fire delprojektledere og arbejdsgrupper og et netværk af medarbejdere og ledere fra 22 kommuner og 12 vand-/forsyningsselskaber (i KLIKOVAND 1.0) i hovedstadsregionen, der bl.a. har deltaget i 1 eller flere KLIKOVAND arrangementer med fokus på forskellige aspekter af arbejdet med klimatilpasning Størstedelen af brugerne fremhæver, at de har fået et styrket netværk og nye kontakter via KLIKOVAND Ligeledes vurderer en stor del af brugerne, at de har fået ny viden, nye ideer eller inspiration til klimatilpasningsarbejdet ude i kommunerne fra KLIKOVAND
Begrænset brug af KLIKOVANDs produkter Der er generelt tilfredshed med KLIKOVANDs produkter (blandt dem, der har benyttet produkterne) KLIKOVANDs Matrice II over modelvalg og anbefalinger fra klikovand.dk Produkterne giver primært ny relevant viden/nye kompetencer (49 pct.) og styrket netværk/nye kontakter (47 pct.). De mest benyttede produkter er KLIKOVANDs og Teknologisk Instituts klimatilpasningsuddannelse (34 pct.), Oversigt over temadage og kurser inden for klimatilpasning (29 pct.), Blog-stafet (26 pct.) og Jura Hovedspørgsmål, ret og vrang i klimatilpasningen (18 pct.) I forlængelse heraf peger flere interviewpersoner på at Juridiske håndbog er godt redskab, men der er også udfordringer med at holde den up-to-date, grundet en meget kompleks klimatilpasningslovgivning Der er dog mange, der ikke bruger KLIKOVANDs produkter og mange, der ikke kender til dem - eksempelvis er der ingen, der har benyttet Beslutningsmatrix en bl.a. fordi 3 ud af 5 ikke har hørt om produktet (se matrix til højre herfor) Det begrænsede kendskab skyldes bl.a. at de gemmer sig på hjemmesiden og det er svært at huske sig selv på, at de kan bruges i hverdagen En anden udfordring er, at det ofte tager lang tid at udvikle produkterne eksempelvis var mange kommuner nået i mål med deres risikokortlægning før GreenSpot-kortlægning og vejledning blev færdig Ofte er behovene også meget specifikke, og det kan være svært at lave et specifikt produkt der kan anvendes bredt. Citat fra medarbejder i kommune
Tilfredse brugere af KLIKOVANDs arrangementer Der er generelt stor tilfredshed med KLIKOVAND-arrangementernes form og indhold (75 pct.) Arrangementerne giver primært ny relevant viden/nye kompetencer (72 pct.) og styrket netværk/nye kontakter (66 pct.). Hver femte bruger mener, at samarbejdet mellem kommunen og vandselskabet om klimatilpasning er blevet styrket pga. af KLIKOVANDs arrangementer (21 pct.) Omkring 1 ud af 10 har ikke fået noget ud af at deltage i KLIKOVANDs arrangementer (11 pct.) Der var mange aktører på banen [med arrangementer om klimatilpasning], men KLIKOVAND tog særlig fat i kommunernes rolle, og derfor var det også meget relevant. Der har været gode arrangementer, hvor man er kommet klogere og mere inspireret hjem. Citat fra medarbejder i kommune KLIKOVAND har været et godt forum til inspiration specielt i den fase hvor vi skulle lave klimatilpasning uden erfaring. Citat fra projektleder i kommune
KLIKOVANDs organisering og projektledelse De fleste interviewpersoner er tilfredse med projektledelsen - mange er imponeret over, hvor langt KLIKOVAND er kommet på trods af, at få kommuner/forsyninger tager teten og et lille sekretariat Dog efterspørger flere et bredere samarbejde på tværs af kommuner, forsyninger og regionen særligt med bedre inddragelse af forsyningerne i arbejdsgrupperne Projektledelsen består primært af medarbejdere fra Gladsaxe Kommune nogle fremhæver, at der er behov for at flere kommer på banen Jeg var den eneste, der deltog fra forsyningerne og det er lidt generelt for KLIKOVAND. Det er et udfald af den måde KLIKOVAND er skruet sammen på. Den problemstilling man har i forsyningerne ser man ikke i KLIKOVAND Citat fra medarbejder i forsyning Der er lagt en imponerende arbejdsindsats, men det er et problem at KLIKOVAND har været afhængig af at få kommuner har trukket et stort læs, og de må vi være taknemmelig for. Vi har ikke kunne levere en arbejdsindsats Citat fra medarbejder i kommune
KLIKOVAND er ikke brændt tilstrækkeligt igennem (endnu) og kommunikation halter KLIKOVANDs synlighed og tydelighed blandt kommuner og vand-/forsyningsselskaber er på rette vej, men der skal fortsat arbejdes på at øge kendskabet til KLIKOVAND og KLIKOVANDs tilbud Flere interviewpersoner peger på, at kommunikationen fra KLIKOVAND generelt kan forbedres omend 41 pct. er tilfredse med KLIKOVANDs kommunikation og nyhedskanaler Ca. 1/3 af brugerne vurderer, at KLIKOVAND kun i begrænset omfang er kendt blandt KLIKOVANDs målgruppe (34 pct.) Over 40 pct. mener, at KLIKOVAND kun i mindre grad eller slet ikke er forankret ude i organisationerne. Det underbygges af, at flere interviewpersoner peger på, at KLIKOVAND generelt ikke er tilstrækkeligt forankret. Flere oplever, at det kun er relativt få, der kender til og bruger KLIKOVAND, og at mange planlæggere, driftsfolk og ledere ikke kender til KLIKOVAND. Størstedelen besøger/læser sjældent eller aldrig KLIKOVANDs hjemmeside (2 ud af 3) og LinkedIngruppe (3 ud af 4). Nyhedsbrevet er den mest læste informationskilde. Her er det kun 2 ud af 5, der sjældent eller aldrig læser det.
For mange spiller KLIKOVAND en begrænset rolle i forhold til det konkrete klimatilpasningsrelaterede arbejde i kommunerne Mange og særligt de ressourcestærke kommuner på klimatilpasningsområdet vurderer, at de kunne have løst deres klimatilpasningsrelaterede arbejdsopgaver uden involvering af KLIKOVAND selvom de er blevet inspireret og har fået ny relevant viden Over halvdelen (56 pct.) mener, at KLIKOVAND dækker de behov brugerne har ift. klimatilpasning Nogle interviewpersoner fremhæver, at KLIKOVAND har spillet en rolle ift. at kommunerne er kommet i mål med deres klimatilpasningsplaner. Knap halvdelen (46 pct.) af brugerne mener, at KLIKOVANDs tilbud og aktiviteter kun i mindre grad eller slet ikke har medvirket til at løse de udfordringer, som brugerne har ift. klimatilpasning heraf mener 13 pct. at KLIKOVAND slet ikke medvirker til at løse de udfordringer der er ift. klimatilpasning Jeg ser lidt KLIKOVAND som et supplement. Det har styrket mit netværk, men fordi vi er længere fremme, har vi ikke benyttet KLIKOVAND særligt meget Citat fra medarbejder i kommune På det strategisk niveau står kommunerne i KLIKOVAND meget forskelligt og det betyder noget for samarbejdet i KLIKOVAND, men på et mere konkret niveau ser jeg bedre mulighed for at samarbejde Citat fra leder i kommune
Brugernes ønsker til KLIKOVAND 2.0 Der er generelt opbakning til KLIKOVAND 2.0 og særligt den oprettede task force, da det for mange kommuner nu handler om at få implementeret klimatilpasningsstrategierne Flere brugere efterlyser en bredere deltagelse i KLIKOVANDs aktiviteter særligt at få inddraget vand- /forsyningsselskaberne bedre Der efterspørges øget fokus på at etablere samarbejder om konkrete handlinger og projekter, som politikkerne kan sole sig i Ift. arrangementer efterspørger flere, at KLIKOVAND bliver mere specifikke og fokuserer på konkrete cases indenlandske såvel som udenlandske fx studieture og best practice med fokus på konkrete løsninger Der bliver desuden efterspurgt arrangementer med faglige indspark fra fx Naturstyrelsen eller øvrige interessenter (myndighed, erhvervsliv nationalt og internationalt) Nogle respondenter fremhæver, at KLIKOVAND bør profilere sig bedre med et eller få flagskibe inden for klimatilpasning da der er for stort fokus på for mange forskellige aktiviteter
Fremadrette læring og anbefalinger til næste skridt (KLIKOVAND 2.0) Task Forcen til at hjælpe kommunerne med implementering af klimatilpasningsplaner er et vigtigt tiltag i KLIKOVAND 2.0 Kommunikation og formidling af dels hvad KLIKOVAND står for og kan tilbyde og dels KLIKOVANDs produkter bør være et fokusområde i KLIKOVAND 2.0 Alternative platforme og informationskanaler som tidsskrifter el.lign. kan overvejes Forankring af KLIKOVAND i kommunerne og ikke mindst i forsyningerne bør i forlængelse heraf også være et fokusområde i KLIKOVAND 2.0 her kan task forcen spille en vigtig rolle KLIKOVANDs produkter skal kommunikeres, opdateres løbende og sættes i spil fx når Task Forcen besøger brugerne, så de anvendes af flere KLIKOVAND satser på Task Force KLIKOVAND samarbejder med Region Hovedstaden om at oprette et regionalt Task Force. Task Forcen skal støtte jer som kommuner og vandselskaber med at realisere jeres klimatilpasningsplaner. Kilde: klikovand.dk, 30. april 2015 Vær strategisk bevidst om, hvor bredt KLIKOVAND skal ud skal KLIKOVAND være for alle kommuner og forsyninger i Hovedstadsregionen? Eller for færre og mere fokuseret?
Resultater af spørgeskemaundersøgelsen
I alt har 155 personer i kommuner og forsyningsselskaber modtaget spørgeskemaundersøgelsen: 70 brugere har gennemført skemaet 45 svarprocent Hvem har svaret? Fordelingen af svar fra hhv. kommune og vand/forsyningsselskab stemmer nogenlunde overens med den reelle deltagelse i KLIKOVAND: 12 fra vand/forsyningsselskab (35 pct.) 22 fra kommuner (65 pct.) Gennemførselsoversigt Hvor er du ansat? Ønsker ikke at deltage 12% Ufuldstændige 2% Vandselskab/forsy ningsselskab 29% Gennemførte interview 45% Ikke svaret 41% Kommune 71% n = 70
Næsten ALLE respondenter, der har svaret på surveyen, har deltaget i KLIKOVANDs arrangementer Brugerne anvender i høj grad KLIKOVANDs arrangementer. 93 pct. har enten deltaget i ét eller flere af arrangementerne. De fleste (57 pct.) har deltaget i 2-4 arrangementer Ja 2 til 4 arrangementer 57% Ja ét enkelt arrangement 27% Ja 5 arrangementer eller mere 9% Ved ikke 4% Ingen 3% 0% 10% 20% 30% 40% 50% 60% Kilde: Oxford Research 2015 n = 70
Brugerne hører primært om KLIKOVANDs arrangementer fra egne kollegaer Information om KLIKOVANDs arrangementer får brugerne primært fra kollegaer inden for egen organisation (48 pct.). Knap 1 ud af 5 hører primært om KLIKOVANDs arrangementer fra nyhedsbrevet (17 pct.) Hvordan hørte du/i om KLIKOVANDs arrangementer? Fra kollega (inden for egen organisation) 48% Fra KLIKOVANDs Nyhedsbrev 17% Fra Klikovand.dk 12% Fra netværk (uden for egen organisation) 12% Fra KLIKOVANDs LinkedIn gruppe 3% Ved ikke 6% Andet 2% 0% 10% 20% 30% 40% 50% 60% Kilde: Oxford Research 2015 n = 70
Begrænset brug af KLIKOVANDs produkter Samlet set anvender 82 pct. af brugerne ikke KLIKOVANDs produkter. 39 pct. af brugerne har hørt om produkterne, men anvender dem ikke, mens 43 pct. slet ikke har hørt om KLIKOVANDs produkter Har du hørt om eller benyttet nogle af KLIKOVANDs produkter? Nej, jeg/vi har ikke hørt om produktet 43% Ja, jeg/vi har hørt om produktet, men har ikke benyttet det 39% Ja, jeg/vi har benyttet produktet 18% 0% 5% 10% 15% 20% 25% 30% 35% 40% 45% Kilde: Oxford Research 2015 n = 70
Redskaber anvendes i mindre grad af brugerne Ud af de 18 pct. som benytter KLIKOVANDs produkter benyttes redskaberne til arbejdet med klimatilpasning mindst fx Beslutningsmatrix (0 pct.), Green-Spot kortlægningen ( 6 pct.). Produkter i relation til arrangementerne anvendes mest fx klimatilpasningsuddannelse (36 pct.) og Oversigten over temadage og kurser (30 pct.) KLIKOVANDs og Teknologisk Instituts klimatilpasningsuddannelse 36% Oversigt over temadage og kurser inden for klimatilpasning 30% Blog-stafet 27% Jura Hovedspørgsmål, ret og vrang i klimatilpasningen 19% Sammenstilling af risikokort på tværs af kommunegrænser 7% GreenSpot-kortlægning og vejledning 6% Beslutningsmatrix 0% 0% 5% 10% 15% 20% 25% 30% 35% 40% Kilde: Oxford Research 2015 n = 70
Begrænset brug af KLIKOVANDs informationskilder Samlet set er det begrænset, hvor meget brugerne benytter/besøger KLIKOVANDs informationskilder om end 17 pct. angiver at benytte nyhedsbrevet ofte eller meget ofte. LinkedIn gruppen benyttes mindst af KLIKOVANDs informationskilder. Hvor ofte anvender/besøger du følgende af KLIKOVANDs informationskilder? KLIKOVAND s LinkedIn gruppe 3% 21% 76% KLIKOVAND s nyhedsbrev 17% 39% 44% KLIKOVAND s hjemmeside (klikovand.dk) 1% 33% 66% 0% 10% 20% 30% 40% 50% 60% 70% 80% Kilde: Oxford Research 2015 Sjældent/aldrig En gang imellem Ofte/meget ofte n = 70
Hvordan er KLIKOVAND forankret i kommuner og vand- /forsyningsselskaber? Samlet set vurderer 53 pct. af brugerne, at KLIKOVAND i høj eller nogen grad er forankret blandt kollegaer i kommunerne eller vand-/forsyningsselskaberne. Dog peger 42 pct. af brugerne på, at KLIKOVAND i mindre grad eller slet ikke er forankret. I hvilken grad vurderer du, at KLIKOVAND er kendt/bliver brugt blandt medarbejdere og ledere i din egen kommune eller vand-/forsyningsselskab? 40% 35% 37% 36% 30% 25% 20% 15% 16% 10% 5% 0% 6% 6% I høj grad I nogen grad I mindre grad Slet ikke Ved ikke Kilde: Oxford Research 2015 n = 70
KLIKOVAND er mere forankret i kommunerne end i vand- /forsyningsselskaberne 60 pct. af brugerne fra vand-/forsyningsselskaberne vurderer, at KLIKOVAND i mindre grad er kendt og/eller bliver anvendt blandt medarbejdere og ledere i deres egen organisation. 70% 60% 50% 40% I hvilken grad vurderer du, at KLIKOVAND er kendt/bliver brugt blandt medarbejdere og ledere i din egen kommune eller vand-/forsyningsselskab? 42% 60% 30% 20% 20% 25% 26% 10% 5% 4% 10% 0% I høj grad I nogen grad I mindre grad Slet ikke Kilde: Oxford Research 2015 Kommune Vandselskab/forsyningsselskab (Kommune) n = 50 (Vand-/forsyningsselskab) n= 20
Kommuner oplever større tilfredshed med KLIKOVANDarrangementer end vand-/forsyningsselskaber 83 pct. af brugerne fra kommunerne er tilfredse med KLIKOVANDs arrangementer, mens kun 58 pct. af brugerne fra vand-/forsyningsselskaberne er tilfredse med arrangementerne. Hvor tilfreds er du generelt med KLIKOVAND-arrangementernes form og indhold? 90% 80% 83% 70% 60% 58% 50% 40% 30% 26% 20% 10% 11% 4% 11% 0% Meget tilfreds / tilfreds Hverken eller Mindre tilfreds / Utilfreds Kilde: Oxford Research 2015 Kommune Vandselskab/forsyningsselskab (Kommune) n = 46 (Vand-/forsyningsselskab) n= 19
Forskelle på resultater ift. brugernes output af arrangementerne... 32 pct. af brugerne fra vand-/forsyningsselskaberne har fået styrket samarbejdet med en kommune om klimatilpasning. Det samme gælder for kun 17 pct. af brugerne fra kommunerne. Til gengæld har 21 pct. af brugerne fra vand-/forsyningsselskaberne ikke fået noget ud af KLIKOVAND-arrangementerne. Det samme gælder for kun 7 pct. af brugerne fra kommunerne. Hvilke af nedenstående resultater har din/jeres deltagelse i KLIKOVAND-arrangementerne medført? Har fået ny relevant viden/nye kompetencer 58% 78% Har fået styrket netværk/fået nye kontakter til fx potentielle samarbejdspartnere 58% 70% Samarbejdet internt mellem enheder/afdelinger er blevet styrket 0% 22% Samarbejdet mellem kommunen og vandselskabet om klimatilpasning er blevet styrket 17% 32% Har fået hjælp til processen omkring udarbejdelse af klimatilpasningsplanen Har fået konkrete ideer til nye samarbejdsprojekter med en nabokommune eller naboforsyning 5% 5% 13% 13% Har startet et nyt samarbejdsprojekt op med en nabokommune eller naboforsyning Andet 0% 0% 4% 4% Har overordnet set ikke fået noget ud af deltagelse i KLIKOVAND-arrangementer 7% 21% Kilde: Oxford Research 2015 Kommune 0% 10% 20% 30% 40% 50% 60% 70% 80% 90% Vandselskab/forsyningsselskab (Kommune) n = 46 (Vand-/forsyningsselskab) n= 19
Forskelle på resultater ift. brugernes output af produkterne... Samlet set får brugerne fra kommunerne mere ud af KLIKOVAND-produkterne (94 pct.). 25 pct. af brugerne fra vand-/forsyningsselskaberne får ikke noget ud af at anvende KLIKOVANDprodukterne. Dog har 1 ud af 10 brugere fra vand-/forsyningsselskaber startet nyt samarbejde med en nabokommune eller naboforsyning på baggrund af produkterne. Hvilke af nedenstående resultater har din/jeres deltagelse i KLIKOVAND-produkterne medført? Har fået ny relevant viden/nye kompetencer 35% 56% Har fået styrket netværk/fået nye kontakter til fx potentielle samarbejdspartnere 35% 52% Samarbejdet mellem kommunen og vandselskabet om klimatilpasning er blevet styrket 8% 20% Samarbejdet internt mellem enheder/afdelinger er blevet styrket Har fået konkrete ideer til nye samarbejdsprojekter op med en nabokommune eller naboforsyning Har fået hjælp til processen omkring udarbejdelse af klimatilpasningsplanen Har startet et nyt samarbejdsprojekt op med en nabokommune eller naboforsyning 0% 0% 0% 0% 16% 14% 12% 10% Andet 0% 4% Har overordnet set ikke fået noget ud af at anvende i KLIKOVAND-produkter 6% 25% Kilde: Oxford Research 2015 Kommune 0% 10% 20% 30% 40% 50% 60% (Kommune) n = 50 Vandselskab/forsyningsselskab (Vand-/forsyningsselskab) n= 20