EVALUERING AF VIDENFACILITATORMIDT Camilla Kølsen Rikke Wetterstrøm
INDHOLD Evalueringens formål Evalueringens indhold Opmærksomhedspunkter Metode Datagrundlag Resultater Effektmåling Læringscases 09-03-2016 Side 2
EVALUERINGENS FORMÅL VidenFacilitatorMidt har som specifikt mål at supplere InnoBooster-programmet ved at tilbyde uvildig facilitering til de ca. 100 smv ere, der i Region Midtjylland i 2015 forventes at indgå i samarbejde med videninstitutioner Evaluering har som formål: at opsamle viden og erfaring om vidensamarbejdsprocesserne undervejs i forløbet og løbende lave en aktiv sparring med partnerskabet bag VidenFacilitatorMidt, at lave en samlet afsluttende evaluering af forløbet og dets resultater med afsæt i bl.a. erfaringerne fra Genvej til Ny viden, at lave et oplæg til Region Midts efterfølgende effektmåling af indsatsen. 09-03-2016 Side 3
EVALUERINGENS INDHOLD Evalueringen har ikke en traditionelt vurderende konklusion ift. om indsatsen har leveret på succeskriterierne, men dokumenterer og vurderer under hvilke omstændigheder facilitering giver mening og hvad faciliteringsprocessens resultatskabelse påvirkes af. Evalueringen omhandler derfor virksomhedernes oplevede resultater af faciliteringen samlet set, og ikke en vurderingen af, om faciliteringsforløbet lever op til succeskriterieret om bevilligede ansøgninger for VidenFacilitatorMidt. 09-03-2016 Side 4
OPMÆRKSOMHEDSPUNKTER - FORHOLD DER HAR PÅVIRKET VFM FORLØBET Nye IB retningslinjer undervejs har bl.a medført at netværksmøderne har haft en anden form end oprindeligt tiltænkt. De nye retningslinjer samt den midlertidige lukning for behandling af ansøgninger hos Innovationsfonden har desuden lagt pres på innovationsnetværkene ift. realiseringen af Region Midtjyllands resultatmål 1 inden for projektperioden. Begge dele har vanskeliggjort vores vurdering af den løbende kompetenceudvikling i forbindelse med og mellem netværksmøderne samt muligheden for at anvende evalueringens resultater undervejs i forløbet ift. at fremme og forbedre det 1-årige forløb samt at følge de planlagte 5 forløb. 09-03-2016 Side 5
METODE INNOVATIV EVALUERING Evalueringen er metodisk opbygget omkring en forandringsmodel, der sætter fokus på hvad virker for hvem under hvilke omstændigheder. Forandringsmodellen stammer fra tilgangen Innovativ Evaluering. Der er i evalueringen fokus på, hvilken virksomhedskontekst faciliteringen er blevet gennemført i og facilitators muligheder og kompetencer for at gennemføre faciliteringen, hvilke aktiviteter, der er foregået og hvilke mekanismer, faciliteringen har været påvirket af. Forandringsmodellen har givet mulighed for sammen med facilitatorer og virksomheder at formulere systematiske antagelser om, hvad det er, der virker i VFM-programmet, og efterfølgende at teste disse antagelser i en kvantitativ analyse. 09-03-2016 Side 6
MIXED METHODS TILGANGEN Resultaterne i denne evaluering baserer sig på et mixedmethods studie, hvor der indgår case-beskrivelser, workshops med hhv. virksomheder og facilitatorer, passive observationer af møder og facilitering samt en kvantitativ undersøgelse. Mixed-methods tilgangen bidrager dermed til nærværende analyse som en ramme, der dels fremmer kombinationen af forskellige datakilder, og dels fremmer et eksplicit fokus på efterspørgslen af viden på både enkelt virksomhedsniveau/personligt facilitatorniveau og på gruppeniveauer for virksomhederne (Type A/B/C). Det er værd at understrege vigtigheden af mixed methodstilgangen i denne evaluering, fordi de forskellige datakilder understøtter hinanden, og dermed begrænser effekterne af de forhold, der udfordrer validiteten. 09-03-2016 Side 7
DATAGRUNDLAG Kvalitative data Spørgeskema implementeret i survey- xact og analyseret med afsæt i hypoteser fra forandringsmodellen. Holdningsundersøgelse ift. hvad virksomhederne har fået ud af VFM Population = 165 Antal besvarelser = 87 A= faciliteringsforløb (54) B= afbrudt faciliteringsforløb (9) C= Nej tak til faciliteringsforløb (21) Kvantitative data Fokusgruppeinterviews med 14 facilitatorer ifm. de 4 netværksmøder Observationer ifm. 3 af de deltagendes netværks afklarings- og modningsmøder med virksomheder. Workshop for 4 virksomheder, som alle har lidt eller meget erfaring med samarbejde med eksterne videnspartnere 09-03-2016 Side 8
RESULTATER - ANTAGELSE Grundlæggende antagelse, at faciliteringsprocessen i sig selv bevirker, at virksomhederne opnår bedre resultater end virksomheder, der ikke har gennemgået en facilitering af deres idémodning. Det, der er i evalueringen omtales som resultater er dermed resultater af møderne og arbejdet med en facilitator. 09-03-2016 Side 9
OPLEVEDE RESULTATER AF FACILITERINGEN Manglende/mindre erfaring med vidensamarbejde er betydningsfuldt for, om virksomheden oplever behov for en facilitator til at starte vidensamarbejdet op første gang. Virkningen af en facilitator er, at der i højere grad indsendes en ansøgning, eller tages andre konkrete skridt for at komme videre med et vidensamarbejde; altså at der banes vej for det første vidensamarbejde. Uden facilitator kan der ikke findes nye partnere eller indsendes en ansøgning. Dette er særligt tydeligt, hvis virksomheden ikke har tidligere erfaring med vidensamarbejde. I den gruppe er det også fremtrædende, at virksomhederne efter faciliteringen i højere grad tør kaste sig ud i vidensamarbejde. 09-03-2016 Side 10
RESULTATER FORTSAT Indsendelse af ansøgning fordrer, at virksomheden oplever relevant rådgivning i faciliteringen, og at den relevante rådgivning igen afhænger af en interesseret facilitator. Kendskab til facilitator på forhånd skaber bedre indsigt i erhvervsfremmesystemet og gør samtidig, at virksomhederne tør samarbejde i vidensamarbejder. Den positive forventning til facilitatoren og tilliden til facilitatoren bevirker, at virksomheden får nye partnere ud af faciliteringsprocessen. Det er en ny antagelse i evalueringen, at kendskabet til facilitator på forhånd også påvirker resultaterne af en faciliteringsproces, især hvis virksomheden samtidig mangler ressourcer til at starte et vidensamarbejde op. 09-03-2016 Side 11
RESULTATER FORTSAT De rigtige videnspartnere påvirker indsendelsen af en ansøgning positivt, og den rigtige facilitator/ partner påvirker, at virksomhederne får mere indsigt i erhvervsfremmesystemet, og tør kaste sig ud i samarbejdet. Kendskabet til facilitator på forhånd fremmer, at virksomheden får nye partnere ud af projektet. Det er facilitatorens evner til at udfordre virksomhedens vanetænkning og til at afdække virksomhedernes behov, der er de mest centrale facilitatorkompetencer. Disse evner påvirker, at der findes nye partnere og skabes indsigt i erhvervsfremmesystemet. De virksomheder der har fået sparring på deres projekt ide, og er klædt på til at komme videre, er påvirket af facilitatorens evne til at afdække virksomhedens behov for udvikling. 09-03-2016 Side 12
EFFEKTMÅLING Effektvurderingen skal bruges til at give Region Midtjylland viden om, hvad effekterne er af VidensFacilitatorMidt indsatsen. Effektvurderingen vil bevare fokus på at bidrage til, hvad der skaber effekterne, og hvad effektskabelsen påvirkes af, så Region Midtjylland får helt konkret viden om, hvordan de kan styrke forandringsprocesserne i virksomhederne mod mere vidensamarbejde og derigennem fremme de ønskede resultater om mere innovation og vækst i regionen 09-03-2016 Side 13
EFFEKTMÅLING - FORTSAT Nedenstående forandringsmodel opsummerer den viden, der er udviklet i evalueringen og den lægger grunden for hypoteserne, variablene og tilgangen i den kommende effektvurdering. 09-03-2016 Side 14
LÆRINGSCASE SCAN MEK 09-03-2016 Side 15
LÆRINGSCASE BY BANG 09-03-2016 Side 16
LÆRINGSCASE - FØDEVARER 09-03-2016 Side 17
Side 18 Tak for opmærksomheden!
REFLEKSION I GRUPPER Resultaterne, cases og forslag til effektmåling - Giver det mening? - Kan I genkende Jer selv i resultaterne? - Er der noget der overrasker? - Hvordan kan I bruge cases og evaluering?