Voice of Users/Brugernes stemme

Transkript

1 Voice of Users/Brugernes stemme Årsmøde 2011 Odense 24. november 2011 Carla Tønder Jessing Videncenter for Uddannelses- og Erhvervsvejledning VOK, VIA UC

2 Nordic network for adult learning Voice of users in promoting quality of guidance services for adults in the Nordic countries 2

3 1. Om undersøgelsen- samfundsmæssig og teoretisk baggrund, mål, metoder mv. 2. Danske og nordiske interviewresultater 3. Spørgeskemaundersøgelsens resultater for alle fem lande 4. Opsummering 5. Anbefalinger 6. Diskussion Carla Tønder Jessing

4 1. Voice of Users/Brugernes stemme Hvilken slags projekt er det? En evaluerende undersøgelse af kvalitetsaspekter i vejledning i de fem nordiske lande: Island, Norge, Sverige, Finland og Danmark Projektet undersøger brugernes/de vejledtes og aktørernes opfattelser af vejledningens resultater Fokus: Vejledning i forhold til beskæftigelse, personlig udvikling og social inklusion Deltagere: Voksne vejledte (med ingen eller kort uddannelse), vejledere og ledere af vejledning/beslutningstagere Carla Tønder Jessing ctj@viauc.dk

5 Baseretpået tidligereprojekt: Expected outputs/outcomes of guidance services for adults in the Nordic countries(nvl, 2009) Heri blev et hul i vejledningsforskningen idenficeret: An explicit gap in the research and national quality frameworks seems to be in the user involvement in the design and evaluation of the guidance services (Vuorinen et al., 2009). Første kvantitative undersøgelse, der sammenligner vejledning i de fem nordiske lande Undersøgelsen er både national og tværnational Èt af de eksplicitte formål med undersøgelsen er at påvirke vejledningspolitikken Lytter vi til brugerne? Carla Tønder Jessing ctj@viauc.dk

6 Hvorfor skulle vi lytte til brugerne? devolving to individuals and communities the right to play an active role in shaping the services that affect their lives (Helen Plant, 2006, p. 2) Stigende vægt på brugerinvolvering i udvikling af offentlig service demokratikrav Kvalitetssikring: Brugerne ved bedst, hvilke behov de har Empowerment Carla Tønder Jessing ctj@viauc.dk

7 Samfundsmæssig baggrund: Den hurtige udvikling af voksenvejledning Videnssamfundet kræver en uddannelsespolitik for livslang læring Livslang læring kræver livslang vejledning Karriereplanlægning (og karriereplanlægningskompetencer) IN THE CONTEXT OF lifelong learning, guidance refers to a range of activities that enables citizens of any age and at any point in their lives to identify their capacities, competences and interests, to make educational, training and occupational decisions and to manage their individual life paths in learning, work and other settings in which these capacities and competences are learned and/or used Draft Resolution of the Council and of the representatives of the Member States meeting within the Council on Strengthening Policies, Systems and Practices in the field of Guidance throughout life in Europe. 18 May 2004 Carla Tønder Jessing ctj@viauc.dk

8 Teoretisk baggrund: Teori om evaluering: proces og udbytte Vejledningsteori: Personligt udbytte Karriereudviklingsteori Uddannelsesmæssige og erhvervsmæssige resultater Brugerinvolvering i organisering af og politikudvikling for vejledningsydelser Carla Tønder Jessing ctj@viauc.dk

9 Voice of Users/Brugernes stemme Projektperiode: 1. Fokusgruppeundersøgelse: April-august Spørgeskemaundersøgelse: Efterår Undersøgelsesresultater i rapport: Primo 2011 Finansiering: Nordisk Netværk for Voksenlæring (NVL), som er initieret og finansieret af Nordisk Ministerråd og administreres af den norske organisation Vox (nationalt organ for kompetencepolitik) Carla Tønder Jessing ctj@viauc.dk

10 Voice of Users/Brugernes stemme Undersøgelsesgruppe: Undersøgelsen foretages af 12 personer - GuðbjörgVilhjálmsdóttir, projektleder, og Andrea G. Dofradóttir og Gudrún Birna, Islands Universitet, Island Erik HagasethHaug, GjövikRegion, Norge Peter Plant, DPU, og Carla Tønder Jessing, VUE i VIA UC, Danmark Tomas Mjörnheden, Voksenuddannelsesforvaltningen i Göteborg, og Anders Lovén, Malmö Högskola, Sverige Raimo Vuorinen og Minna Koivunen, Jyväskylä Universitet, Finland Carla Tønder Jessing ctj@viauc.dk

11 Voice of Users/Brugernes stemme Undersøgelsesmetoder: Dataindsamlingsmetoderne: Spørgeskemaer og fokusgruppeinterviews Undersøgelsen baseres på fire kvalitetsindikatorer (principper for vejledningsydelser, målsætninger og planlægning, netværk og fremgangsmåder) på tre områder (beskæftigelse, personlig udvikling, social inklusion) Deltagere i undersøgelsen: Voksne brugere af vejledning i de nordiske lande Adults Vejledere og ledere af vejledning Byer vs. landlig Fokusgruppeundersøgelsen: Vejledte, vejledere og ledere 6-8 grupperi hvertland each Spørgeskemaundersøgelsen: Voksne brugere af vejledningsydelser Carla Tønder Jessing ctj@viauc.dk

12 Voice of Users/Brugernes stemme Undersøgelsesspørgsmål: 1. Hvilkevejledningsformererderivoksenuddannelse? 2. Hvilketudbytteharvoksneafvejledning? 3. Hvortilfredseervoksnevejledtemed vejledningsydelserne? 4. Lyttervi tilvoksnevejledtesstemme? 5. Bliver de voksne vejledte involveret i udvikling af vejledningsydelserne? 6. Hvordan kan brugernes/de vejledtes aktive involvering forbedre vejledningsydelserne? 7. Hvilke idéer og forslag har brugerne/vejledte og vejledere til vejledtes fremtidige involvering i vejledning? Carla Tønder Jessing ctj@viauc.dk

13 Taxonomi for involvering i karrierevejledning: Niveau(baseret på Arnstein) Type af involvering Eksempel på involvering Niveau Niveau 1. Informationsgivning At få fortalt, hvad der er til rådighed Individuelt Niveau 2. Videndeling At fortælle vejledningsinstanser, hvordan det er at bruge dem Individuelt Niveau 3. Debatfora Workshops, fokusgrupper, samtaler Service/vejledningsydelser Niveau 4. Deltagelse Involvering i udformningaf politikker og strategier Strategisk Niveau5. Partnerskab Beslutte sammen med andre, hvilke politikker og strategier, der behøver nyudformning Strategisk Carla Tønder Jessing- ctj@viauc.dk

14 2. Danske interviewresultater (1): Interviewdeltagere i fokusgrupperne Ledere fra fem typer af uddannelsesinstitutioner: To daghøjskoler, en højskole, et studievalgscenter, en privat/anden aktør, en fravuc-ledelsessekretariatet. Derdeltogfire kvinderog tremænd. Vejledere fra seks typer af uddannelsesinstitutioner: To daghøjskoler, en højskole, et VUC, et studievalgscenter, en privat/anden aktør, en teknisk skole der gennemfører længere vejlednings-ogtræningsforløbfor ledige. Derdeltogsekskvinderogfire mænd. Vejledte fra tre typer af uddannelsesinstitutioner: To daghøjskoler, en højskole, et VUC, en teknisk skole der gennemførerlængerevejlednings-ogtræningsforløbfor ledige. Derdeltogfem kvinderogfire mænd iforskelligealdreogpå forskellige uddannelsesniveauer ledige kursusdeltagere(syv) og højskoleelever(to) Carla Tønder Jessing ctj@viauc.dk

15 Danske interviewresultater (2): Definitioner og forståelser af effekt Begrebet karrierevejledning opfattes som problematisk begrebet uddannelsesog erhvervsvejledning er mere præcist og passende i en dansk kontekst. Vejledningdefineressomdetat hjælpede vejledtetilat træffevalgirelation til deres potentialer, ønsker og drømme. Den vejledte er subjekt og ikke objekt i vejledningsprocessen ogvalgogvalgmulighederskalikkepåtvingesden vejledte. Isærlederneforbinder målet gennemvejledningat hjælpevejledtemed at træffe valg med begrebet realistisk : Realistisk i forhold til beskæftigelsesmulighederogfremtidigearbejdsmarkedsbehov. Hvorvidt vejledning er virkningsfuld forbindes med den enkelte vejledte og hendesellerhansudbytte afvejledning: Hvaderresultatetfor den vejledte. Forskellene er hovedsageligt disse to: Lederne og vejlederne fremhæver ejerskab og kvalificerede valg som giver mening og er holdbare, og de vejledte fremhæver nødvendigheden af empati og støtte fra vejlederen for at hjælpe demtilat træffeegnevalg. Måleterdetsamme, men derfokuserespåudbytte versus proces. Carla Tønder Jessing ctj@viauc.dk

16 Danske interviewresultater (3): Grader af involvering Involvering beskrives som aktiv involvering i informationsindsamling og selvudforskning, somindividuelmundtligfeedback tilvejledere, og(mere sporadisk) som brug af gruppe-feedback. Derfinder ingensystematiskevalueringstedpået institutioneltniveauiform afspørgeskemaer, opfølgningsinterviewseller s. De vejledtegiver individuelfeedback, men feedbackenindsamlesikke. Allegrupper mener, at de vejledteharinflydelsepåvejledningenpået individueltniveau, men de kanikkesvarepå, hvorvidtdetteharforbedretvejledningsydelsengenerelt. Alle grupperne udtrykker, at de bliver inspireret af idéen/visionen om højere grad afbrugerindflydelse(niveau4-5), dade bliverintroducerettilden. Alle grupper finder det svært at forestille sig højere grader af brugerindflydelsei fremtiden: Deterideeltogønskværdigt, men urealistisk. Lederneogvejledernefinder dethovedsageligturealistiskafto grunde: De store forskelle mellem de vejledte og manglen på interesse fra beslutningstagereogbevilgendemyndigheder. De vejledteser detsomen interessant, men også utopisk idé. Carla Tønder Jessing ctj@viauc.dk

17 Voice of Users/Brugernes stemme Interviewresultater fra samtlige lande: Fælles for alle: Ingen systematisk eller formel evaluering af vejledningsydelser eller -resultater Brugerinvolvering på niveau 1 og højst niveau 2, hvis vejledte giver uformel feedback til deres vejleder, og nogle vejledere har en praksis med at spørge de vejledte om deres mening om vejlednings-servicen, men dette indsamles ikke systematisk og bliver ikke formidlet I alle landene ses yderligere involvering af de vejledte som positivt og ønskværdigt, skønt nogle finder det urealistisk. I det forbindelse tenderer ledere og vejledere mod at fremhæve forskellene mellem de vejledte ift kompetenceniveau og ressourcer. Idéer og intentioner om at involvere vejledte på et højere niveau synes at mangle. Carla Tønder Jessing ctj@viauc.dk

18 3. Spørgeskemaundersøgelsen- Respondenter 18

19 Resultater Types of guidance Educational and vocational guidance is defined as the assistance on educational, vocational and personal issues, provided by practitioners, teachers or web based self-help. What kind of vocational and educational guidance did you participate in? Face-to-face individual interview with a guidance counsellor* Telephone interview with a guidance counsellor* Group-session with a guidance counsellor* Web-based guidance (e.g. through websites, , chat- rooms)* Guidance from a teacher* Guidance from a project- /program leader* Guidance integrated in lessons and teaching activities* 62% 70% 76% 82% 88% 9% 15% 22% 19% 24% 9% 11% 23% 22% 25% 7% 3% 6% 17% 14% 48% 16% 17% 15% 14% 11% 13% 18% 39% 36% Sweden Norway Iceland Finland Denmark 15% 12% 14% 24% 42% 0% 20% 40% 60% 80% 100% 19

20 Where did you learn about the vocational and educational guidance services? As part of an educational program / at school* Through the directorate of labor (unemployment office)* Through acquaintances (such as from friends or family members)* At work* Through advertisement or discussions in the media* Through a union* 14% 32% 50% 48% 60% 14% 30% 30% 33% 43% 10% 23% 22% 18% 28% 4% 5% 12% 19% 13% 14% 11% 15% 7% 11% Sweden Norway Iceland 1% 1% 0% 5% 15% Finland Denmark 0% 20% 40% 60% 80% 100% 20

21 Outcome of guidance Three main factors Educational outcome* Vocational outcome* 3.2 Sweden Norway Iceland Personal outcome* Finland Denmark

22 Outcome of guidance -Educational The following statements describe possible benefits of vocational and educational guidance. To what extent do you agree or disagree with these statements in terms of the outcomes of your guidance experience? Figure: Agree or strongly agree 68% Guidance encouraged me to continue my studies* 65% 63% 68% 57% Guidance helped me make choices concerning my education* 46% 51% 53% 58% 62% Sweden Norway Iceland Finland Denmark 0% 20% 40% 60% 80% 100% 22

23 Outcome of guidance - Career The following statements describe possible benefits of vocational and educational guidance. To what extent do you agree or disagree with these statements in terms of the outcomes of your guidance experience? Figure: Agree or strongly agree Guidance helped me make other life choices* Guidance resulted in new educational or job contacts* Guidance helped me with my job search* Guidance helped me make choices concerning jobs* 29% 36% 45% 37% 41% 21% 37% 34% 39% 48% 20% 24% 20% 18% 32% 25% 33% 18% 23% Sweden Norway Iceland Finland Denmark 49% 0% 20% 40% 60% 80% 100% 23

24 Outcome of guidance Personal development To what extent do you agree or disagree with these statements in terms of the outcomes of your guidance experience? Guidance enhanced my self-confidence* I learned new ways of learning as a result of guidance* I learned to make career plans as a result of guidance* I learned something about my abilities as a result of guidance* 46% 36% 35% 42% 31% 36% 30% Figure: 45% Agree or strongly agree 42% I learned something about my interests as a result of guidance* I acquired skills in searching for job or educational opportunities as a result of guidance* I acquired skills to further develop my career* 18% 40% 40% 36% 46% 46% 39% 42% 35% 28% 47% 48% 58% 62% 57% 58% 55% 63% 62% 53% 60% 60% 48% 50% 49% 53% Sweden Norway Iceland Finland Denmark I acquired decision making skills as a result of guidance* 47% 51% 51% 44% 36% 0% 20% 40% 60% 80% 100% 24

25 Overall, how satisfied or dissatisfied were you with your guidance? Mean score on a scale of 1 to 7 where 1 means very dissatisfied and 7 very satisfied. Sweden 4.8 Norway 5.4 Iceland 5.5 Finland 5.0 Denmark

26 To what extent do you agree or disagree with these statements about the guidance counsellor that worked with you? If you worked with more than one counsellor, please choose the one that guided you most 58% frequently. Figure: Agree or strongly agree The counsellor was supportive and understanding* encouraged me* helped me set goals* gave me the opportunity to discuss my strengths and weaknesses* stressed my active participation in gathering information about workand/or educational opportunities* helped me work on enhancing my self-confidence* emphasized my active involvement in the different phases of the process* 26% 33% 46% 45% 46% 44% 41% 42% 42% 53% 60% 68% 61% 56% 60% 57% 58% 68% 67% 60% 69% 62% 63% 67% 57% 61% 56% 61% 60% 60% 77% 79% 76% 82% Sweden Norway Iceland Finland Denmark 0% 20% 40% 60% 80% 100% 26

27 LEVEL 1 of user involvement Information gathering To what extent do you agree or disagree with these statements about your In general, I participated very actively in the guidance process* During the guidance sessions I discussed my strengths and weaknesses* I was active in making plans and setting goals* participation in the guidance? 73% 45% 61% 56% 69% 90% 82% 80% 75% 72% 75% 78% 67% 75% 75% Figure: Agree or strongly agree I was active in gathering information about work- and/or educational opportunities* 65% 68% 65% 81% 80% I was active in self-exploration and/or information seeking between guidance sessions* 46% 59% 65% 71% 80% Sweden Norway During the guidance sessions we discussed how I can learn more about myself* 33% 41% 49% 54% 43% Iceland Finland Denmark 0% 20% 40% 60% 80% 100% 27

28 Overall, how actively involved were you in the guidance process? Mean score on a scale of 1 to 7 where 1 means very passive and 7 very active. Sweden 5.4 Norway 5.6 Iceland 5.4 Finland 5.2 Denmark

29 LEVEL 2 of user involvement Giving information Did you have a chance to evaluate or give feedback on the guidance you received by I did not have the chance to evaluate or give feedback on the guidance* Verbally or by to the counsellor* Paper/pencil questionnaire* 18% using any of the following? 25% 12% 15% 25% 20% 27% 23% 28% 28% 35% 50% 49% 49% 55% Online survey* 13% 7% 12% 32% 28% Verbally or by to the supervisor(s) of the service* 3% 7% 4% 4% 11% Sweden Norway Iceland Phone survey* 4% 11% 1% 2% 3% Finland Denmark 0% 20% 40% 60% 80% 100% 29

30 Do you think that your feedback on guidanceis likely or unlikely to result in improvements in the guidance service? Mean score on a scale of 1 to 7 where 1 means very unlikely and 7 very likely. Sweden 5.2 Norway 4.7 Iceland 5.1 Finland 4.7 Denmark

31 Do you think that it is important or unimportant that users of guidance have the opportunity to evaluate or give feedback on the following? Figure: Rather or very important The way guidance is delivered* Access to guidance* The organization of guidance work* The guidance process* 66% 66% 81% 85% 89% 78% 86% 77% 82% 67% 61% 69% 66% 72% 81% 75% 91% 77% 85% 66% 0% 20% 40% 60% 80% 100% Sweden Norway Iceland Finland Denmark 31

32 LEVEL 3 of user involvement Forums of debate Have you as a user of guidance been consulted (participated in meetings or discussion groups) on the following concerning guidance services? No, I have not participated in meetings or discussion groups about guidance services* Improving operation of service (such as on the user-friendliness of web-sites, opening hours, slow service etc.)* Setting priorities in guidance services (such as giving new groups the opportunity to participate in guidance etc.) Identifying gaps in service (such as work search work-shops, services to meet your special needs, etc.) Identifying gaps in quality of service (such as breaches in confidentiality, misinformation, etc.)* Addressing unmet needs (such as those of school dropouts, immigrants, single mothers etc.) Developing new guidance services (such as telephone counseling) 73% 73% 89% 86% 84% 5% 8% 8% 16% 15% 9% 4% 6% 6% 7% 8% 5% 7% 8% 13% 9% 2% 3% 5% 6% 6% 4% 6% 7% 7% Sweden Norway Iceland Finland 6% 4% 3% 5% 6% Denmark 0% 20% 40% 60% 80% 100% 32

33 Do you think that it is important or unimportant for the improvement of guidance that users are consulted? Mean score on a scale of -3 to +3 where -3 means very unimportant and +3 very important. Sweden 5.6 Norway 5.1 Iceland 5.8 Finland 5.7 Denmark

34 LEVEL 4-5 of user involvement Participation and partnership Have you as a user of guidance participated in decision making and designing of strategiesin guidance? Participation in designing of strategies refers to deciding how guidance should be operated and the amount of guidance each should get. No, I have not participated in decision making and designing of strategies about guidance services* Improving operation of service (such as on the user-friendliness of web-sites, opening hours, slow service etc.)* Setting priorities in guidance services (such as giving new groups the opportunity to participate in guidance etc.)* Identifying gaps in service (such as work search work-shops, services to meet your special needs, etc.) Identifying gaps in quality of service (such as breaches in confidentiality, misinformation, etc.) Addressing unmet needs (such as those of school dropouts, immigrants, single mothers etc.) Developing new guidance services (such as telephone counseling) 77% 75% 90% 92% 85% 4% 5% 8% 14% 14% 9% 4% 3% 5% 9% 8% 5% 4% 4% 9% 6% 3% 2% 3% 7% 7% 4% 4% 4% 9% Sweden Norway Iceland Finland 5% 4% 3% 6% 3% Denmark 0% 20% 40% 60% 80% 100% 34

35 Do you think that it is important or unimportant for the improvement of guidance that users participate in decision making and designingof guidance services? Mean score on a scale of 1 to 7 where 1 means very unimportant and 7 very important. Sweden 5.4 Norway 4.8 Iceland 5.1 Finland 5.3 Denmark

36 What would be an effective way for you as a user of guidance to have your voice heard on the delivery of guidance? Figure: Rather or very effective Directly to the counsellor* Talk with a teacher* Talk with a mentor* Through user surveys* In organised discussion groups of users, such as focus groups* In meetings with managers and policy makers* In student/client initated peer groups* Through associations of learners* Through a trade union* 73% 78% 66% 88% 86% 60% 62% 59% 70% 78% 61% 63% 58% 76% 46% 62% 44% 67% 72% 73% 53% 69% 51% 47% 42% 50% 43% 32% 57% 59% 58% 42% 41% 43% 44% Sweden Norway Iceland Finland Denmark 65% 34% 42% 39% 41% 48% 37% 38% 36% 23% 0% 20% 40% 60% 80% 100% 36

37 4. Opsummering De voksne vejledte er tilfredse med (karriere-)vejledningen og med vejlederne Det erhvervsmæssige udbytte er ikke så stort som det uddannelsesmæssige Vejledning bliver ofte ikke evalueret (28-55%) Brugerne mener, at det vil forbedre vejledningen, hvis den blev evalueret Reglen er at ekskludere brugerne fra organisering af og politiske beslutninger om vejledning Brugerne er meget villige til at deltage i politikudvikling og udvikling af organisering af vejledningsydelser Brugerne mener, at det vil forbedre vejledningsydelserne, hvis de blev involveret Carla Tønder Jessing ctj@viauc.dk

38 5. Anbefalinger Kvalitet: Brugernes stemme er en værdifuld ressource Involvere/konsultere brugerne af vejledning på mikro-, meso-og makroniveau (fx i fokusgrupper eller konsultative fora) Brug styrken hos brugerne, så de: Får ejerskab til vejledningsprocessen - mikro Giver vedvarende virkningsfuld feedback - meso Deltager demokratisk i at fremme kvalitet i vejledning makro Vejledning om både uddannelse og erhverv Der er brug for, at vejledning bliver mere proaktiv Uddanne vejledere til at involvere brugerne Der er brug for flere sammenlignende undersøgelser Carla Tønder Jessing ctj@viauc.dk

39 Voice of Users/Brugernes stemme 6. Diskussion: Hvad ved vi om virkninger af voksenvejledning i de videregående uddannelser? Hvorfra har vi vores viden? Hvorfor bliver brugerne af voksenvejledning ikke inviteret til at øve indflydelse på vejledningen? Hvordan er holdningerne generelt og Jeres specielt til de vejledtes involvering? Hvilke implikationer mener I, at undersøgelsen har- For Jerespraksis? For uddannelseafvejledere? For designet afvejledningen? For udvikling af vejledningspolitikken? Carla Tønder Jessing ctj@viauc.dk

40 Voice of Users/Brugernes stemme Yderligere oplysninger: Projekter Igangværende projekter Carla Tønder Jessing: Tlf eller Gudbjörg Vilhjálmsdottir, Islands Universitet, Carla Tønder Jessing