The Capital Region Lykkes din undervisning? DOS og YODAs Uddannelsesdag 2014 Doris Østergaard
Oversigt over præsentationen Udfordringerne Alt hvad der kan trænes, skal trænes Hvilke færdigheder? De 7 roller og ikke tekniske færdigheder Hvordan skal undervisningen foregå? Perspektiveringen
Udvikling af medicinsk udstyr, behandlingsmetoder mv.
Udviklingen i medicinsk uddannelse
The flipped class room og intelligente systemer
The art of helping adults to learn Establish an effective and positive learning culture Involve in diagnosing own needs Encourage to describe own learning objectives (attitudes, skills, knowledge etc) Encourage to identify possibilities /strategies Involve and support in executing own learning plans (incl de-learning) Involve in the evaluation of own learning Feed back more important than tests
Solid evidence in education Processing information leads to more profound learning (elaboration) Working in groups (collaborative learning) Feedback works Coaching/mentoring works (Clinical) learner responsibility works Cees Van der Vleuten
Uddannelsesplanlægning Behovsanalyse Fastlægge læringsmål for kurset Valg af metode Kontekst Evaluering af effekt Doris Østergaard
Uddannelsesplanlægning Behovsanalyse Målbeskrivelsen Udvælgelsesproces ikke alt skal med Hvilke roller arbejdssituationer Deltagerne Test af viden og færdigheder Spørgeskema grad af fortrolighed Vejlederne hvad er vanskeligt at opnå i klinikken Kvalitetsdata, DPSD, KÅA mv. DIMS 2011
Uddannelses planlægning Fastlægge læringsmål for kurset Valg af metode Præ og post kursus læringsrum (video, opgaver etc) En bred vifte af interaktive metoder Kontekst Vil det være en fordel af være med andre specialer? Just in time training? Tidsfordeling Evaluering af effekt Evaluering af kurset Evaluering af læring Doris Østergaard
De 7 lægeroller Ikke-tekniske færdigheder er kognitive, sociale og personlige evner, som understøtter tekniske og medicinske færdigheder, og medvirker til sikker og effektiv opgaveløsning. Rhona Flin, 2008
Hvad vides om ikke-tekniske færdigheder og kirurgi? Fejl i forbindelse med kirurgi skyldes ofte utilstrækkelig kommunikation og samarbejde Et dårligt samarbejde øger risikoen for komplikationer Teamtræning forbedrer kommunikation og samarbejde i operationsteamet Teamtræning kombineret med indførelse af præoperativ checkliste reducerer mortalitet med 18% mod 7% reduktion i kontrolgruppen Gawande A et al. Surg 2003; 133:614-621, Mazzocco K et al. Am J Surg 2009; 197:678-685, Spanager L et al.ugeskr Læger 2011;173:410-413, Neily et al. JAMA 2010;304:1693-1700 Navn (Sidehoved/fod)
Focus på generiske færdigheder Professionalisme, kommunikation, teamwork, ledelse. Deltageraktiverende lærings metoder og omgivelser leder til bedre generiske færdigheder Stærk sammenhæng mellem disse færdigheder og succes eller fiasko på arbejdsmarkedet Det kræver kontinuerlig opmærksomhed! Meng, C.. (2006). Discipline-specific or academic? Acquisition, role and value of higher education competencies. (PhD), PhD Dissertation, Universiteit Maastricht, Maastricht. Schmidt, H.G., & Van der Molen, H.T. (2001). Self-reported competency ratings of graduates of a problem-based medical curriculum. Academic Medicine, 76, 466-468. Papadakis, M. A., Hodgson, C. S., Teherani, A., & Kohatsu, N. D. (2004). Unprofessional behavior in medical school is associated with subsequent disciplinary action by a state medical board. Academic medicine : journal of the Association of American Medical Colleges, 79(3), 244-249.
Luftvejshåndtering hvilke metoder? Kursisterne Forberedelse læse, finde cases, planlægge anæstesi Ansvarlig for egen læring Aktiv deltagelse Facilitatorer Skabe lærende atmosfære Give konstruktiv feed back Metoder En blanding af værktøjer/metoder cases, mini forelæsninger færdighedsstationer simulation/debriefing DIMS 2011
DIMS 2011
Centre for Clinical Education Simulator vs. apprenticeship training An international randomized controlled trial Konge L 1, Clementsen PF 2, Ringsted C 3, Annema J 4 1. Centre for Clinical Education, University of Copenhagen, and The Capital Region, Copenhagen, Denmark. 2. Department of Pulmonology, Gentofte Hospital, University of Copenhagen, Hellerup, Denmark 3. Department of Anesthesia and The Wilson Centre, University of Toronto, and The University Health Network, Toronto, Canada. 4. Academical Medical Center, Pulmonology Department, Amsterdam, The Netherlands. Introduction Research Questions Virtual-reality (VR) simulation is superior to no training, but studies should instead compare VR training to traditional training. Outcomes should be measured on real patients (transfer studies) using assessment tools with established validity evidence from similar settings. Several procedures must be assessed by multiple raters in a blinded fashion to ensure reliability and reduce the risk of bias. Credible standards are necessary for summative assessment. Primary Can simulation-based training replace initial practice on patients? Secondary 1 How many procedures should be assessed and how many raters are necessary for a reliable assessment? Secondary 2 Can a credible pass/fail-standard be established? Methods Procedure: Endobronchial ultrasound-guided trans-bronchial fine-needle aspiration (EBUS-TBNA) Participants: 16 respiratory physicians without EBUS experience + two EBUS experts Intervention: A standardized, individual 4-hour training program on a virtual-reality EBUS simulator Control: A half-day, standard, hands-on training on patients supervised by an EBUS expert Outcome measure: Recordings of three consecutive EBUS-TBNA procedures per participant Assessment tool: The 12-item EBUSAT created by experts in endosonography and assessment Raters: Three blinded and independent EBUS experts using the EBUSAT Statistics: Independent samples t-tests, generalizability theory and contrasting groups method Results Standard training group: 24.2 points Simulator group: 20.1 points, p=0.006. The EBUSAT scores were very reliable: generalizability coefficient=0.85 4 %, 17 %, and 90 % passed in the control, simulation, and expert group Conclusions YES 2 procedures & 3 raters 3 procedures & 2 raters 6 procedures & 1 rater YES
Medicinsk ekspert træning af tekniske færdigheder Hvorfor simulation? Patientsikkerhed øges Prioritere uddannelse frem for patientbehandling i kritiske situationer Styrke evne til refleksion Organisering af arbejde optimering af flow Kompensere for manglende muligheder i klinikken
Debriefing Reflection and learning The facilitator Learning objectives Structure * : Description phase Analytic phase Application phase Learning plan at the end of the day *Steinwachs
Feedback in different loops Modified from Rudolph et al., 2006
Begynd der, hvor du er At man, naar det i Sandhed skal lykkes En at føre et Menneske hen til et bestemt Sted, først og fremmest maa passe paa at finde ham der, hvor han er, og begynde der. (Synspunktet for min Forfatter-Virksomhed. En ligefrem Meddelelse, Rapport til Historien, 1859)
Evaluering Kan de lide det? (reaktionsniveau) Lærte de? (indlæringsniveau) teoretisk viden praktiske færdigheder team kompetencer Påvirker det en selv /organisationen? (adfærdsniveau) Bedres patientbehandlingen? (resultatniveau) (Kirkpatrick) DIMS 2011
Evaluering Evalueringsskema og mundtlig evaluering Evaluering af kurset ved underviserne (delkursusleder) Præ post spørgeskema og test (formativ) Spørgeskema - evaluering af effekt af kurset (grad af fortrolighed, egen vurdering af kompetence) Teoretisk test Resultat 2006-2007 Øget beståelsesprocent i den teoretiske test og signifikant øgning i selvvurderede tekniske og ikke tekniske færdigheder (Rosenstock et al ESA 2008) DIMS 2011
Udvikling af evalueringsredskaber OSCE (objectiv structured clinical examination) (TOSCE) 7 færdighedsstationer /mini-simulationer som forsøg i september 2008 Bestået/ikke bestået Ingen konsekvens i forhold til kurset Formativ vurdering (feed back) Fremtid: Uddanne delkursusleder og bedømmere Bedømme objektivt? Samarbejde med RCA? Validerede checklister DIMS 2011
Cees van der Vleuten: Expanding our toolbox.. Does Shows how Emerging technology of appraising in vivo performance (self-, peer, coassessment, portfolio, multi source feedback, learning process evaluations ) Knows how Knows Domain specific skills Domain independent skills DIMS 2011
En bred vifte af metoder - ingen metode kan stå alene! Struktureret observation NOTTS OSATS Mini-Cex Simulatio n 360 feedback Generel vurdering Kompetence Struktureret kort vejledersamtale Audit Case-baseret diskussion Refleksive rapport
ANTSdk Capital Region (Anæstesiologer) NOTSSdk (Kirurger) Kategori Element Kategori Element Situationsbevidsthed Indsamle information Erkende og forstå sammenhænge Forudse og tænke fremad Udvise selvindsigt Situationsbevidsthed Indsamle information Forstå information Forudse og tænke fremad Monitorere egen præstation Beslutningstagning Identificere muligheder Vælge, kommunikere og implementere beslutninger Revurdere beslutninger Beslutningstagning Overveje muligheder Vælge og kommunikere beslutning Implementere og revurdere beslutning Teamwork Udveksle information Vurdere kompetencer Koordinere aktiviteter Støtte teamets medlemmer Kommunikation & teamwork Udveksle information Etablere fælles forståelse Koordinere aktiviteter Lederskab Planlægge og forberede Prioritere Identificere og anvende ressourcer Udvise autoritet og gennemslagskraft Sætte og opretholde standarder Lederskab Sætte og holde standarder Støtte andre Håndtere pres
Feedback resultater Samtalen varer 2-15 min Mere monolog end dialog og meget fokus på hvad supervisor tænker
Hovedkursuslederens ansvars områder Fagligt indhold Sikre at underviserne har den tilstrækkelige pædagogisk kompetence brug af interaktive læringsmetoder Samarbejde med delkursusledere, PKL/professorer og simulationsenheder Evaluering af effekt Kontinuerlig udvikling af kurserne Doris Østergaard
Udfordringerne Link til klinikken Handlingsplaner Kompetencevurderinger Andet? Just in time training Vurdering af kompetence ved afslutning af uddannelsen DIMS 2011
Radikale ændringer i træning Kontinuerlig udvikling af træning baseret på kvalitets- og patientsikkerhedsdata (human factors tilgang og organisatoriske ændringer) Adressere både individ, team og organisation ved at anvende en kombination af metoder, kontekst specifik træning Uddanne den samlede stab generiske koncepter Medarbejderne medinddrages i udvikling/løsninger Handlingsanvisende forskning / aktionsforskning Inddrage patienter i processer Initiere forskning (behov, effekt af uddannelse mv.)
Perspektivering Udbygge samarbejdet mellem interessenter herunder kvalitets-, patientsikkerhedsorganisation og uddannelsesinstitutioner Data drevet uddannelse Forankring lokalt, men generiske koncepter Mere fokus på implementering Skabe ejerskab hos medarbejdere Evaluering af effekt på flere niveauer