Mål med mening Introduktion til statistisk kvalitetsudvikling Jacob Anhøj Overlæge, DIT, Rigshospitalet 2015-04-28
Læringsmål at forstå kvalitetsdatas dynamiske natur at kunne konstruere og fortolke seriediagrammer at kunne konstruere robuste indikatorer til eget forbedringsprojekt Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 2 / 24
Vil du vide mere? [Jacob Anhøj: Kompendium i kvalitetsudvikling, Munksgaard 2015] [http://rpubs.com/anhoej/] Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 3 / 24
Om at se på data Hvad kan vi sige om forekomsten af svær sepsis og septisk chok på dette hospital? Måned Antal 2012-03 9 2012-04 4 2012-05 6 2012-06 4 2012-07 3 2012-08 2 2012-09 4 2012-10 4 2012-11 6 2012-12 6 2013-01 4 2013-02 1 Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 4 / 24
Om at se på data Hvad kan vi sige om forekomsten af svær sepsis og septisk chok på dette hospital? Tre syn på data: Forskerens, udviklerens og bogholderens Måned Antal 2012-03 9 2012-04 4 2012-05 6 2012-06 4 2012-07 3 2012-08 2 2012-09 4 2012-10 4 2012-11 6 2012-12 6 2013-01 4 2013-02 1 [Anhøj, Egebart: Forskeren, bogholderen og udvikleren. DSFP Jubilæumsskrift dec. 2011] Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 4 / 24
Tre syn på data Formål Forskning Forbedring Kontrol Skabe ny viden Implementere eksisterende viden Dokumentere, bedømme og sammenligne Hypotese Statisk Dynamisk Ingen hypotese Variation Kontrollér Studér Justér Stikprøve Stor Lille Ingen stikprøve Målehyppighed Statistiske metoder En eller få målinger Komparative metoder Dage, uger, måneder Statistisk processtyring Kvartaler, år Deskriptive metoder [Solberg et al. (1997): The Three Faces of Performance Measurement. J Qual Impr 23:3] Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 5 / 24
Statisk og dynamisk statistik Eksempel: Vigtig kvalitetsindikator der skal reduceres 111 p = 0.002 89 0 20 60 100 2012 2013 70 90 110 130 Jan 2012 Apr 2012 Jul 2012 Oct 2012 Jan 2013 May 2013 Sep 2013 Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 6 / 24
Alt er proces Proces: Forbundne aktiviteter som har til formål at frembringe et produkt eller en ydelse. Processer varierer Tilfældig (almindelig) variation findes i alle processer Ikke-tilfældig (særlig) variation kan skyldes tilsigtede forbedringer eller utilsigtede forværringer Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 7 / 24
Seriediagram Seriediagram 10 8 Indikator 6 5.5 4 2 1 2 3 4 5 6 7 8 9 11 13 15 17 19 21 23 Tidsperiode/rækkefølge Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 8 / 24
Signaler om ikke-tilfældig variation i seriediagrammer Skiftsignal: Usædvanlig mange konsekutive datapunkter på samme side af medianen Krydssignal: Usædvanlig få krydsninger af medianen Andre: Fx cykliske mønstre og oplagt afvigende enkeltmålinger [Anhøj, Olesen (2014): Run Charts Revisited. PLoS ONE 9(11): e113825] Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 9 / 24
Øvelse: Analyse af seriediagram Tæl antal brugbare observationer, antal kryds og længste serie Postoperative hospitalsdødsfald 10 8 Antal 6 5.5 4 2 2010 01 01 2010 05 01 2010 09 01 2011 01 01 2011 05 01 2011 09 01 Måned Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 10 / 24
Øvelse: Analyse af seriediagram Tæl antal brugbare observationer, antal kryds og længste serie Postoperative hospitalsdødsfald 10 8 Antal 6 5.5 4 2 2010 01 01 2010 05 01 2010 09 01 2011 01 01 2011 05 01 2011 09 01 Måned Obs. (usefull) = 24 (24) Longest run (max) = 5 (8) Crossings (min) = 12 (8) Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 11 / 24
Dilbert on pie charts Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 12 / 24
Patientskader Skadede patienter 50 40 Procent 30 25 20 10 2010 01 01 2010 08 01 2011 03 01 2011 10 01 2012 05 01 2012 12 01 Måned Obs. (usefull) = 38 (29) Longest run (max) = 4 (8) Crossings (min) = 12 (10) Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 13 / 24
Basisobservationer Basisobservationer Procent indlæggelsesdøgn med komplette observationer 100 95 90 85 80 75 2011 01 2011 05 2011 09 2012 01 2012 05 2012 09 2013 01 2013 05 2013 09 97.02 Måned Obs. (usefull) = 33 (32) Longest run (max) = 11 (8) Crossings (min) = 5 (11) Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 14 / 24
Hjertestopkald Uventede hjertestop 12 80% komplians på basisobservationer 10 Antal hjertetopkald 8 6 4 5 2 0 2011 01 2011 06 2011 11 2012 04 2012 09 2013 02 2013 07 Måned Obs. (usefull) = 34 (31) Longest run (max) = 6 (8) Crossings (min) = 9 (11) Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 15 / 24
Postoperativ mortalitet 1 Postoperativ mortalitet før og efter sikker kirurgi tjekliste 2.0 1.5 Procent 1.0 1.1 0.5 2010 01 01 2010 07 01 2011 01 01 2011 07 01 2012 01 01 2012 07 01 Måned Obs. (usefull) = 24 (24) Longest run (max) = 5 (8) Crossings (min) = 12 (8) Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 16 / 24
Postoperativ mortalitet 2 Postoperativ mortalitet før og efter sikker kirurgi tjekliste Før Efter 2.0 1.5 Procent 1.0 1.1 0.5 2010 01 01 2010 07 01 2011 01 01 2011 07 01 2012 01 01 2012 07 01 Måned Obs. (usefull) = 35 (35) Longest run (max) = 9 (8) Crossings (min) = 15 (12) Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 17 / 24
Postoperativ mortalitet 3 Postoperativ mortalitet før og efter sikker kirurgi tjekliste 2.0 1.5 Procent 1.0 0.5 0.7 2010 01 01 2010 07 01 2011 01 01 2011 07 01 2012 01 01 2012 07 01 Måned Obs. (usefull) = 35 (34) Longest run (max) = 5 (8) Crossings (min) = 19 (12) Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 18 / 24
Vildledning Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 19 / 24
Vejledning 1 Behandlingsforløb inden for normtid 100 90 Procent 80 70 71 60 50 40 1 3 5 7 9 12 15 18 21 24 27 30 33 36 39 42 45 48 51 Ugenummer, 2014 Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 20 / 24
Vejledning 2 Behandlingsforløb inden for normtid 100 90 Procent 80 70 75 60 50 40 1 3 5 7 9 12 15 18 21 24 27 30 33 36 39 42 45 48 51 Ugenummer, 2014 Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 21 / 24
Når tal taler eller noget om at bruge data til at skabe forbedringer Mål lokalt Mål nu Mål småt Mål hyppigt Mål processer Fjern nævneren Den gode: I dag fik 2 af vores patienter ikke målt vitalværdier. Den onde: I sidste måned fik over 90% af vores patienter målt vitalværdier. Den grusomme: Sidste år var der 3,8 uventede hjertestop per 10.000 sengedage på jeres afdeling Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 22 / 24
Øvelse: Den gode indikator Vælg en indikator fra dit forbedringsprojekt og beskriv den så præcist som muligt med disse oplysninger: Indikatornavn Indikatortype: resultat, proces, ulempe Dataelementer: tæller, nævner Datakilder: papir og blyant eller elektroniske data Dataindsamling: hvem, hvad, hvor, hvornår, hvordan? Databehandling: aggregering, beregning af dataelementer Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 23 / 24
Konklusioner Nosce te forsker, udvikler eller bogholder? Alt er proces processer varierer Variation i data til forbedring skal studeres med seriediagrammer primitive sammenligninger og før-efter-målinger duer ikke. Forbedringer viser sig ved ikke-tilfældig variation i den ønskede retning. Jacob Anhøj (Rigshospitalet) Mål med mening 2015-04-28 24 / 24