MÅLINGER ~ STRATEGI OG METODE 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 2
HVORFOR MÅLE? 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 3
Vi ønsker å. vite om tiltak skaper forbedring Hensikten med målingene som inngår i kampanjen er å gi oversikt over utvikling og forbedringer over tid ved den enkelte enhet etter implementering av tiltakspakkene. 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 4
Vi ønsker å. vite om tiltak skaper forbedring Hensikten med målingene som inngår i kampanjen er å gi oversikt over utvikling og forbedringer over tid ved den enkelte enhet etter implementering av tiltakspakkene. dokumentere hva vi leverer Vise brukere, ledelse og andre hvordan våre tjenester er. 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 5
Antakelse er alle feils mor. 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 6
Vi ønsker å. vite om tiltak skaper forbedring Hensikten med målingene som inngår i kampanjen er å gi oversikt over utvikling og forbedringer over tid ved den enkelte enhet etter implementering av tiltakspakkene. dokumentere hva vi leverer Vise brukere, ledelse og andre hvordan våre tjenester er. gi rom for refleksjon Målingene kan hjelpe oss til å reflektere over egen virksomhet og gi grunnlag for egen læring og utvikling. 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 7
og hovedmålet er å gi pasientene best mulig behandling! Pasienten Hans Andersen 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 8
Florence Nightingale påpekte på 1800- tallet at målinger må til i kvalitetsarbeid «The ultimate goal is to manage quality. But you cannot manage it until you have a way to measure it, and you cannot measure it until you can monitor it.» 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 9
Forskning viser at målinger er avgjørende i forbedringsarbeid Measurements are absolutely essential to efforts for improving the processes of medical care. (Solberg et al., Jt Comm J Qual Improv. 1997 Mar;23(3):135-47.) 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 10
HVORDAN MÅLE? 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 11
Hvordan måle kvalitet? Kvalitet kan være vanskelig å måle direkte. Derfor måles ofte kvalitet ved hjelp av ulike typer kvalitetsindikatorer. Prosessindikatorer Uttrykker om pasienten har mottatt de ytelser man bør. Resultatindikatorer Belyser pasientens gevinst, f.eks.: overlevelse, fallrate 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 12
Vi kan analysere en prosess mht kvalitet ved å måle og plotte en kvalitetsindikator i en tidsserie med en fast tidsfrekvens 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 13
Overordnet målestrategi 1. Velge prosess- og resultatindikatorer + målinger 2. Utarbeide plan for datainnsamling 3. Benytte SPC til å foreta en statistisk analyse av hver indikator for å avgjøre om det skjer endringer 4. Koble analyseresultatene til forbedringsarbeidet 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 14
Datainnsamling tre innfallsvinkler (kilde: Solberg et al., Jt Comm J Qual Improv. 1997 Mar;23(3):135-47.) Forskning Forbedring Kontroll Formål Skape ny viten Implementere eksisterende viten Dokumentere, bedømme og sammelikne Hypotese Statisk Dynamisk Ingen hypotese Variasjon Kontrollér Studér Justér Stikkprøve Stor Liten Ingen stikkprøve Målehyppighet En eller få målinger Dager, uker, måneder Kvartaler, år Statistiske metoder Komparative metoder (t-test, chi2, regresjon, ) Prosessanalyse (statistisk prosesskontroll) Deskriptive metoder (gjennomsnitt, spredning, ) 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 15
Forskning versus forbedringsarbeid I forskning benyttes vanligvis avansert statistikk. krever høy statistikkompetanse krever store datamengder I forbedringsarbeid kan man nøye seg med en enklere form for statistikk. I pasientsikkerhetskampanjen benytter vi statistisk prosesskontroll (SPC) til å analysere våre måledata SPC handler egentlig ikke om å måle, men om å lytte til prosessens stemme 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 16
Tommelfingerregel i forbedringsarbeid Søk nytte, ikke perfeksjon, i målingene. 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 17
Nyttige tips vedrørende målinger Nyttig å etablere et måle-team Bygg målingene inn i den daglige virksomheten Bruk ferske data (real time) og gå tettest mulig på prosessene Diagrammene må tolkes både statistisk og med faglig/klinisk skjønn (av dem som kjenner virksomheten) Viktig å kommunisere resultatene 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 18
HVILKE MÅLINGER HAR VI? 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 19
11.03.2013 - www.pasientsikkerhetskampanjen.no Side 20
11.03.2013 - www.pasientsikkerhetskampanjen.no Side 21
Kampanjemålingen Prosessindikator: Etterlevelse av tiltakspakken per pasient Måleresultatene skal registreres i Extranet-databasen månedlig, ev. fortløpende. 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 22
Antallet pasienter det skal måles på For å redusere arbeidsmengden kan man begrense målingen til et utvalg av pasienter i de tilfeller der pasientgrunnlaget er stort. For enheter/ avdelinger med stabilt flere enn 20 pasienter utskrevet per måned: Resultatene fra de første 20 pasientene som utskrives hver måned registreres i Extranet. For enheter/ avdelinger med færre enn 20 pasienter utskrevet per måned: Resultatene fra alle pasientene registreres i Extranet. 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 23
11.03.2013 - www.pasientsikkerhetskampanjen.no Side 24
11.03.2013 - www.pasientsikkerhetskampanjen.no Side 25
11.03.2013 - www.pasientsikkerhetskampanjen.no Side 26
11.03.2013 - www.pasientsikkerhetskampanjen.no Side 27
11.03.2013 - www.pasientsikkerhetskampanjen.no Side 28
HVORDAN ANALYSERE OG PRESENTERE MÅLINGENE? 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 29
Hvordan vet vi at en forandring representerer en forbedring? Ofte taler et tidsseriediagram for seg selv Dersom tidsseriediagrammet ikke representerer klar tale har vi mulighet til å analysere diagrammet vha statistiske tester 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 30
Tidsseriediagram for Levanger 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 31
11.03.2013 - www.pasientsikkerhetskampanjen.no Side 32
Tidsseriediagram for OUS 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 33
Tidsseriediagram for OUS 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 34
baseline 35
11.03.2013 - www.pasientsikkerhetskampanjen.no Side 36
11.03.2013 - www.pasientsikkerhetskampanjen.no Side 37
11.03.2013 - www.pasientsikkerhetskampanjen.no Side 38
11.03.2013 - www.pasientsikkerhetskampanjen.no Side 39
11.03.2013 - www.pasientsikkerhetskampanjen.no Side 40
11.03.2013 - www.pasientsikkerhetskampanjen.no Side 41
11.03.2013 - www.pasientsikkerhetskampanjen.no Side 42
11.03.2013 - www.pasientsikkerhetskampanjen.no Side 43
Visualisering! 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 44
11.03.2013 - www.pasientsikkerhetskampanjen.no Side 45
11.03.2013 - www.pasientsikkerhetskampanjen.no Side 46
Det viktige spørsmålet som bør stilles fortløpende... Hvordan går det? 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 47
En kort introduksjon til statistisk prosesskontroll 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 48
Statistisk prosesskontroll (SPC) Data framstilles visuelt og enkelt Lav brukerterskel (ved enkel bruk av SPC) Velegnet statistisk verktøy i forbedringsarbeid Vi kan kjapt trekke statistisk sikre konklusjoner selv med små datamengder Det er mulig å trekke statistisk sikre konklusjoner på grunnlag av ganske få observasjoner dersom observasjonene utgjør en tidsserie. SPC is pragmatic science (Paul Plsek, IHI) 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 49
Statistisk prosesskontroll Statistisk prosesskontroll handler i bunn og grunn ikke om å måle, men om å lytte til prosessens stemme 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 50
Gjennomsnittlig liggetid for tre sykehus (data aggregert over en periode på 30 måneder) 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 51
Liggetid på sykehus A Viser grafen en stabil eller ustabil prosess? 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 52
Liggetid på sykehus B Viser grafen en stabil eller ustabil prosess? 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 53
Liggetid på sykehus C Viser grafen en stabil eller ustabil prosess? 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 54
Gjennomsnittlig liggetid for de tre sykehusene De 3 foregående grafer indikerer sykehus med ulike prosesser (stabil/ustabil), men dette fremgår altså ikke av søylediagrammet under. 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 55
Hvordan vet vi at en endring er en forbedring? Dødelighet ved coronar by-pass kirurgi før og etter endret prosedyre (Ved å presentere årsgjennomsnittet gir vi et statisk bilde av situasjonen) 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 56
Førte den nye prosedyren til en prosessforbedring? Endringen på 20 % reduksjon i dødelighet er klinisk signifikant... men er den også statistisk signifikant var prosessen stabil? Benytt statistisk prosesskontroll til å undersøke om prosessen var stabil (forutsigbar). Stabiliteten kan sjekkes ved f.eks. å plotte de månedlige dødelighetsratene i et run-diagram 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 57
Hvordan vet vi at en endring er en forbedring? Dødelighet ved coronar by-pass kirurgi før og etter endret prosedyre (Ved å plotte de månedlige dataene i en tidsserie får vi et mer dynamisk bilde av situasjonen) 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 58
Hvordan vet vi at en endring er en forbedring? Dødelighet ved coronar by-pass kirurgi før og etter endret prosedyre (Ved å plotte de månedlige dataene i en tidsserie får vi et mer dynamisk bilde av situasjonen) 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 59
Hvordan vet vi at en endring er en forbedring? Dødelighet ved coronar by-pass kirurgi før og etter endret prosedyre (Ved å plotte de månedlige dataene i en tidsserie får vi et mer dynamisk bilde av situasjonen) 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 60
Førte den nye prosedyren til en prosessforbedring? Bedringen vi observerer i søylediagrammet skyldes ikke den nye prosedyren, den har sågar kanskje hatt en negativ effekt! Hva vi kan lære av dette eksemplet: Aggregerte data kan noen ganger lede oss til gale konklusjoner Tidsserier er å foretrekke i forbedringsarbeid gir som oftest mer og riktigere informasjon Hovedtese: Gå tettere på prosessen! 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 61
Statistisk prosesskontroll i et nøtteskall Målet med bruk av SPC i forbedringsarbeid er å kunne fastslå at en prosess er stabil (forutsigbar) på et akseptabelt nivå og har en akseptabel grad av variasjon 11.03.2013 - www.pasientsikkerhetskampanjen.no Side 62
Statistisk prosesskontroll i et nøtteskall SPC er et statistisk verktøy som, på en objektiv måte, kan hjelpe oss til å forstå fortiden forutsi fremtiden handle i nåtid Side 63
post@pasientsikkerhetskampanjen.no www.pasientsikkerhetskampanjen.no