Småskalatesting og målinger - stikkprøver og lek med tall?? Karin Jensvold, 23. mars 2017
Tradisjonell implementering av endring Problem Planlegge Planlegge Planlegge Godkjenne Ved skrivebordet Den virkelige verden Implementere Reinertsen, Bisognano & Pugh (2008)
Førte endringen til en forbedring?
Implementering ved lokal tilpasning Problem Planlegge Planlegge Planlegge Godkjenne Ved skrivebordet Den virkelige verden Teste og modifisere Teste og modifisere Teste og modifisere Implementere Reinertsen, Bisognano & Pugh (2008)
Hvorfor småskalateste tiltak? Gir forventet resultat? Påvirker endringen andre resultat? Er tiltaket gjennomførbart? Behov for andre tiltak? Lite ressurskrevende Minimerer motstand mot endring Hvilke justeringer må gjøres «hos oss»?
Nobody really looks Ikke innfør endring for alle før en vet om tiltaket virker!
Hvorfor virket ikke tiltaket? Ble det korrekt gjennomført? Ble tiltaket gjennomført, men førte ikke til forbedring? Feil idé i utgangspunktet? I did not fail one thousand times; I found one thousand ways how not to make a light bulb.
«What we gain from academic studies is knowledge. What we gain from experience is wisdom» Mohandas Gandhi
Småskalatester - PDSA Vi gjennomfører PDSA hver dag reiser, matlaging, trening, påkledning Det er ikke en test om du ikke gjør noe nytt Tenk ener - en pasient, en sykepleier Sjekk ut virkning etter hver test Nye forhold ny test Dokumenter testene se hva som virket Hva kan prøves ut innen neste torsdag?
Tiltakene i ernæringsprosjektet Risikovurdering Individuell kartlegging Individuell ernæringsplan Videreføring av informasjon Hvordan få dette til i egen enhet??? PDSA PDSA - PDSA
Målinger i forbedringsarbeid
Hvorfor måle? Vite resultatet av den jobben vi gjør! Hva må vi forbedre? Skaper tiltak forbedring? Gjør vi det vi tror/ vet vi skal gjøre? Hva kan vi lære? Synliggjøre resultater for Brukere, ledere, klinikere, samfunnet
«The ultimate goal is to manage quality. But you cannot manage it until you have a way to measure it, and you cannot measure it until you can monitor it.»
Hva skal måles?
«Mål det som kan måles, og gjør det som ikke kan måles målbart» Galileo Galilei (1564-1642)
Måle kvalitet Ikke ett objektivt mål for kvalitet, men et sett indikatorer Danner et godt bilde av situasjonen Resultat - behandlingsresultatet? Prosess gjennomføres tiltak? Struktur - rammene, ressursene, kompetansen?
Mål Resultatindikator Prosessindikator Forebygge underernæring Andel pasienter som har hatt stabil vekt Andel pasienter som er risikovurdert Andel pasienter som har fått ernæringsplan Andre potensielle effekter av tiltakene som bør følges?? Informasjon til neste behandlings-nivå
Kjekt eller nyttig å vite? Thirsting for knowledge. but drowning in a sea of data Alle målinger krever registrering!
Ingen målinger
Måle feil ting!
Måle riktige ting, men på feil måte!
Riktige målinger, målt på riktig måte!
Hvordan måle?
Utvalg
Til avklaring før start Hvilke data trenger vi? Registreres dataene i dag? Hvor? Hvordan? Registreres personidentifiserbare opplysninger? Mulighet for elektronisk datauttrekk? Hvem gjøre hva og når i prosjektperioden? Behov for varige registreringsløsninger?
Målinger i ernæringsprosjektet Andel pasienter som har hatt stabil vekt Andel pasienter som er risikovurdert Andel pasienter som har fått opprettet og iverksatt en ernæringsplan Hvordan måle i egen enhet??? PDSA PDSA - PDSA
Hva betyr målingene?
Forsking Før- etter studier Mange observasjoner Kontrollerte randomiserte studier Resultat må kunne etterprøves Kvalitetsforbedring Baseline kontinuerlige - sjekkpunkt målinger Få observasjoner Tidslinjemåling, SPC Følge resultater over tid Evaluere kontinuerlig Iverksetter nye tiltak ved uønsket resultat Overvåke variasjon
Ulike typer variasjon Alt vi gjør varierer temp, reisetid, arbeidsprosesser, behandlingsresultat Naturlig variasjon Stabil prosess med forutsigbart resultat Spesiell variasjon Spesiell årsak har inntruffet Ustabil prosess med store variasjoner Uforutsigbart resultat
Spiller A: 170,3 meter Spiller B: 180,3 meter
Presentasjon av data som årsgjennomsnitt Dødelighet ved coronar by-pass kirurgi før og etter endret prosedyre Ny prosedyre
Presentasjon av data i tidsserie
Statistisk prosesskontroll, SPC Resultater plottes i tidsserie Synliggjør om prosessen er stabil og forutsigbar Skiller mellom naturlig og spesiell variasjon Viser endringer - trender/endret nivå Analyse/refleksjon av resultat over tid - forbedring?
Hva kan måles med SPC? Tid; Ventetider - varighet av behandling Antall; Pasienter operasjoner Andel; Keisersnitt dødelighet Skåringskjema; Kvalitet på epikriser Brukertilfredshet Økonomi; Inntekter utgifter
VENTETID PÅ LEGE VED INNLEGGELSE Antall pasienter 348 Gjennomsnittlig ventetid 48 minutter Median ventetid 27 minutter Minimum ventetid 6 minutter Maksimum ventetid 103 minutter Range 97 minutter Standard avvik 18 minutter 90 Gj.sn. ventetid på lege i mottakelsen Planlagte innleggelser Avd N, X HF 80 70 60 50 40 30 Søndag Mandag Tirsdag Onsdag Torsdag Fredag Lørdag Søndag Mandag Tirsdag Onsdag Torsdag Dag Fredag Lørdag Søndag Mandag Tirsdag Onsdag Torsdag Fredag Lørdag Median: 40.00 EpiData Analysis Graph
ANTALL Run-diagram 18 Antall konsultasjoner pr. dag 16 14 12 10 8 6 4 2 Tilfeldig variasjon Trend > 5 datapunkt 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 DAG Median: 10.00 EpiData Analysis Graph Et rundiagram er et linjediagram + medianen
Astronomisk datapunkt = spesiell variasjon
Nivåskifte 6 eller flere datapunkt over/under median
Resultater på sengepostnivå Endret registrering til kun fall med skade. Startet tavlemøter Pr 16.09.16
Målinger øker ikke kalvens vekt! Resultater må følges og analyseres!
1. Mål: Gjennomføre en ukes skitur
1. Mål: Gjennomføre en ukes skitur 2. Måling: Gjennomførte trenings- og kostholdstiltak pr dag Vekt gir ingen mening her! 3. Tiltak: Styrke /kondisjonstrening x 2 pr uke Daglig aktivitet > 1 time Daglig frukt og grønnsaker x 2 Drikke 1,5 l 3 hoved- og 2 mellommåltider Ingen snop eller kake
Andel tiltak oppfylt for hver dag (%). 20 første dagene er baselinemåling. (rød linje = median, lilla linje = gjennomsnitt) Treningskurs Etter utskeielse! Middag/revy Solstrand Helg Nærmer seg kursstart!!
Andel ( % ) oppfyllelse av forbedringstiltak før skitur, Baseline fra 16.12 06.01. Fortløpende målinger fra 06.01.14 til 17.02.14
Måling nødvendig lek med tall!!