MÅLING ANALYSE AV MÅLEDATA VHA SPC

MÅLING ANALYSE AV MÅLEDATA VHA SPC 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 2

Hvorfor benytte statistikk? Statistikk: beskrivelse og tolkning av kvantitative data Man kan trekke statistisk sikre konklusjoner basert på måledataene. (Har vi oppnådd en signifikant forbedring?) Gir grunnlag for objektivitet! ( Antakelse er alle feils mor.) 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 3

Hvordan vet vi at en endring representerer en forbedring? Noen ganger taler et tidsserie for seg selv 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 4

Hvordan vet vi at en endring representerer en forbedring? Noen ganger taler et tidsserie for seg selv 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 5

Hvordan vet vi at en endring representerer en forbedring? Andre ganger er tidsserien vanskeligere å tolke og vi har behov for å analysere tidsserien vha statistiske metoder 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 6

05.06.2013 - www.pasientsikkerhetskampanjen.no Side 7

Forskning versus forbedringsarbeid I forskning benyttes vanligvis avansert statistikk. krever høy kompetanse i matematikk krever store datamengder I forbedringsarbeid kan man nøye seg med en enklere og visuell form for statistikk. lav brukerterskel krever relativt små datamengder 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 8

I kampanjen plottes måledataene i tidsserier. Kan analyseres vha statistisk prosesskontroll (SPC). 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 9

Innen SPC benyttes i hovedsak to typer diagrammer Run-diagram (benyttes i Extranet) kun én type, mindre følsomt enn kontrolldiagram median benyttes som midtlinje, ingen kontrollgrenser tidsserien må være på min. 15 pkt (ekskl. pkt på median) Kontrolldiagram (=Shewhart-diagram) en rekke ulike typer for ulike case, mer følsom diagramtype aritmetisk gjennomsnitt benyttes som midtlinje benytter øvre og nedre kontrollgrense (+/-3 standardavvik) tidsserien må være på mellom 20 og 30 pkt 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 10

Hva kan SPC hjelpe oss med? Målet med bruk av SPC i forbedringsarbeid er hjelp til å kunne fastslå om en prosess er stabil (forutsigbar) på et akseptabelt nivå og har en akseptabel grad av variasjon 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 11

Hva kan SPC hjelpe oss med? Målet med bruk av SPC i forbedringsarbeid er å kunne fastslå at en prosess er stabil (forutsigbar) på et akseptabelt nivå og har en akseptabel grad av variasjon 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 12

Verden sett fra statistikkens ståsted (naturlig variasjon vs. unaturlig variasjon) Alt er prosesser Prosesser varierer Naturlig variasjon (common causes) er innebygget i enhver prosess Spesiell variasjon (special causes) skyldes påvirkning av prosessen utenfra Prosesser taler til oss gjennom målinger prosessens stemme 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 13

Ett spørsmål vi ønsker å besvare vha SPC er om vår prosess er statistisk stabil Dersom vi kun observerer naturlig variasjon er prosessen statistisk stabil (forutsigbar) Dersom vi observerer spesiell variasjon regnes prosessen som ustabil (uforutsigbar) ønsket (i første fase av forbedringsarbeid) uønsket 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 14

Naturlig eller spesiell variasjon? Case: Liggetid ved sykehus A 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 15

Naturlig eller spesiell variasjon? Case: Liggetid ved sykehus B 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 16

Naturlig eller spesiell variasjon? Case: Liggetid ved sykehus C 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 17

Gjennomsnittlig liggetid for de tre foregående sykehusene (merk deg at denne formen for statistikk ikke kan fortelle deg om prosessene er stabile eller ikke) 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 18

En tidsserie der vi har plottet en median kaller vi et run-diagram Median: En horisontal linje som deler tallmaterialet i to like store deler Må ha minst 12 datapunkter før median kan plottes (15 pkt første gang, eksklusive punkter på medianen) 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 19

Måledata plottet i en tidsserie i Extranet 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 20

Måledata plottet i en tidsserie i Extranet 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 21

Samme tidsserie med medianen plottet inn 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 22

Samme tidsserie på et senere tidspunkt 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 23

Når kan det være grunnlag for å opprette en ny median? Diagrammer bør splittes ved at det opprettes en ny median både der det er opphold i målingene, og der det skjer grunnleggende endringer i prosessen. 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 24

Eksempel på tilfeldig variasjon: Myntkast 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 26

I SPC-diagram ser vi etter målepunkter som kan tyde på spesiell variasjon Vi benytter 3 enkle tester for å sjekke om spesiell variasjon er tilstede i prosessen vår antall ganger grafen krysser medianen (+1) nivåskifte i prosessen trend i tillegg må vi være obs på eventuelle åpenbart avvikende punkt 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 27

Test 1 antall ganger grafen krysser medianen - tell opp antall ganger grafen krysser medianen + 1 (men ikke ta med ev. punkter som ligger på medianen) - øvre og nedre grenseverdi kan man finne i en standardtabell, og de variere med ant pkt i tidsserien 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 28

Tabell som angir det forventede antall krysninger + 1 av medianen i et run-diagram i forhold til antall punkter i tidsserien (kilde: F. Sweed and C. Eisenhart) 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 29

Test 2 nivåskifte i prosessen uvanlig mange pkt på samme side av medianen (8++), eksklusive eventuelle punkter på medianen vanlig å benytte grensen 7++ dersom tidsserien består av 20 eller færre punkter 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 30

Test 3 trend uvanlig lang serie av etterfølgende punkter (7++) med økende eller synkende verdier (punkter med samme verdi som det foregående skal ikke telles med) 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 31

Tidsseriediagram for OUS: Baseline + 3 måneder 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 32

Tidsseriediagram for OUS: Kun baseline 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 33

baseline 34

3 oppgaver å bryne din SPC-kunnskap på! 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 39

Naturlig eller spesiell variasjon? Case: Liggetid ved sykehus A (det er 30 pkt i tidsserien) 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 40

Sykehus A: Spesiell variasjon tilstede her har man en ustabil prosess! I dette eksemplet slår alle tre tester inn: for få krysninger av medianen: kun 3 krysninger til tross for at tidsserien inneholder 30 pkt. (sjekkverdien blir 3+1=4: ø.g. for 30 pkt er 21 og n.g. er 11) nivåskifte i prosessen: for mange pkt på samme side av (grensen overskrides ved 8++) trend: uvanlig lang serie av etterfølgende stigende/synkende punkter (overskrides ved 7++) Liggetiden øker så denne spesielle variasjonen er uønsket, prosessen går i negativ retning. (Hadde dette vært en del av et vellykket forbedringsarbeid ville grafen pekt nedover.) 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 41

Naturlig eller spesiell variasjon? Case: Liggetid ved sykehus B (det er 30 pkt i tidsserien) 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 42

Naturlig eller spesiell variasjon? Case: Liggetid ved sykehus B (det er 30 pkt i tidsserien) 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 43

Sykehus B: Spesiell variasjon tilstede her har man en ustabil prosess! I dette eksemplet slår én av tre tester inn Nivåskifte i prosessen: 9 pkt på samme side av medianen er for mange (grensen overskrides ved 8) Den spesielle variasjonen er muligens ønsket, da det her har skjedd noe som har fått liggetiden ned som jo er det ønskede mål. Men i etterkant av dette ser vi av grafen at datapunktene igjen ligger på oversiden av medianen, så her har man ikke i mål med forbedringsprosessen. 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 44

Naturlig eller spesiell variasjon? Case: Liggetid ved sykehus C (det er 30 pkt i tidsserien) 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 45

Sykehus C: Ingen tegn til spesiell variasjon her har man en stabil prosess! Tidsserien inneholder mange krysninger av medianen. En opptelling gir sjekkverdien 20 (19 krysninger + 1) som er innenfor grenseverdiene angitt i standardtabell for en tidsserie bestående av 30 pkt (øvre grenseverdi for en tidsserie på 30 pkt er 21 og nedre grenseverdi er 11). I dette eksemplet slår ingen av våre tre tester inn, så statistisk sett er prosessen stabil. Men selv om vi har en stabil prosess er det ikke dermed sagt at man er fornøyd med nivået (ca 3 liggedager) og kanskje er variasjonen også større enn ønsket. 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 46

Statistisk prosesskontroll i et nøtteskall Målet med bruk av SPC i forbedringsarbeid er å kunne fastslå at en prosess er stabil (forutsigbar) på et akseptabelt nivå og har en akseptabel grad av variasjon 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 47

Statistisk prosesskontroll i et nøtteskall SPC er et statistisk verktøy som, på en objektiv måte, kan hjelpe oss til å forstå fortiden forutsi fremtiden handle i nåtid 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 48

post@pasientsikkerhetskampanjen.no www.pasientsikkerhetskampanjen.no

Hvordan vet vi at en endring er en forbedring? Dødelighet ved coronar by-pass kirurgi før og etter endret prosedyre (Ved å presentere årsgjennomsnittet i form av søylediagram gir vi et statisk bilde av situasjonen) 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 50

Førte den nye prosedyren til en prosessforbedring? Endringen på 20 % reduksjon i dødelighet er klinisk signifikant... men er den også statistisk signifikant var prosessen stabil? Benytt statistisk prosesskontroll til å undersøke om prosessen var stabil (forutsigbar). Stabiliteten kan sjekkes ved å plotte de månedlige dødelighetsratene i en tidsserie 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 51

Hvordan vet vi at en endring er en forbedring? Dødelighet ved coronar by-pass kirurgi før og etter endret prosedyre (Ved å plotte de månedlige dataene i en tidsserie får vi et mer dynamisk bilde av situasjonen) 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 52

Hvordan vet vi at en endring er en forbedring? Dødelighet ved coronar by-pass kirurgi før og etter endret prosedyre (Ved å plotte de månedlige dataene i en tidsserie får vi et mer dynamisk bilde av situasjonen) 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 53

Førte den nye prosedyren til en prosessforbedring? Bedringen vi observerer i søylediagrammet skyldes ikke den nye prosedyren, den har sågar kanskje hatt en negativ effekt! Hva vi kan lære av dette eksemplet: Aggregerte data kan noen ganger lede oss til gale konklusjoner Tidsserier er å foretrekke i forbedringsarbeid gir som oftest mer og riktigere informasjon Hovedtese: Gå tettere på prosessen! 05.06.2013 - www.pasientsikkerhetskampanjen.no Side 54