Krav til analysekvalitet sett i sammenheng med Ekstern Kvalitetsvurdering (EKV) Vårmøte NSMB 2015 Gunn B B Kristensen Hva vil jeg snakke om? EKV og nytteverdi Kvalitetsmål og EKV Utfordringer Eksempler Veien videre 1
EKV organisasjon Rapport Vurdering? Resultat Deltaker - laboratorium Nytteverdi Evaluering av deltaker Evaluering av analysemetodene - EKV prøvens kommutabilitet? - Etablering av fasit? - Replikatmålinger? 2
Ulike EKV kategorier EKV kategori Pasientlikt materiale Referanse fasit Replikate målinger 1 Ja Ja Ja Evaluering av analysemetodene Standardisering av metoder Evaluering av den enkelte deltaker N00002 HbA1c Anne Stavelin; modified from Miller WG et al. Clin Chem 2011;57:1670-80. Ulike EKV kategorier EKV kategori Pasientlikt materiale Referanse fasit Replikate målinger 1 Ja Ja Ja 2 Ja Ja Nei Evaluering av analysemetodene Standardisering av metoder Standardisering av metoder Evaluering av den enkelte deltaker Nøyaktighet 2050, 2-nivå medisinsk biokjemi Anne Stavelin; modified from Miller WG et al. Clin Chem 2011;57:1670-80. 3
Ulike EKV kategorier EKV kategori Pasientlikt materiale Referanse fasit Replikate målinger 1 Ja Ja Ja 2 Ja Ja Nei 3 Ja Nei Ja 4 Ja Nei Nei Evaluering av analysemetodene Standardisering av metoder Standardisering av metoder Harmonisering av metoder Harmonisering av metoder Evaluering av den enkelte deltaker Nøyaktighet N00008 Sykehuskoagulasjon Anne Stavelin; modified from Miller WG et al. Clin Chem 2011;57:1670-80. EKV kategori Ulike EKV kategorier Pasientlikt materiale Referanse fasit Replikate målinger 1 Ja Ja Ja 2 Ja Ja Nei 3 Ja Nei Ja 4 Ja Nei Nei 5 Nei Nei Ja Evaluering av analysemetodene Standardisering av metoder Standardisering av metoder Harmonisering av metoder Harmonisering av metoder Evaluering av den enkelte deltaker Nøyaktighet 6 Nei Nei Nei Anne Stavelin; modified from Miller WG et al. Clin Chem 2011;57:1670-80. 4
EKV og Kvalitetsmål De grensene et EKV-resultat bør ligge innenfor for at analysens kvalitet skal vurderes som akseptabel Fasit («forventet verdi») ± akseptgrenser Akseptgrenser Enkeltmåling av EKV-prøven Akseptgrenser: Fasit ± totalfeil vurdering av nøyaktighet (dersom referansefasit) Replikatmålinger av EKV-prøven Akseptgrense for systematiske feil (bias) vurdering av riktighet (dersom referansefasit) Akseptgrense for tilfeldige feil vurdering av presisjon 5
Utfordringer ved definisjon av akseptgrenser i EKV Kommutabilitet av kontrollmateriale Etablering av fasit (forventet verdi) Design av EKV programmet Kontrollmateriale Kommutabelt (pasientlikt) CLSI-C53-A Relevante konsentrasjonsnivåer Stabilt nok Homogent nok Praktisk og økonomisk tilgjengelig 12 6
Kontrollmateriale og etablering av fasit Kommutabelt kontrollmateriale Referansefasit (kategori 1 &2) samme akseptgrenser som for pasientprøver «Over-all-mean/median» (kategori 3 & 4) videre akseptgrenser Kontrollmateriale og etablering av fasit Ikke kommutabelt kontrollmateriale (kategori 5 & 6) Metode-spesifikk fasit smale akseptgrenser Lot-spesifikk fasit smalere akseptgrenser («Over-all-mean/median» vide akseptgrenser) 7
Effect of using different target values on the quality assessment given to the participants Overall mean Clin Chem; Kristensen 2005 Design av EKV programmet Regulatorisk (USA Clinical Laboratory, German RiliBAeK) vide grenser Veiledende smalere grenser Pedagogisk/opplærende tilpassede grenser Manipulert prøve? Replikatmålinger? 8
Akseptgrenser i EKV Kliniske Effekt på klinisk utfall Basert på biologisk variasjon Statistiske (State-of-the-art) Variable: «real state-of-the-art» ± 2-3 SD av fordelingen av deltakernes resultat (Z-score) Faste: «fixed state-of-the-art» Langtids CV for metoden Akseptgrenser i Europa resultat fra en undersøkelse i 1995 Faste grenser (biologisk variasjon, klinisk utfall, eksperters anbefaling, fixed state-of-the-art») Danmark, Nederland, Belgia, Tyskland, Finland, Czech Republic, Kroatia, Litauen, Norge, Luxemburg, Sveits, Irland, Storbritannia Variable grenser («real state-of-the-art») Frankrike, Italia, Portugal, Spania, Island, Ingen grenser Russland, Hellas (og Sverige) EQAS Organizers Working Group on Quality Goals Ricos 1996 9
Anbefalinger fra arbeidsgruppen Harmonisere analytisk design av EKV programmene: Enkelt måling heller enn replikat målinger Faste grenser basert på biologi og tillatt totalfeil (TEa): % avvik Z 2 2 0.5CVw 0.25 CVw CVb Z = 1.65 eller 2.33 for 95 eller 99% aksept Ricos 1996 Hva er akseptgrenser basert på? 10
Noen eksempler Primærhelsetjenesten Akseptgrenser basert på biologisk variasjon og «state-of-the-art» + fasitintervall «Noklus-tankegang» med fasitintervall og prosentvise grenser utenfor Kvalitativ vurdering basert på gjennomsnitt av duplikatmålinger Presisjon basert på forskjell mellom duplikatmålinger 11
Eksempler Kategori Program Komponent Fasitintervall Grense % Mg 1 GLU Glukose ± 0,1 5 10 Aks 1 HBA1 HbA1c ± 0,1 2 5,4 1 HB Hb ± 0,1 3 8 4 HEM LPK ± 0,1 6 12 EVF/Hct ± 0,01 3 8 EPK ± 0,1 3 8 TPK ± 3 10 18 4 N00008 APTT, INR, fibrinogen ± 15 % HbA1c % andel deltakere med akseptabel vurdering siste år NKK 75 deltakere PTH 1366 deltakere Kontroll 1 Kontroll 2 Kontroll 1 Kontroll 2 2014-3 99 % 100 % 97 % 98 % 2014-4 97 % 100 % 99 % 99 % 2015-1 97 % 98 % 98 % 99 % 2015-2 97 % 100 % 96 % 99 % 12
akseptgrenser Basert på enkeltmåling og tillatt totalfeil (TEa) TE1 - biologisk variasjon CV A < 0,5 CV w Bias <,25 2 2 0 CVw CVb TE2 «state-of-the-art» og biologi CVA (CV fra DEKS Human langtidskontroll program) Bias biologisk variasjon Veiledende og relativt strenge, samme prosentvise grenser over måle området Komponent Akseptgrenser (±) Finland Labquality Ref 2009 Tyskland (DGKL) 2014 TE A basert på biologi (Westgard 13.05.15) Albumin 5 % (TE1/TE2) 20 % 4.07 % AP 12 % (Same for all enzyms) 18 % 12.04 % Ferritin 15 % (TE1) 25 % 16.9 % Calcium 3 % (TE1/TE2) 10 % 2.55 % Bilirubin 12 % (TE2) 22 % 26.94 % Kolesterol 5 % (clin/te2) 13 % 9.01 % Kreatinin 8 % (TE1) 20 % 8.87 % CRP 15 % (clin) 20 % 59.6 % Klor 2-3 % (TE2) 8 % 1.5 % Glukose 6 % (TE2) 15 % 6.96 % Natrium 2 % (TE2) 5 % 0.73 % HbA1c 8 % (Clin) 18 % 3.0 % 13
Performance score and Six Sigma 2 ulike akseptgrenser basert på Tillatt totalfeil (TEa) basert på biologisk variasjon State-of-the-art fasit ± 3SD Sigma konsept for å i vurdering til deltakerne Sigma = TL x i T i SD bl + πr 2 Veien videre? TFG2: Harmonisering av tillatte akseptgrenser i EKV program Mandat: Å definere kvalitetskrav for de mest vanlige komponenter som kan brukes av EKV organisasjoner (Kategori 1+2?) Leder: Graham Jones (Australia) STORE FORVENTNINGER 1 st EFLM Strategic Conference, Milano nov 2014: Defining analytical performance goals 15 years after the Stockholm Conference 14