Implementering og måling av kvalitet -erfaringer fra 13 års arbeid i Norge Dagfinn Mørkrid Thøgersen, cand. psychol. Kyrre Lønnum, cand. jur., cand. psychol. Implementering Et målrettet arbeid for å innføre en ny arbeidspraksis i en virksomhet. (Greenhalgh et al., 2004) I Norge har det de siste 13 årene vært en politisk satsning for at barn og unge med alvorlige atferdsproblemer skal få tilgang til evidensbaserte behandlingstilbud. Atferdssenterets Utviklingsavdeling Ungdom har siden 1999 arbeidet med en nasjonal implementering av tre evidensbaserte behandlingsmetoder i det statlige barnevernet (Bufetat) for å bedre omfanget og kvaliteten på tjenestene for disse ungdommene: Multisystemisk Terapi (MST) Funksjonell Familieterapi (FFT) Multidimentional Treatment Foster Care (MTFC) Status 2012: MST (24) FFT (5) MTFC (1)
Hvordan vet vi om vi gjør en god jobb? Dette må vi måle! Skjer det en økning i evidensbaserte tilbud? Får disse ungdommene god hjelp? Å bli målt/vurdert... Det verste som kan skje er...
Ingen mål er perfekte Teoretiske konsepter Operasjonalisering Sann varians Feilvarians Nivåer av kunnskap KLINISK RELEVANS! Kvalitetssikring av implementeringsarbeid Innsamling av informasjon på alle relevante områder: Resultatmåling Kompetanse Veiledning System Intervensjoner Organisasjon Seleksjon Opplæring Integrert & Utfyllende Ledelse Administrativ Støtte Beslutningsstøttende datasystemer (Tilpasset fra Fixsen et al. 2010)
Måling av ulike typer informasjon Enkelt kvantifiserbar informasjon innsamles ved registrering: Mer sammensatt informasjon med godt utviklede måleinstrumenter: Mer kompleks og kvalitativ informasjon, avhengig av kompetent vurdering: alder, kjønn, bosted behandlingstimer (antall og hyppighet) saksmengde, fullføringsgrad mobiltelefoner, videoutstyr lokaler, driftsbudsjett Problembelastning (ASEBA) Risikonivå (YLS) Symptomnivå (SCL-90) Terapeutisk allianse (FSR) Metodeintegritet (TAM-R) egnethet for ansettelse teamfungering tilfredsstille metodens henvisningskriterier ledelse i kliniske avgjørelser Eksempler på innsamlet informasjon Demografiske variabler Kjønn, alder Innvandrerbakgrunn Geografisk sted Klientene Risiko og symptombelastning Antall ASEBA, YLS, SCL-90 R, nasjonale mål Hvor mange får behandling? Fullføring og drop-out Endring Risiko og symptom-belastning Nasjonale endringsmål Kvalitative vurderinger Informasjon om team og terapeut fungering Utfallsmål: Endring hos klientene Fullføringsgrad Arbeidsmengde: Saksmengde for teamet Saker pr terapeut Metodespesifikke metodetrohetsmål: MST: TAM-R, SAM, CAM FFT: Clinical Fidelity, FSR, TRS, SRS MTFC: Sertifiseringskriterier Metodestøttende teamfungering: Metodetrohet Erfaringsbaserte vurderinger Kvaliteten på veiledning og konsultasjon
Eksempel på informasjon om MST-teamene Økning i tjenestetilbud og bruk for målgruppen 150 Antall familier som får FFT behandling i Norge 132 113 125 75 89 84 65 38 17 0 2007 2008 2009 2010 2011 2012 Økning i tjenestetilbud og bruk for målgruppen Antall familier som får MST behandling i Norge 900 848 767 770 675 702 718 450 225 0 2007 2008 2009 2010 2011 0
Fullføringsgrad for FFT-team i Norge fra oppstart 100 % 75 % Trøndelag-Sør Stavanger Skien Sandvika 50 % 25 % 0 % 1. år 2. år 3. år 4. år 09/28/2012 Side Norsk Norsk senter senter for studier for studier av av problematferd og innovativ og innovativ praksis praksis Eksempel på innsamlet informasjon om org. Informasjon - Refleksjon - Handling Refleksjon Informasjon Handling
Feed-back (informasjon) blir til feed-forward (handling) Behandlingsresultater Innsamling av data Metode og kvalitetssikring Team & terapeut Identifisering av avvik og plan for tiltak Organisasjon Gjennomføring av tiltak Eks. tiltak for økt kompetanse og team-fungering Rekruttering og seleksjon: prosedyrer og kriterier for inntak av medarbeidere Manualer, grunnopplæring og arbeidsverktøy Oversettelser, oppdateringer og videreutviklinger Veiledning, konsultasjon og kvalitetssikringsrutiner Terapeuters individuelle utviklingsplaner Terapeut- og veiledersamlinger øke spesifikk kompetanse i ulike gruppper Eksempel på Feed-back-loop for behandlingsresultater Identifisering av avvik: Økt frekvens av inst.plassering innen 6 mnd etter avslutning Hvilke data har vi som kan si noe om dette? Metode og kvalitetssikring Team Plan for tiltak: Sosial støtte Samarbeid etter avsluting Organisasjon Gjennomføring av tiltak: Endre samarbeidsrutiner
Implementering krever organisasjonsendring Innføring av en ny arbeidspraksis i en organisasjon forutsetter at organisasjonen legger til rette for de forhold som arbeidspraksisen krever: Tilstrekkelig budsjett Egnede lokaler og nødvendig utstyr Tydelig ledelse for bruk av arbeidspraksisen Støttende administrasjon Nye henvisningsrutiner Tilpasset personal rekruttering og arbeidsavtaler En implementeringsorganisasjon må derfor monitorere og fascilitere disse områdene og anbefale/kreve tiltak på ulike ledernivåer ved ikke-tilfredsstillende forhold. 10/09/2012 Side Take-home message 1 Ikke vær redd for målinger! Vi samarbeider om å hjelpe klienten 10/09/2012 Side Take-home message 2 Vurder kvaliteten på datakilden 10/09/2012 Side
Take-home message 3 Se alltid etter muligheter til å skaffe deg bedre data/ informasjon Take-home mesage 4 Ta beslutninger på så godt og konkret datagrunnlag som mulig Take-home message 5 Arbeid med feedback-prosesser er et gjensidig kompetansehevende samarbeid