Psyktestbarn. Monica Martinussen, RKBU-Nord

Transkript

1 Psyktestbarn Monica Martinussen, RKBU-Nord

2 Hva er en test? En psykologisk test er et utvalg adferd innhentet under standardiserte betingelser med etablerte regler for skåring. Eks evnetester, personlighets-inventorier, diagnosesystemer eller observasjoner. Anvendes innen en rekke områder: Klinisk psykologi, arbeids-og organisasjonspsykologi, PPT, nevropsykologi og i forskning.

3 Oversikt Retningslinjer for tester Psyktestbarn.no

4 Retningslinjer for test og testbruk Europa: Retningslinjer finnes på hjemmesidene til Norsk Psykologforening: Den internasjonale testkommisjonen Formålet for ITC er å utvikle retningslinjer for god testbruk og fremme best mulig praksis ved vurderinger. Retningslinjene ble sist revidert i 2000 og linken til dokumentet finnes: n%20guidelines% pdf

5 Fra den Amerikanske psykologforeningen APA (1999). Standards for Educational and Psychological Testing:

6 Overview of organization and content: Part I: Test Construction, Evaluation, and Documentation 1. Validity 2. Reliability and Errors of Measurement 3. Test Development and Revision 4. Scales, Norms, and Score Comparability 5. Test Administration, Scoring, and Reporting 6. Supporting Documentation for Tests Part II: Fairness in Testing 7. Fairness in Testing and Test Use 8. The Rights and Responsibilities of Test Takers 9. Testing Individuals of Diverse Linguistic Backgrounds 10. Testing Individuals with Disabilities Part III: Testing Applications 11. The Responsibilities of Test Users 12. Psychological Testing and Assessment 13. Educational Testing and Assessment 14. Testing in Employment and Credentialing 15. Testing in Program Evaluation and Public Policy

7 Hvordan vurdere konkrete tester? EFPA Review Form (2004, 2005, 2008 og ny revisjon snart klar). Basert på BPS (British Psychological Society s (BPS) test review form + tilsvarende kriterier fra The Dutch Association for Psychologists.

8 Testprosjektet

9 Psyktestprosjektet Systematisk gjennomgang av tester/verktøy/skalaer for både barn, unge og voksne Barnetestene vurderes av mange ulike fagfolk, blant annet fra RKBU/RBUP og fra Kunnskapssentret Se:psyktestbarn.no

10 Organisasjonen PsykTestBarns organisasjon består av en redaksjon forankret ved RBUP Øst og Sør, et nasjonalt psykometripanel med representanter fra alle de fire RBUP/RKBUene, forfattere, og fagfeller. Redaksjon: Hege Kornør Redaktør Monica Martinussen Assisterende redaktør Kristine H. Ludvigsen Koordinator / webredaktør Sølvi Biedilæ Forskningsbibliotekar Brynhildur Axelsdottir Forskningsbibliotekar

11 Psyktestbarn Bakgrunn En rekke norske helse-, barnevernfaglige og undervisningsinstitusjoner har implementert rutinemessig bruk av tester og kartleggingsverktøy for å undersøke psykisk helse, psykososiale problemer, evner og ferdigheter hos barn og unge. Vi mangler imidlertid systematisk kunnskap om måleegenskapene ved de testene som er i bruk. Hensikten med PsykTestBarn er å: Opprette en oversikt over norske versjoner av tester og kartleggingsverktøy for barn og unge Vurdere måleegenskapene ved testene og kartleggingsverktøyene Bidra til informerte valg av tester og kartleggingsverktøy i praksisfeltet

12 1. trinn- Litteratursøk Vi inkluderer alle publikasjoner av studier som har undersøkt og rapportert minst ett av følgende punkter: normdata for testen i et norsk utvalg reliabilitet: indre konsistens, test-retest og inter-rater validitet: samsvar med liknende testskårer, samsvar med referansestandard eller annet kriterium og faktoranalyser I tillegg, og kun når det gjelder norske testversjoner, inkluderer vi publikasjoner som oppgir gjennomsnittsskårer og/eller forekomster for henholdsvis generelle populasjoner og kliniske undergrupper. Hvis dokumentasjonen for de psykometriske egenskapene ved en norsk testversjon er utilstrekkelig inkluderer vi dokumentasjon for svenske og danske testversjoner. Når det gjelder svenske og danske testversjoner inkluderer vi imidlertid kun publikasjoner som rapporterer psykometriske egenskaper

13 2. trinn- Vurdering av testens psykometriske egenskaper To uavhengige forskere vurderer testenes normering, validitet og reliabilitet ved hjelp av en tilpasset versjon av EFPAs Test review form samt notes for reviewers. Resultatet publiseres i form av en artikkel på psyktestbarn.no

14 Beskrivelse av selve testen Format Antall spørsmål Skalaer og skåring Målgruppe Tilgjengelighet og kostnader Dokumentasjon

15 Vurdering av reliabilitet Kan estimereres på ulike måter Innenfor klassisk testteori definert som korrelasjonen mellom to parallelle tester. F.eks test-retest reliabilitet Indre konsistens Parallell-form Inter-rater Hva er god nok reliabilitet? Kommer an på bruken

16 Reliabilitet Stabilitet over tid [ ] No information given. [* ] Inadequate (e.g., r < 0.6). [***] Adequate (e.g., 0.6 < r < 0.69). [**** ] Good (e.g., 0.70 < r < 0.79). [***** ] Excellent (e.g., r > 0.80) Indre konsistens [ ] No information given. [* ] Inadequate (e.g., r < 0.7). [***] Adequate (e.g., 0.7 < r < 0.79). [****] Good (e.g., 0.80 < r < 0.89). [***** ] Excellent (e.g., r > 0.90)

17 Validitet Begrepsvaliditet Kriterierelatert validitet Prediktiv, samtidig Innholdsvaliditet En rekke metoder kan anvendes for undersøke validiteten. Faktoranalyse, korrelasjon m/andre instrumenter, forskjeller mellom grupper, eksperimentelle design, multitrekk-multimetode matrise, osv. Utvalgsstørrelse, kvalitet på studien og resultater

18 Begrepsvaliditet (construct validity) I hvilken grad måler testen det begrep man tror det måler. Mange ulike måter å undersøke dette. Eks: Faktoranalyse Korrelasjon med etablerte tester Undersøke antatte sammenhenger med andre begreper

19 Kriterierelatert validitet Undersøke sammenhengen mellom test og kriterium Prediktiv Samtidig

20 Innholdvaliditet Mest aktuelt for tester som måler konkret kunnskap eller ferdigheter Sier noe om i hvilken grad testleddene utgjør et representativt utvalg av adferden man ønsker å måle. F. eks er dekker eksamensspørsmålene alle områdene av pensum?

21 Normer Relevante og store nok normgrupper Norske, skandinaviske vs andre land

22 Hvorfor normere tester Forenkler fortolkningen av en persons skåre. Dette gjelder både sammenligningen med andre personer og sammenligning av ulike trekk/egenskaper hos en og samme person. Poenget er å få skårene over på en kjent felles skala.

23 Hvordan normere tester Viktig å sikre god representativitet. Hvilke faktorer som er viktig kommer an på test og bruksområde. Mulige faktorer er kjønn, alder, sosioøkonomisk status, geografi, kultur, med mer. Man bør være forsiktig med å anvende utenlandske normer

24

25 Bruk av tester krever vurdering av EVIDENS OG KONSEKVENS Evidens har å gjøre med validitet Konsekvens med de verdimessige og samfunnsmessige sidene ved testbruk

26 Hva bør man tenke på ved valg av instrumenter? Reliabilitet, validitet, normer Hva finnes på norsk? Hvis ovsettelse (fram-tilbake), sjekke de psykomtriske egenskapene på oversettelsen. Rettigheter og testforlag- kan alt fritt benyttes? Hvilke konsekvenser får valgene for forskning og publisering samt for klinisk bruk?

27 Kontakt info: Professor Monica Martinussen RKBU-Nord, Det helsevitenskapelige fakultet Universitetet i Tromsø 9037 Tromsø monica.martinussen@uit.no