Erfaringer å trekke fra nasjnal deleksamen i sykepleie Marit Kirkevld Leder Prfesjnsråd fr utdanning g frskning i sykepleie [Takk til Stephan Hamberg fr tilgang til slides brukt på frkstmøte 17/3-16. Brukt med tillatelse].
Nasjnal deleksamen Frkstmøte 17. mars 2016 Stephan Hamberg, senirrådgiver utredning g analyse
Frmål Å gi samfunnet nyttig infrmasjn m studentenes kunnskapsnivå i utvalgte fag Å gi det enkelte fagmiljø mulighet til å sammenligne seg med tilsvarende fagmiljøer ved andre institusjner, g utvikle studiekvaliteten på grunnlag av dette Øke samfunnets tillit til utdanningene 3
Oppdrag fra Kunnskapsdepartementet (september 2014): NOKUT får i ppdrag å gjennmføre en mulighetsstudie g et piltprsjekt sm fullskala gjennmføring av nasjnale deleksamener innenfr enkelte prfesjnsfag. (min utheving) 4
Tre utdanninger plukket ut Bachelr i regnskap g revisjn (vår 2015 / 2016) Årsregnskap (15 studiepeng) Bachelr i sykepleierutdanning (høst 2015 / 2016) Anatmi, fysilgi g bikjemi NOKUTs pprinnelige frslag: Medikamentregning Grunnsklelærerutdanning (høst 2015 / vår 2016) Matematikk brøk, desimaltall g prsentregning 5
Samhandling mellm NOKUT g prfesjnsrådet første fase NOKUT inviterer til et samarbeid med prfesjnsrådet Et første møte ppleves knstruktivt (NOKUT aksepterer å endre fag g å invlvere fagmiljøene i utviklingen av nasjnal eksamen). Prfesjnsrådet stiller seg i psitiv gitt gd frankring i fagmiljøene Senhøsten 2014 NOKUT uttaler at alle institusjnene MÅ gjennmføre nasjnal deleksamen i løpet av 2015 Flere institusjner pplyser at det er umulig Prfesjnsrådet «truer» med å trekke støtten tilbake «Krisemøte» hs KD 6
Møte med KD 9/1-2015 «Det ble enighet m et avgrenset piltprsjekt høsten 2015 relatert til anatmi g fysilgi, basert på frivillig deltakelse fra så mange sykepleierutdanninger sm har praktisk mulighet til å delta. Målet med piltprsjektet i 2015 vil være å utvikle grunnlaget fr utprøving av en nasjnal deleksamen i anatmi g fysilgi fr alle sykepleierstudenter ved alle sykepleier-utdanningene i 2016. Resultatet fra deleksamen i 2016 skal fremgå av vitnemål. Erfaringene fra fullskalatesting i 2016 skal så ligge til grunn fr rdinær gjennmføring av fullskala, integrert, nasjnal deleksamen i 2017. Et nasjnalt fagmiljø fr utvikling av anatmi-fysilgiundervisningen i bachelr i sykepleie skal utvikle ppgavegrunnlaget fr nasjnale deleksamener, i tett samarbeid med NOKUT/NOKUT-tilknyttet fagmiljø.» (Ref. møte med KD 9/1-2015) 7
Utfrdringer Utfrdrende å lage tester/eksamener av høy kvalitet innenfr det mandatet KD har gitt: Ikke tilstrekkelig tid til å utvikle et grundig rammeverk Ikke tilstrekkelig tid til å la fagmiljøene g testeksperter samarbeide m utvikling av gde eksamener Ikke tilstrekkelig tid til å piltere ppgavesettene 8
Utfrdringer (frtsettelse) Frskjellige læringsutbyttebeskrivelser g pensum Fag kmmer på ulike tidspunkt i utdanningsløpet Ulike undervisnings- g vurderingsfrmer Obligatrisk eller ikke bligatrisk å ta eksamen Lgistikk 9
Eksamenssettet Oppgavesettet laget av en arbeidsgruppe satt ned av prfesjnsrådet 9 medlemmer (fra 9 frskjellige institusjner) Inkluderte leger, sykepleiere, prfessrer, førsteamanuensiser, førstelektrer g høgsklelektrer 4 timers skriftlig eksamen uten hjelpemidler 17 fritekst ppgaver 20 flervalgsppgaver 10
Nasjnal deleksamen i anatmi, fysilgi g bikjemi Antall kandidater: 1761 Antall institusjner: 12 (av 28 institusjner) Antall prgrammer (campus): 14 Ca 5000 studenter ttalt. 1/3 tk eksamen 2015. 11
Sensur Ttalt 40 sensrer Hver sensr samsensurerte med 5 eller 6 andre sensrer Ttalt 114 sensrpar Hvert sensrpar sensurerte ca. 16 ppgaver sammen Hver sensr sensurerte ca. 85 ppgaver All sensur var blind 22 siders sensrveiledning 12
Resultater Frbehld: Pilt Str variasjn i studentenes startkmpetanse Kun 12 av 28 institusjner Frskjellige læringsutbyttebeskrivelser/pensum Frskjellig antall studiepeng Frskjellig undervisningspplegg Frskjellig behandling av kntinuasjnskandidater 13
Resultater Hva sier resultatene ne m: Studentenes kunnskapsnivå i anatmi, fysilgi g bikjemi Hva sier resultatene mindre m: Institusjnsbidraget 14
Sammenligning: nasjnal deleksamen g tidligere resultater på anatmi, fysilgi g bikjemi eksamen De fleste institusjner har i tidligere år hatt rdinær lkal eksamen i samme emne sm den nasjnale deleksamen NOKUT har fått karakterdata på disse emnene fra 2013 g 2014 Sammenligner ikke de samme studentene, men: Ingen indikasjn av at utdanningene gav «snillere» eksamener når eksamen ble arrangert lkalt 15
Sensurreliabilitet Meget vanskelig å måle på detaljnivå Enkle analyser viser gd reliabilitet Små frskjeller på ttalscre per sensrpar Kun 91 KLAGER (av 1261 studenter) 16
Hvrdan bruke resultatene i kvalitetsarbeidet? Detaljert sensur gir mulighet til å identifisere styrker g svakheter Underviser vi alle mråder på samme måte? Legger vi frliten vekt på visse mråder? Diskuter detaljert sensur med studentene Hva mener studentene? Hva trr studentene kan frklare styrker g svakheter? Diskutere/lære av hverandre Hva gjør fr eksempel HiB annerledes? Undervisningsfrmer? Oppmøteplikt? 17
Knklusjner Studentenes kunnskapsnivå er generelt ne svakt Det er per i dag vanskelig å vurdere institusjnsbidraget Studentenes startkmpetanse frklarer sannsynligvis mye av variasjnen mellm institusjnene Ingenting tyder på at man gir «enkle» eksamener eller «snill» sensur på rdinær eksamen Det er mulig å gjennmføre nasjnal deleksamen på en frsvarlig g gd måte Nasjnal deleksamen kan gi institusjnene verdifull infrmasjn sm kan brukes i kvalitetsarbeidet 18
Knklusjn prfesjnsrådets erfaringer Fagmiljøene - invlvert gjennm hele prsessen via prfesjnsrådets arbeidsgruppe (eksisterende nasjnal ufrmelt nettverk fr faglærere i nat.vit. fagene i sykepleie) Ekstremt tidspress -- vanskelig å invlvere hele prfesjnsrådet i alle beslutninger AU g arbeidsgruppen har måttet ta mange beslutninger Saken - en prøvestein på prfesjnsrådets evne til å håndtere/ppnå knsensus i viktige saker Generelt en (verraskende) psitiv erfaring Generell enighet m at dette er verdifullt fr institusjnene 19