Kan utdanningskvalitet måles? Innlegg på konferansen «Hva er kvalitet i utdanning?», Bergen 14. mai 2012 v/ Terje Mørland, Direktør NOKUT
Kan utdanningskvalitet måles? JA! men ikke av en datamaskin, og viktig å være bevisst på hva man måler 2
Innhold 1. Hva mener vi med utdanningskvalitet? 2. Hvordan vurdere utdanningskvalitet? 3. Indikatorer og annen informasjon om utdanningskvalitet 4. Felles løft for arbeidet med utdanningskvalitet 3
NOKUTs forståelse av utdanningskvalitet tar utgangspunkt i at vi fører tilsyn på vegne av samfunnet Fra NOKUTs formålsparagraf: NOKUT skal bidra til at samfunnet kan ha tillit til kvaliteten i norsk høyere utdanning og fagskoleutdanning, samt godkjent høyere utenlandsk utdanning Dette innebærer at: Både studenter og arbeidsliv skal kunne være trygge på at det studentene kan etter endt utdanning holder mål Studenter skal i tillegg kunne være trygge på at undervisningen de får holder mål Med utdanningskvalitet mener vi kvaliteten på: lærestedenes tilrettelegging for studentenes læring, og studentenes læringsutbytte etter endt utdanning 4
Læringsutbytte (LU) som grunnleggende størrelse i arbeidet med utdanningskvalitet LU forstås som kunnskaper, ferdigheter og generell kompetanse (NKR) Med LU i definisjonen inkluderes automatisk relevans i kvalitetsbegrepet Med LU i definisjonen inkluderes indirekte en tidsfaktor (LU på normert tid) LU kan forenkle kommunikasjonen om utdanningskvalitet (tydeliggjøre diffuse begreper som dannelse og FoU-basert utdanning ) LU kan være verktøy ved utvikling av studieprogrammer (starte prosessen bakfra : Hva skal studentene kunne når de er ferdig?) LU kan bidra til å målrette kvalitetssikringen (fokusere på det faglige resultatet av utdanningen) 5
Innhold 1. Hva mener vi med utdanningskvalitet? 2. Hvordan vurdere utdanningskvalitet? 3. Indikatorer og annen informasjon om utdanningskvalitet 4. Felles løft for arbeidet med utdanningskvalitet 6
Det vi helst vil måle er kvaliteten på: lærestedenes tilrettelegging for studentenes læring, og studentenes læringsutbytte etter endt utdanning 7
Hvordan vurdere / premiere / få indikasjoner på kvaliteten? (Når vi ikke kan eller vil vurdere læringsutbyttet direkte) Avhenger av mange faktorer: Hva som er formålet: Sikre minimumskvalitet, evaluere/sammenlikne institusjoner/studier, premiere de fremragende, lage finansieringsmodeller Når vurderingen skjer: Før, under eller etter et studieløp Hvem som gjør vurderingen: Fagmiljøet, institusjonen, NOKUT, arbeidsliv, søkere Viktig å være bevisst på sammenhengen mellom det man ønsker å vurdere og det man faktisk får målt direkte 8
Ny student Resultat Læringsutbytte Eksempel: Sammenhengen mellom NOKUTs definisjon av utdanningskvalitet og våre akkrediteringskriterier * Studium Plan Tilrettelegging for læring (Undervisning og andre aktiviteter) Fagmiljø Støttefunksjoner og infrastruktur Grunnl. forutsetninger (KS, lover, forskrifter etc.) *Kriteriene gjelder for alle institusjoner, også de som ikke behøver å søke NOKUT 9
Akkreditering av nye studier og tilsyn med eksisterende: Hva vurderer NOKUT? Ved godkjenning av nye studier vurderes om det er sannsynlig at søker er i stand til å tilby studiet med tilfredsstillende kvalitet ut fra en plan for studiet og grunnleggende forutsetninger og innsatsfaktorer. Planen for studiet knyttes tett opp mot forventet læringsutbytte. Ved tilsyn med eksisterende studier vurderes om studiet faktisk tilbys med tilfredsstillende kvalitet. Det vurderes om læringsutbytte, undervisning, innsatsfaktorer og/eller forutsetninger er som forespeilet i planen. Både kvantitative indikatorer og tilbakemeldinger fra studenter, lærere og arbeidsliv kan benyttes i vurderingen. 10
Ny modell for tilsynet med eksisterende studier Revidering Oppfølging etter 3 år Redegjørelse Kartlegging 11
Innhold 1. Hva mener vi med utdanningskvalitet? 2. Hvordan vurdere utdanningskvalitet? 3. Indikatorer og annen informasjon om utdanningskvalitet 4. Felles løft for arbeidet med utdanningskvalitet 12
Ulike typer grunnlagsdata for vurdering av utdanningskvalitet Kvantitative indikatorer Tilbakemeldinger (spørreskjema, observasjon, intervju ) fra: nåværende studenter tidligere studenter arbeidsgivere lærerne Indikatorer er ikke en fasit, men må vurderes/fortolkes Viktig å være bevisst på sammenhengen mellom det man ønsker å vurdere og det dataene faktisk er indikasjoner på 13
Eksempel på indikatorer Snittkarakterer fra videregående skole Andel av studentene som får toppkarakterer Studiepoengproduksjon per student Studentutveksling De faglig tilsattes kompetanse Publisering per faglig tilsatt Hvorfor denne portalen? NOKUT trengte et mer effektivt verktøy i tilsynsarbeidet I praksis også et verktøy for institusjonene selv Kan også være et verktøy for studenter/allmennhet http://dbh.nsd.uib.no/nokutportal 14
Innhold 1. Hva mener vi med utdanningskvalitet? 2. Hvordan vurdere utdanningskvalitet? 3. Indikatorer og annen informasjon om utdanningskvalitet 4. Felles løft for arbeidet med utdanningskvalitet 15
Et tilstandsbilde: Utviklingen i hverdagen sett fra en (fremragende) forsker Illustrasjon fra Dag O. Hessens innlegg Utdanning og forskning konkurrenter eller symbionter?, NOKUT-konferansen 26.04.2012 16
Et tilstandsbilde: Nasjonal satsing på kvalitet de siste 10 år Forskning: Stor satsing på fremragende forskning Høyere utdanning: Den store struktur- og gjennomføringsreformen 17
Behov for egen stortingsmelding om høyere utdanning og fagskoleutdanning, om bl.a: 1. Begrepet utdanningskvalitet og indikatorer for kvalitet 2. Incentiver og konkurransearenaer (SFU mm.) for å stimulere kvalitet 3. Utdanningsledelse og personalpolitiske virkemidler for å stimulere kvalitet 4. Videreutvikling av sektoren som grunnlag for kvalitet, se fagskole og høyere utdanning i sammenheng 5. NOKUTs rolle, andre KD-etaters rolle, og KDs egen rolle for å stimulere kvalitet 18