Komparativ statistikk og indikatorer i kvalitetsarbeidet. Hva gjør NOKUT? Nyttig for hvem? Avdelingsdirektør Ole-Jacob Skodvin og Seniorrådgiver Pål Bakken, NOKUT Innlegg på Nasjonal konferanse om rangering, Hotell Terminus, Bergen 24.-25.11.2013
Disposisjon Innledning NOKUTs oppgaver og virkemidler Tallenes muligheter: NOKUT-portalen Studiebarometeret.no (Nasjonal studentundersøkelse og nettportal) Sentre for fremragende utdanning 2 05.12.201 3
Oppgaver og virkemidler norsk høyere utdanning Informasjon Andre sammenstillinger Tilsyn Søknadsbehandling: - om endret inst.status - om nye studier Tilsyn: - med inst. interne kontroll - direkte med enkeltstudier Tilsynet er både kontroll og råd om utvikling Andre virkemidler Utredninger Penger Arena NOKUT skal bidra til å sikre og fremme utdanningskvalitet forstått som kvaliteten og relevansen på læringsutbyttet 3
Universiteter og høyskoler 75 institusjoner 240.000 studenter I snitt 3.300 studenter per institusjon Halvparten har færre enn 1000 studenter En fjerdedel har færre enn 200 studenter 4
Tallenes muligheter «Kunnskap er makt» (Sir Francis Bacon i boken Meditationes Sacrae i 1597) I dag er dette en grunnleggende forutsetning for styring og deltakelse på alle nivåer i samfunnet Tilrettelegging av statistiske data og indikatorer gjennom allment tilgjengelige og brukervennlige portaler NOKUT: NOKUT-portalen (i samarbeid med DBH) og Studiebarometeret.no (nasjonal studentundersøkelse og portal om studiekvalitet) 5
NOKUT-portalen Portal med kvalitetsindikatorer til bruk i tilsynsarbeidet
NOKUT-portalen Lansert våren 2012, samarbeid NSD-NOKUT Formål: bidra til bedre og lettere tilgjengelige indikatorer for kvalitet i forskning og utdanning (for NOKUTs tilsynsarbeid) Over 30 kvalitetsindikatorer NOKUT-portalen er en del av KDs database DBH, som dekker over 95 % av alle studietilbud i Norge Gjenbruk av allerede rapporterte data, oppdateres løpende av DBH 7
NOKUTs databehov: en delmengde av hva som finnes i DBH DBHs samlede mengde data NOKUTs databehov
NOKUT-portalen: hva er nytt? Før: DBH meget kompleks database. Ofte vanskelig for institusjonene å vite hvilke indikatorer og varianter av indikatorer NOKUT bruker Gevinst: Økt effektivisering, profesjonalisering, tilgjengelighet og transparens: Indikatorene er predefinerte (telletidspunkt etc.) Indikatorene er dokumentert Indikatorene er samlet på et sted Lett å se hvilket datagrunnlag NOKUT bruker Lett å sammenligne med andre institusjoner Institusjonene kan bruke indikatorene i internt KS-arbeid Institusjonene kan bruke indikatorene som styringsverktøy i sitt strategiske arbeid 9
NOKUT-portalens tilsynsinngang Tilsynsinngangen ivaretar NOKUTs tilsynsfunksjon: 1. Akkreditering av institusjoner 2. Akkreditering av studier 3. Tilsyn med eksisterende institusjoner 4. Tilsyn med eksisterende studier 5. Evaluering av institusjonenes interne system for kvalitetssikring For hver formål presenteres kun de relevante indikatorene 10
NOKUT-portalens tilsynsinngang: Spennende kvalitetsindikatorer Student Karakterpoeng blant nye studenter (inntakskvalitet) Kvalifiserte førstevalgsøkere per studieplass Strykprosent Andel med eksamenskarakterer A + B Faglig tilsatte Stipendiatenes bruttotid brukt på fullføring Andel professor- og dosentårsverk Publiseringspoeng per faglig årsverk 11
12
13
Vekt på dokumentasjon Indikatorene dokumenteres i henhold til tre kriterier; Beregningsmåten På hvilken måte indikerer datastørrelsen noe om kvalitet i utdanning og forskning Portalen peker direkte (lenker) til relevant forankring i lov og forskrifter 14
Dokumentasjon 15
NOKUT-portalens analyseinngang Vil inneholde grafiske presentasjoner av indikatorer fordelt på fagfelt Hovedformål: Vise utdanningsprofilen til enkelte institusjoner, synliggjøre mangfoldet i utdanningen Egnet til visualisering og sammenligning av institusjoner på fagfeltnivå 16 Snarere enn å presentere en rangering, vises en rekke dimensjoner av utdanningskvalitet som kronbladene i en blomst Opp til brukeren å vurdere hva de ønsker å legge vekt på
NOKUT-portalen som rangeringsverktøy? Lett å bruke til sammenligning på institusjonsnivå Ikke så lett å rangere studieprogrammer Portalen er primært et instrument for NOKUT og institusjonene Svært få eksempler på at media har brukt portalen til rangeringer 17
Studiebarometeret Nasjonal undersøkelse om studentenes syn på kvalitet i egen utdanning
Bakgrunn og formål NOKUT utfører på oppdrag fra KD Gi informasjon om studentenes oppfatning av studiekvalitet på studieprogramnivå Alle HU-institusjoner Svarene presenteres i portalen Studiebarometeret.no 19
Målgrupper Studiesøkere Nåværende studenter HU-institusjoner Myndighetene Arbeidslivet Media 20
Studiebarometeret: nasjonal studentundersøkelse NOKUT gjennomførte den første årlige nasjonale studentundersøkelsen høsten 2013 2.- og 5. års-studenter ved alle norske læresteder I underkant av 60 000 studenter 1 600 bachelor- og mastergradsstudier Resultatene publiseres studiebarometeret.no 1. februar 2014 21
Tema for studentundersøkelsen Undervisning og veiledning Studie- og læringsmiljø Relevans for arbeidslivet Utvekslingsopphold i utlandet Vurdering av eget læringsutbytte Undervisnings- og arbeidsformer 22
Gjennomføring av undersøkelsen - 1 Referansegruppe, pilotundersøkelse, erfaringsinnhenting 50 spørsmål, 10 tema, 10 minutter Alle store og mellomstore institusjoner deltok Kontaktdata (mobilnr. og e-post) fra USIT Bakgrunnsdata som kjønn og alder fra USIT Data om studieprogram (navn, NUS-kode) fra USIT 23
Gjennomføring av undersøkelsen - 2 Lenke til skjema sendt via E-post Mobiltelefon (besvarelse på telefon) Nasjonal markedsføring Informasjon til HU, NSO, med flere Sosiale medier, Twitter Lokal markedsføring (HU og studentparlament) Intranett, sosiale medier, læringsplattformer, plakater etc. Informasjon tilknyttet undervisningen (effektivt!) Etc. 24
100% 90% 80% 70% 60% 50% 40% 30% 20% 10% 0% 25 Svarprosent: 32 % Respondets (%) Population size 7000 6000 5000 4000 3000 2000 1000 0 Universitetet i Stavanger Norges Informasjonsteknologiske HS Handelshøyskolen BI Sami allaskuvla/samisk høgskole Lovisenberg diakonale høgskole Universitetet i Agder NLA Høgskolen Høgskolen Stord/Haugesund Høgskulen i Volda Norges Handelshøyskole Norges dansehøyskole Høgskolen i Nesna UiT Norges arktiske universitet Arkitektur- og designhøgskolen i Oslo Universitetet i Nordland Høgskolen i Molde - VHS Westerdals Høyskole Høgskolen i Narvik Høgskolen i Vestfold Universitetet i Oslo Ansgar Teologiske Høgskole Norges musikkhøgskole Høgskolen i Telemark Universitetet i Bergen Høgskolen i Oslo og Akershus NTNU Kunsthøgskolen i Oslo Høgskolen i Harstad Høgskolen i Bergen Norges Veterinærhøgskole Høgskolen i Ålesund Høgskolen i Lillehammer Høgskolen i Østfold Universitetet for miljø- og biovitenskap Høgskolen i Sør-Trøndelag Det teologiske Menighetsfakultet Diakonhjemmet høgskole Misjonshøgskolen Kunst- og designhøgskolen i Bergen Høgskolen i Nord-Trøndelag Høgskolen i Hedmark Fjellhaug Internasjonale Høgskole Norges Idrettshøgskole Markedshøyskolen Høgskolen i Buskerud Bjørknes Høyskole Bergen Arkitekthøgskole Høgskolen i Gjøvik Norges Kreative Fagskole Atlantis Medisinske Høgskole Barratt Due musikkinstitutt Høyskolen Diakonova Høgskulen i Sogn og Fjordane Dronning Mauds Minne Høgskolen Norges Helsehøyskole Betanien diakonale høgskole Rudolf Steinerhøyskolen Haraldsplass diakonale høgskole
Sykepleie - bachelorstudium
Samfunnsøkonomi - bachelorstudium
Studiebarometeret nyttig fordi: Vil gi studiesøkere nyttig informasjon for å kunne ta et valg om studiested og program Etablerte studenter kan finne god informasjon om studieprogrammer ved eget eller nye lærested Institusjonene vil få god informasjon om studentenes oppfatning av kvaliteten på utdanningene de gir, og De vil få mulighet til å sammenligne studieprogrammene sine med andre institusjoners studieprogram 28
Hva vil jeg finne på studiebarometeret.no? Studentenes syn på studiekvalitet på programnivå ved norske universiteter og høyskoler Informasjon om studiested, størrelse på studieprogram, undervisningsspråk m.m. Mulighet til å sammenlikne flere aspekter ved samme studieprogram ved ulike læresteder Studiebarometeret.no lanseres 1. februar 2014 29
Portalens forside, prototypen 30
Portalens søkeresultatside, prototypen 31
alens menligningsside NB! Alle tallene er fiktive! 32
Portalens sammenligningsside, forts.. NB! Alle tallene er fiktive! 33
Bruk av data Terskelverdier NUS-kodeverket styrer programinndelingen Institusjoner får data om egne program Rådata til forskningsformål 34
Studiebarometeret som rangeringsverktøy? Alle nettsteder med indikatorer kan brukes til rangeringsformål Portalen legger ikke opp til rangering o o Kan ikke sammenligne på institusjonsnivå Kan sammenligne på programnivå Et instrument for studiesøkere til å foreta mest mulig rasjonelle valg 35
Sentre for fremragende utdanning (SFU)
side 37 SFU-ordningen En nasjonal prestisjeordning for utdanningsvirksomhet i høyere utdanning på bachelor- og masternivå En parallell til SFF og andre toppsenterordninger innen forskning Skal stimulere og belønne integrerende modeller mellom studenter, undervisere og utdanningens kunnskapsbase Det er utviklet egne krav og kriterier for utvelgelsen av sentrene der beslutningene tas i eksterne ekspertkomitéer Hovedkriteriene for utvelgelsen av sentrene er dokumentasjon av fremragende kvalitet i eksisterende utdanning En senterplan som viser operative tiltak for utdanningsinnovasjon og spredning av senterets kunnskap
side 38 SFU: Hvorfor? Stimulere til etablering og utvikling av fagmiljøer som tilbyr fremragende utdanning Bidra til kunnskapsbasert analyse og utvikling av undervisning og læringsarbeid som grunnlag for kvalitetsheving og fornyelse ved institusjonene Bidra til gode relasjoner mellom utdanning og relevante samfunns- og yrkesfelt Spre kunnskap om det fremragende («Benchmarking»)
side 39 Fra januar 2014: 4 SFU-sentre operative Pilot fase i 2011-2012 relatert til lærerutdanning ProTed (Centre for Professional Learning in Teacher Education) tildelt status som Norges første SFU-senter i desember 2011 (UiO og UiT) Første åpent for alle fag og disipliner i 2013 3 nye sentre utnevnt i november 2013: Norges Musikkhøyskole - Centre of Excellence in Music Performance Education (CEMPE) Universitetet i Agder - Centre for Research, Innovation and Coordination of Mathematics Teaching (MatRIC) Universitetet i Bergen - Centre for Excellence in Biology Education (BioCEED)
side 40 Kriterier 1. Dokumentasjon av fremragende kvalitet i eksisterende utdanning 2. Utdanningsinnovasjon: God senterplan hvor videreutvikling og fornyelse av utdanningen tydeliggjøres 3. Plan for spredning av kunnskap og erfaringer
side 41 Resultater for NOKUT Kartlegger styrker i UH-sektoren og på programnivå Eksellente utdanningspraksiser dokumenteres Gis oss dokumentasjon på hvordan ulike faktorer virker inn på læringsutbytte: FoU-basering Digitalisering (blended learning) Kunstnerisk utviklingsarbeid +++
TAKK FOR OPPMERKSOMHETEN! 42