Evaluering av eksamen Rapport med bakgrunn i sensorenes tilbakemeldinger og eksamenskontorets vurderinger

Transkript

1 Rapport med bakgrunn i sensorenes tilbakemeldinger og eksamenskontorets vurderinger Lisa Katrine Svendsen, Kvalitetskoordinator Renate Hauge Sund, Eksamenskoordinator Rapport: (13) 2016

2 Innhold Evaluering av eksamen 2016 Evaluering av eksamen Rapport med bakgrunn i sensorenes tilbakemeldinger og eksamenskontorets vurderinger... 1 Oppsumering og vurdering... 3 Den tekniske gjennomføringen... 3 Spørreskjemaet... 3 Svarprosent... 3 Sensorenes evaluering av innhold, relevans og faglig nivå... 3 Informasjon Innledning Spørreundersøkelsen Svarprosent Spørreskjemaene Sensorenes evaluring

3 Oppsumering og vurdering Evaluering av eksamen 2016 Våren 2016 ble det gjennomført ca. 240 utøvende eksamener med til sammen 28 eksterne sensorer og 65 interne sensorer. Det ble i tillegg avholdt skriftlig- og muntlig eksamen i ca. 30 emner med over 18 eksterne sensorer og 21 interne sensorer. Den tekniske gjennomføringen Eksamensavviklingen ble våren 2016 gjennomført som planlagt med noen unntak. Uforutsette hendelser (sykdom) ga i noen få tilfeller forsinket sensur. Utfordringer som eksamenskontoret tidligere har erfart er fortsatt til stede i årets eksamensavvikling. I hovedsak gjelder dette studenter som ikke avholder innleveringsfrister. Hovedinstrumentrapporter på bachelornivå, eksamensprogram, tekniske behov og refleksjonsnotat på både bachelor- og masternivå blir dessverre levert mange uker etter fristen den 15. april. Eksamenskontoret blir forsinket i sitt arbeid og eksamenskommisjonene mottar sent nødvendig informasjon fra studentene. Eksamenskontoret har oversendt en god del informasjon elektronisk til kommisjonene for hurtig informasjonsflyt. Tilbakemeldingen fra de eksterne sensorene viser at så mange som 89% ønsker informasjon tilsendt elektronisk. De interne sensorer ønsker begge deler. I desember sender eksamenskontoret ut en tentativ eksamensplan til involverte hovedinstrumentlærere og ber de komme med tilbakemelding for justering av tidsplanen innenfor hvert instrument. Vi er i dialog med mange lærere og akkompagnatører i løpet av desember og januar før endelig plan publiseres i Time Edit. Det er en utfordring å få tilbakemelding fra alle involverte. Dette arbeidet må i større grad kvalitetssikres for neste års planleggingsperiode slik at alle er tilfredse med pauser og tidsbruk under avvikling av eksamen. Noen sensorer etterlyser mer informasjon om vurderingskriterier i de ulike emnene og prosjektet med vurderingsordninger vil kanskje tydeliggjøre disse i emnebeskrivelsene. Digital eksamen vil være ett av fokusområdene for eksamenskontoret det kommende skoleåret. Planlegging og gjennomføring av en digital eksamen i EXMUS10 vil etter planen foregå høsten Våren 2017 vil det avvikles flere digitale eksamener i de teoretiske emnene ved NMH. Spørreskjemaet Spørreundersøkelsen besto både av spørsmål med avkryssingsmulighet og spørsmål med åpne svarmuligheter. Det ble utarbeidet to spørreskjemaer, et for interne og et for eksterne sensorer. Ved neste års evaluering vil det være en fordel om et og samme spørreskjema sendes til både interne og eksterne sensorer, men med en mulighet for å krysse av om man er ekstern eller intern sensor. Videre kan noen av spørsmålene kun bli stilt eksterne eller interne sensorer dersom det er ønskelig. Det vil videre forenkle analysearbeidet i ettertid om emnekategoriene med nivå var tydeligere presisert i skjemaet og at graderingsspørsmålene så ble tilknyttet disse. Svarprosent Svarprosenten for både interne og eksterne sensorer har gått opp fra i fjor og ligger på 76 % for eksterne og 72 % for interne sensorer. Sensorenes evaluering av innhold, relevans og faglig nivå 3

4 Alle sensorer, både interne og eksterne, fikk spørsmål om vurderingsformen er relevant i forhold til emnets læringsmål, om vurderingsformen gir studentene mulighet til å vise sin kompetanse og om formen på eksamen er relevant for arbeidslivet studentene skal utdannes til. Resultatene er stort sett positive på disse tre spørsmålene. Sensorenes evaluering av om formen på eksamen er relevant for arbeidslivet har gått noe ned fra fjorårets undersøkelse. Det er først og fremst sensorer innenfor komposisjon (bachelor), musikk og helse (videreutdanning) og musikkteoretiske emner (bachelor og master) som scorer eksamens relevans i forhold til arbeidslivet noe lavt. Når det gjelder en noe lavere score på musikkteoretiske emner kan dette ha sammenheng med at mange av studentene går utøvende studier og musikkteori-eksamenene er derfor knyttet til støtteemner. I den sammenheng kan sensorene ha sett på disse eksamene som mindre relevant enn utøvende eksamener med tanke på arbeidsrelevans for utøvende virksomhet. En respondent påpeker at det er vanskelig å svare på om eksamen er relevant for arbeidslivet når studentene i dag skal utdannes til så skiftende og varierte arbeidsoppgaver. Innenfor eksamen hovedinstrument på bachelornivå er det flest som er missfornøyd med arbeidsrelevans innenfor hovedinstrument blås. De eksterne sensorene vurderer NMH-studentenes faglige nivå som tilfredsstillende i forhold til studenter ved andre institusjoner og i forhold til arbeidslivet de møter. Fritekstkommentarer angående eksamens form, vurderingsform og organisering er tatt i betraktning og videreformidlet til eksamenskoordinator, ansvarlig for vurderingsprosjektet og aktuelle fagansvarlige. De fleste kommentarene hadde spesifikke forslag til forbedring/endring av enkelte eksamener og emnevurderinger. Et par kommenterer at de skulle ønske studentene fikk skriftlig tilbakemelding på sin eksamen for å kunne lettere videreutvikle og forbedre seg. Noen bemerker at den utøvende eksamen kan være begrensende med tanke på å si noe om kompetansebredden og læringsprosessen til studentene. Noen ønsket mer tid mellom de ulike eksamenskandidatene (dette gjelder spesielt hovedinstrument blås og stryk). Både interne og eksterne sensorer er fornøyd med eksamenskommisjonens sammensetning og arbeid med sensurering. Noen ønsker at det skal være eksterne sensorer eller flere sensorer tilstede for å sikre nøytral bedømmelse (hovedinstrument stryk). Informasjon Flertallet av både eksterne og interne sensorer opplever hovedinstrumentrapport, refleksjonsnotat og prosjektbeskrivelse som nyttig eller svært nyttig informasjon for dem som sensorer. Ingen eksterne sensorer mente at rapportene var unyttige mens 22% av interne sensorer fant hovedinstrumentrapporten lite nyttig. 11 eksterne og 6 interne sensorer oppgir at de ikke har fått tilstrekkelig informasjon i forkant av eksamen. Andelen eksterne sensorer som savner informasjon har gått opp fra i fjor da den lå på 23 % mot årets 31 %. I 2014 lå andelen på 37%. De som oppgir at de manglet informasjon tilhørte hovedsakelig hovedinstrument stryk og musikkpedagogiske emner. Sensorene oppgir at den manglende informasjonen var informasjon om studentene, vurderingskriterier, verklister, beskrivelse av sensors rolle og emneplaner. Noen ønsket at informasjonen skulle komme tidligere. 10 % av interne sensorer savner informasjon. De interne sensorene (6) som oppgir mangler nevner refleksjonsnotat, hovedinstrumentrapport, informasjon om kandidater med spesielle 'tilfeller', repertoar, studieplaner, beskrivelse av karakterskala og oppdatert eksamensplan. 89 % av de eksterne sensorene som svarte undersøkelsen ønsker å motta informasjon elektronisk. Kun 4 respondenter ønsket papirform og disse sensurerte musikkterapi, musikkpedagogikk og hovedinstrument stryk. Blant interne sensorer er det 68 % som ønsker seg informasjon elektronisk og 32 % som ønsker seg informasjon i papirform. De som ønsker seg informasjon på papirform blant interne sensorer tilhører ulike fagmiljøer. Til tross for at 4

5 flertallet oppgir at de ønsker seg informasjon elektronisk kommer det frem i fritekstkommentarene at mange ønsker seg begge deler. Noen påpeker at det er fint å få informasjon i forkant elektronisk og papirform når de skal sensurere. 5

6 1. Innledning Evaluering av eksamen 2016 Evaluering av eksamensavviklingen inngår i Musikkhøgskolens kvalitetssikringssystem, ved Norges musikkhøgskole som beskrevet i punkt 4.2. NMH skal årlig evaluere vurderingsformens relevans, inn hold, form og praktisk gjennomføring. Dette krever at sensorene evaluerer vurderingsformens relevans, innhold og form samt praktisk gjennomføring og eksamen i forhold til emnets læringsmål. Både eksterne og interne sensorer har fått tilsendt en spørreundersøkelse per e-post der de bes om å vurdere gjennomføringen, relevansen av formen og innholdet, og eventuelt foreslå endringer. Eksterne sensorer ble i tillegg bedt om å evaluere studentenes faglige nivå. Våren 2016 ble det gjennomført ca. 240 utøvende eksamener med til sammen 28 eksterne sensorer og 65 interne sensorer. Det ble i tillegg avholdt skriftlig- og muntlig eksamen i ca. 30 emner fra over 18 eksterne sensorer og 21 interne sensorer. Det ble brukt eksterne sensorer i følgende emner: Eksterne sensorer Bachelor Master Videreutdanning EXMUS10 MPMAST70 FAGDI65 KOMP20 MTMAST70 PED50/51 DIPA20 MPTEO70 ADMLED50 UTHOINST MTMUSTER70 PED21 FAGDI25 TEKMAST70 ATMAST70 KPMAST70 DIMAST70 UTMASTER Tabell 1-1 Emner med eksterne sensorer Spørreundersøkelsen Spørreundersøkelsen besto både av spørsmål med avkryssingsmulighet og spørsmål med åpne svarmuligheter. Kommentarer som går på det praktiske og organisatoriske rundt eksamensavviklingen oversendes eksamenskontoret, mens kommentarer som går på det faglige oversendes de aktuelle fagseksjonslederne dersom det er mulig å identifisere hvilket emne kommentaren dreier seg om. I år sendes i tillegg rapporten samt alle fritekstkommentarer til ansvarlig for vurderingsordning prosjektet ved NMH Svarprosent Svarprosenten har steget fra i fjor for både de eksterne og interne sensorene. Eksterne sensorer Vår 11 Vår 12 Vår 13 Vår 14 Vår 15 Vår 16 Inviterte Respondenter Svarprosent 52 % 18 % 85 % 68 % 67 % 76 % Tabell Historisk svarprosent eksterne sensorer Interne sensorer Vår 11 Vår 12 Vår 13 Vår 14 Vår 15 Vår 16 Inviterte Respondenter Svarprosent 26 % 15 % 69 % 57 % 60 % 72% Tabell Historisk svarprosent interne sensorer 6

7 2.2. Spørreskjemaene Evaluering av eksamen 2016 Det ble utarbeidet to spørreskjemaer, et for interne og et for eksterne sensorer. Skjemaet for eksterne sensorer var mulig å fylle ut på engelsk. Skjemaene ble sendt ut elektronisk via programmet SurveyXact den og , med to påfølgende påminnelser. Spørsmålene er gjengitt i fet skrift. Fritekstkommentarer kan være redigert og/ eller anonymisert av personlige hensyn. Der kommentaren er gjengitt ordrett står den i kursiv, der den er redigert står den som normal. Alle fritekstkommentarene er for øvrig presentert i sin helhet for studie- og FoU-sjefen samt eksamenskoordinator. 7

8 3. Sensorenes evaluring Sensorer bachelornivå: 1. På en skala fra 1-5, der 1 er ikke i det hele tatt og 5 er i svært stor grad Komposisjon Hovedinstrument jazz Hovedinstrument folkemusikk -I hvilken grad er eksamen relevant i forhold til læringsmål? (Frekvens, bachelornivå) Figur 3-1 : EXMUS10, EXMUS11, SATS10, SATS11, MPSATS10, MPSATS20. Komposisjon: KOMP20, KOMP10 : DIPA10, DIPA20 :PED21,PED31,FAGDI25,FAGDI45 : ADMLED50, LITURGISK SPILL -I hvilken grad er eksamen relevant i forhold til læringsmål? (Gjennomsnitt, bachelornivå) Gjennomsnitt Interne sensorer Gjennomsnitt Eksterne sensorer Gjennomsnitt Totalt Komposisjon 3,0 3,0 4,4 4,7 4,4 4,4 Figur 3-2 : EXMUS10, EXMUS11, SATS10, SATS11, MPSATS10, MPSATS20. Komposisjon: KOMP20, KOMP10 : DIPA10, DIPA20 :PED21,PED31,FAGDI25,FAGDI45 Generelt er sensorene på bachelornivå fornøyd med eksamenes relevans i forhold til læringsmål. På en skala fra 1-5 er det få sensorer på ulike emnekategorier som oppgir et tall på 3 eller lavere. En sensor på komposisjon og en sensor på musikkpedagogikk oppgir 3. I gjennomsnittsrapporten er alle emnekategorier med færre en tre respondent er utelatt. 8

9 -I hvilken grad opplever du at eksamen gir studentene mulighet til å vise sin kompetanse? (Frekvens, bachelornivå) Komposisjon Hovedinstrument jazz Hovedinstrument folkemusikk Figur 3-3 : EXMUS10, EXMUS11, SATS10, SATS11, MPSATS10, MPSATS20. Komposisjon: KOMP20, KOMP10 : DIPA10, DIPA20 :PED21,PED31,FAGDI25,FAGDI45 : ADMLED50, LITURGISK SPILL - I hvilken grad opplever du at eksamen gir studentene mulighet til å vise sin kompetanse? (Gjennomsnitt, bachelornivå) Interne sensorer Eksterne sensorer Totalt 4,1 Komposisjon 3,5 3,0 4,6 Figur 3-4 : EXMUS10, EXMUS11, SATS10, SATS11, MPSATS10, MPSATS20. Komposisjon: KOMP20, KOMP10 : DIPA10, DIPA20 :PED21,PED31,FAGDI25,FAGDI45 Sensorene på bachelornivå er forøyd med om eksamen gir studentene mulighet til å vise sin kompetanse. På en skala fra 1-5 er det svært få som oppgir et tall på 3 eller lavere. I gjennomsnittsrapporten er alle emnekategorier med færre en tre respondenter utelatt. 9

10 Komposisjon Hovedinstrument jazz Hovedinstrument folkemusikk -I hvilken grad er formen relevant for arbeidslivet studiet skal utdanne til? (Frevens: bachelornivå) Figur 3-5 : EXMUS10, EXMUS11, SATS10, SATS11, MPSATS10, MPSATS20. Komposisjon: KOMP20, KOMP10 : DIPA10, DIPA20 :PED21,PED31,FAGDI25,FAGDI45 : ADMLED50, LITURGISK SPILL - I hvilken grad er formen på eksamen relevant for arbeidslivet studiet skal utdanne til? (Gjennomsnitt, bachelornivå) Interne Eksterne Totalt Komposisjon 2 2,5 2,7 3,0 3,2 3, ,9 3,9 3,9 4,6 4,7 5 Figur 3-6 : EXMUS10, EXMUS11, SATS10, SATS11, MPSATS10, MPSATS20. Komposisjon: KOMP20, KOMP10 : DIPA10, DIPA20 :PED21,PED31,FAGDI25,FAGDI45 Mange sensorer på bachelornivå er fornøyd med eksamenes relevans i forhold til arbeidslivet. Sensorer på komposisjon og musikkteoretiske emner er mindre fornøyd enn resten. Dette gjelder spesielt eksterne sensorer, men her er det viktig å påpeke at det kun var en ekstern sensor på komposisjon og to eksterne sensorer på musikkteoretiske emner som besvarte undersøkelsen. På musikkteoretiske emner ble det i 2016 brukt eksterne sensorer i emnene EXMUS10, PED21 og FAGDI25. Når det gjelder musikkteoretiske emner kan grunnen til en lavere score ha sammenheng med at mange av studentene går utøvende studier og musikkteori-eksamenene vil derfor være knyttet til støtteemner. I den sammenheng kan sensorene se på disse eksamene som mindre relevante enn utøvende eksamener når det gjelder arbeidsrelevans for utøvende virksomhet. Innenfor eksamen hovedinstrument er det flest som er missfornøyd innenfor hovedinstrument blås. I noen fritekstkommentarer kommer det frem at enkelte sensorer finner det vanskelig å definere arbeidslivet da studiene gjerne skal 10

11 utdanne studenter til ulikt type arbeid. Eksamen vil da kunne være relevant for noen og mindre relevant for andre. I gjennomsnittsrapporten er alle emnekategorier med færre en tre respondenter utelatt. Sensorer masternivå: 1. På en skala fra 1-5, der 1 er ikke i det hele tatt og 5 er i svært stor grad Komposisjon Musikkteknologi Hovedinstrument jazz Hovedinstrument folkemusikk - I hvilken grad er eksamen relevant i forhold til emnets læringsmål? (Frekvens, masternivå) Figur 3-7 : MUSPER70 Komposisjon: KPMAST70 : DIMAST70 : MUSPED70, MPMAST70, MPTEO70 : MTMAST70, MTGRL70 : Live Electronics, PPU - I hvilken grad er eksamen relevant i forhold til emnets læringsmål? (Gjennomsnitt, masternivå) Interne Eksterne Totalt 4,7 4,2 4,2 4,4 Figur 3-8 : MUSPER70 Komposisjon: KPMAST70 : DIMAST70 : MUSPED70, MPMAST70, MPTEO70 : MTMAST70, MTGRL70 Sensorene på masternivå er forøyd med om eksamen er relevant i forhold til emnets læringsmål. På en skala fra 1-5 er det svært få som oppgir et tall på 3 eller lavere og samtlige emnekategoerier får høy gjennomsnits score. I gjennomsnittsrapporten er alle emnekategorier med færre en tre respondenter utelatt. 11

12 Komposisjon Musikkteknologi Hovedinstrument jazz Hovedinstrument folkemusikk - I hvilken grad opplever du at eksamen gir studentene mulighet til å vise sin kompetanse? (Frekvens, masternivå) Figur 3-9 : MUSPER70 Komposisjon: KPMAST70 : DIMAST70 : MUSPED70, MPMAST70, MPTEO70 : MTMAST70, MTGRL70 : Live Electronics, PPU - I hvilken grad opplever du at eksamen gir studentene mulighet til å vise sin kompetanse? (Gjennomsnitt, masternivå) Interne Eksterne Totalt 3,5 4,2 4,6 4,4 4,4 4,4 Figur 3-10 : MUSPER70 Komposisjon: KPMAST70 : DIMAST70 : MUSPED70, MPMAST70, MPTEO70 : MTMAST70, MTGRL70 Sensorene på masternivå er fornøyd med om eksamen gir studentene mulighet til å vise sin kompetanse. På en skala fra 1-5 er det ingen som oppgir et tall lavere enn 3 og svært få oppgir 3. Samtlige emnekategoerier får høy gjennomsnits score totalt. I gjennomsnittsrapporten er alle emnekategorier med færre en tre respondenter utelatt. 12

13 - I hvilken grad er formen på eksamen relevant for arbeidslivet studiet skal utdanne til? (Frekvens, masternivå) Komposisjon Musikkteknologi Hovedinstrument jazz Hovedinstrument folkemusikk Figur 3-11 : MUSPER70 Komposisjon: KPMAST70 : DIMAST70 : MUSPED70, MPMAST70, MPTEO70 : MTMAST70, MTGRL70 : Live Electronics, PPU - I hvilken grad er formen på eksamen relevant for arbeidslivet studiet skal utdanne til? (Gjennomsnitt, masternivå) Interne Eksterne Totalt 3,3 3,3 3,5 3,5 4,2 4,2 3,9 4,1 3,9 4,2 Figur 3-12 : MUSPER70 Komposisjon: KPMAST70 : DIMAST70 : MUSPED70, MPMAST70, MPTEO70 : MTMAST70, MTGRL70 Sensorene på masternivå er stort sett fornøyd med om eksamen er relevant i forhold til arbeidslivet studiet skal utdanne til. En høyere andel blant sensorer på musikkteoretiske emner og komposisjon scorer eksamen til 3 (middels) på dette spørsmålet enn blant sensorer til andre eksamener. De fleste emnekategoerier får høy gjennomsnits score totalt. På gjennomsnittsrapporten ser man at interne sensorer på musikkpedagogigkk og eksterne sensorer på musikkterapi scorer eksamen noe lavere når det gjelder arbeidsrelevans, men her må man ta hensyn til at disse gjennomsnittstallene er regnet ut fra svært få respondenter. I disse emnene er det kun en sensor som har svart 3. I gjennomsnittsrapporten er emnekategorier med færre en tre respondenter utelatt. 13

14 Sensorer videreutdanning: Evaluering av eksamen På en skala fra 1-5, der 1 er ikke i det hele tatt og 5 er i svært stor grad - I hvilken grad er eksamen relevant i forhold til emnets læringsmål? (Frekvens, videreutdanning) Figur 3-13 : ADMLED50, KOMP50 : MHHEL50 : PED50/51 FAGDI65 : Liturgisk spill /Hymnologi, Administrasjon, - I hvilken grad er eksamen relevant i forhold til emnets læringsmål? (Gjennomsnitt, videreutdanning) Interne Eksterne Totalt 4,8 4,6 4,7 4,2 Figur 3-14 : ADMLED50, KOMP50 : PED50/51 FAGDI65 : Liturgisk spill /Hymnologi, Administrasjon, Sensorene på videreutdanning er stort sett fornøyd med om eksamen er relevant i forhold til emnets læringsmål. På en skala fra 1-5 er det få som oppgir et tall på 3 eller lavere. Sensorene på musikkterapeutiske emner er mindre fornøyd med emnets relevans når det gjelder læringsmål (MHHEL50), men her er det kun to respondenter som har svart. Emnekategoerier med mer enn tre respondenter får alle høy gjennomsnits score totalt. 14

15 - I hvilken grad opplever du at eksamen gir studentene mulighet til å vise sin kompetanse? (Frekvens, videreutdanning) Figur 3-15 : ADMLED50, KOMP50 : MHHEL50 : PED50/51 FAGDI65 : Liturgisk spill /Hymnologi, Administrasjon, - I hvilken grad opplever du at eksamen gir studentene mulighet til å vise sin kompetanse? (Gjennomsnitt, videreutdanning) Interne Eksterne Totalt 3,0 4,4 4,1 Figur 3-16 : ADMLED50, KOMP50 : PED50/51 FAGDI65 : Liturgisk spill /Hymnologi, Administrasjon, Sensorene på videreutdanning er stort sett fornøyd med om eksamen gir studentene mulighet til å vise sin kompetanse. På en skala fra 1-5 er det få som oppgir et tall på 3 eller lavere. Sensorene på musikkterapeutiske emner (MHHEL5) er mindre fornøyd, men her er det kun to respondenter som har svart. Emnekategoerier med mer enn tre respondenter får alle høy gjennomsnitsscore totalt. 15

16 - I hvilken grad er formen på eksamen relevant for arbeidslivet studiet skal utdanne til? (Frekvens, videreutdanning) Figur 3-17 : ADMLED50, KOMP50 : MHHEL50 : PED50/51 FAGDI65 : Liturgisk spill /Hymnologi, Administrasjon, - I hvilken grad er formen på eksamen relevant for arbeidslivet studiet skal utdanne til? (Gjennomsnitt, videreutdanning) Interne Eksterne Totalt 3,7 3,7 3,7 4,1 3,0 3,7 3,7 3,9 Figur 3-18 : ADMLED50, KOMP50 : MHHEL50 : PED50/51 FAGDI65 : Liturgisk spill /Hymnologi, Administrasjon, Sensorene på videreutdanning er stort sett fornøyd med om eksamen er relevant for arbeidslivet studiet skal utdanne til. Sensorene på musikkterapeutiske emner MHHEL50 er mindre fornøyd, men her er det kun to respondenter som har svart. Det er flere sensorer som er mindre fornøyd med dette enn de tidligere spørsmål som angår læringsmål og om studentene får vist kompetanse. Gjennomsnittet totalt er likevel tilfredstillende da alle emnekategorier med over 3 respondenter får en score på 3,7 eller høyere. 16

17 Eksterne sensorer bachelornivå: Evaluering av eksamen På en skala fra 1-5, der 1 er svært lavt nivå og 5 er svært høyt nivå Komposisjon Hovedinstrument jazz - Hvordan vurderer du studentenes faglige nivå i forhold til arbeidslivet de møter? (Frekvens, bachelornivå, eksterne sensorer) Figur 3-19 : EXMUS10, EXMUS11, SATS10, SATS11, MPSATS10, MPSATS20. Komposisjon: KOMP20, KOMP10 : DIPA10, DIPA20 :PED21,PED31,FAGDI25,FAGDI45 : ADMLED50 Hvordan vurderer du studentenes faglige nivå i forhold til arbeidslivet de møter? (Gjennomsnitt, bachelornivå, eksterne sensorer) 3,6 3,8 Figur 3-20 Eksterne sensorer på bachelornivå vurderer studentenes faglige nivå som tilfredstillende i forhold til arbeidslivet de møter. Blant sensorer på hovedinstrument klassisk er det sensorer på hovedinstrument stryk som er minst fornøyd med studentenes faglige nivå med tanke på arbeidslivet. Spørsmålet kan for øvrig tolkes noe ulikt fra sensor til sensor, der noen anser 3 som et tilfredstillende/likt nivå med tanke på arbeidslivet mens andre anser 3 som en lav score. Det er derfor noe uklart hvordan sensorene har tolket spørsmålet og skalaen. Flest sensorer scorer imidlertid 4 noe som tilsvarer et relativt høyt nivå i forhold til arbeidslivet studentene blir møtt med. 17

18 - Hvordan vurderer du studentenes faglige nivå sammenliknet med studenter på egen institusjon/andre liknende eksamener? (Frekvens, bachelornivå, eksterne sensorer) Komposisjon Hovedinstrument jazz Figur 3-21 : EXMUS10, EXMUS11, SATS10, SATS11, MPSATS10, MPSATS20. Komposisjon: KOMP20, KOMP10 : DIPA10, DIPA20 :PED21,PED31,FAGDI25,FAGDI45 : ADMLED50 - Hvordan vurderer du studentenes faglige nivå sammenliknet med studenter på egen institusjon/andre liknende eksamener? (Gjennomsnitt, bachelornivå, eksterne sensorer) 3,7 3,9 Figur 3-22 Eksterne sensorer på bachelornivå vurderer studentenes faglige nivå som enten likt eller høyere sammenliknet med studenter på egen institusjon/andre liknende eksamener. Blant sensorer på hovedinstrument klassisk er det sensorer på hovedinstrument stryk og blås som er minst fornøyd med studentenes faglige nivå sammenliknet med studenter fra andre institusjoner. Spørsmålet kan for øvrig tolkes noe ulikt fra sensor til sensor, der noen anser 3 som et likt nivå med studenter på andre institusjoner mens andre anser 3 som en lav score. Det er derfor noe uklart hvordan sensorene har tolket spørsmålet og skalaen. Fles t sensorer scorer imidlertid 4 eller 5 noe som tilsvarer et høyt nivå sammenliknet med studenter fra andre deres egne institusjoner/liknende eksamener. 18

19 Eksterne sensorer masternivå: 2. På en skala fra 1-5, der 1 er svært lavt nivå og 5 er svært høyt nivå Komposisjon Musikkteknologi Hovedinstrument jazz - Hvordan vurderer du studentenes faglige nivå i forhold til arbeidslivet de møter? (Frekvens, masternivå, eksterne sensorer) Figur 3-23 Komposisjon: KPMAST70 : DIMAST70 : MUSPED70, MPMAST70, MPTEO70 : MTMAST70, MTGRL70 : Live Electronics, PPU - Hvordan vurderer du studentenes faglige nivå i forhold til arbeidslivet de møter? (Gjennomsnitt, masternivå, eksterne sensorer) Figur 3-24 : MUSPED70, MPMAST70, MPTEO70 Eksterne sensorer på masternivå vurderer studentenes faglige nivå som tilfredstillende og høyt i forhold til arbeidslivet de møter. 19

20 Komposisjon Musikkteknologi Hovedinstrument jazz - Hvordan vurderer du studentenes faglige nivå sammenliknet med studenter på egen institusjon/andre lignende eksamener? (Frekvens, masternivå, eksterne sensorer) Figur 3-25 Komposisjon: KPMAST70 : DIMAST70 : MUSPED70, MPMAST70, MPTEO70 : MTMAST70, MTGRL70 : Live Electronics, PPU - Hvordan vurderer du studentenes faglige nivå sammenliknet med studenter på egen institusjon/andre liknende eksamener? (Gjennomsnitt, masternivå, eksterne sensorer) 4,1 4,1 Figur 3-26 : MUSPED70, MPMAST70, MPTEO70 Eksterne sensorer på masternivå vurderer studentenes faglige nivå sammenliknet med studenter på egen institusjon/andre liknende eksamener som høyt. Kun to sensorer oppgir et lavere nivå sammenliknet med andre institusjoner. 20

21 Alle sensorer: 3. Dersom du har kommentarer angående vurderingsformens relevans, innhold eller form kan du skrive dem her: Om formen på eksamen: Interne Sensorer: Så lenge hovedinstrumenteksamener foregår internt på NMH, i hovesak for et internt publikum, vil relevansen være begrenset. ( blås) Jag anser att det vore betydligt bättre om även studenternas process under utanningen togs med i bedömningen. Nu är det endast ett spelprov som är avgörande. Dessutom är undervisningen hela tiden fokuserad på examensprovet vilket gör att repertoaren anpassas efter examenstillfället och inte för den enskilde studentens progression under en längre tid. Efter att ha jämfört det svenska betygssystemet ( ) med det graderade betygssystemet som används vid NMH menar jag att de svenska studenterna som jag har kommit i kontakt med inte är lika stressade och har så många fysiska problem av sitt spelande som jag har sett i mitt ämne vid NMH. När jag har undervisat i Sverige har jag mer kunna fokusera på den enskilda studentens utveckling under ett längre perspektiv istället för att i första hand ha ett avancerat examensprogram som mål som i värsta fall faktiskt kan begränsa utvecklingen i ett långt perspektiv. ( orgel) Dagens form er den beste vi har. Det er forsåvidt umulig å reflektere en profesjonell skikkethet og mangfoldighet gjennom kun én enkelt eksamenskonsert, dette gjelder spesielt på masternivå.for å forbedre dette måtte man sannsynligvis måtte gå gjennom eksamensformen på nytt og dele den opp på ulike kompetansefelt. (Hovedinstrument klassisk slagverk) Eftersom studenterna kan forma innehållet i eksamen ganska fritt, kan de här visa sin kreativitet i tillägg till att på eksamen visa sin nivå, både som musikkformiddler och instrumentalist. Ett yrkesliv där det ikke spiller noen rolle hvor flink du er kan jo ikke gagna noe eller noen. ( blås) Praktisk muntlig eksamen på Musikk & Helse hel- og deltid bør revideres. Eksterne sensorer: Det er avgjørende å kunne vurdere studentens prøveteknikk ved en dirigenteksamen. Generalprøven er en del av eksamen, men det bør kanskje vurderes om sensor skal observere flere prøver for alle. Generalprøven er en spesiell prøve som ikke nødvendigvis viser studenten i riktig situasjon. Det er mulig at eksamensrepertoar kan være mer i samsvar med emne, men siden kandidatene er tatt opp og uteksamineres på likt grunnlag blir det vanskelig. Men det kan være en tanke at det skal være mer fokus på relatert emne ift studieretning/emnevalg. ( sang) De instrumentaldidaktiske tekstene er relevante, men mangler ofte forankring i litteratur. Hadde det vært en idé å la dem være erfaringsbaserte, og ikke legge vekt på litteratur i det hele tatt? Pr nå blir de hverken fugl eller fisk. () Admled50 har et innhold som er relevant for arbeid innen ulike former for musikkforvaltning. Det er passe krevende og innholdsmessig tilpasset den administrative "virkeligheten" de fleste kandidatene må forholde seg til på ulike nivåer av kulturforvaltningen. Dette blir den eneste gangen i livet hvor de må svare på spørsmål uten å bruke hjelpemidler. () Om vurdering av eksamen: Interne sensorer: Vi har arbeidet med evalueringsformene i seksjonsrådet og ser på mulig forbedring (selv om det allerede fungerer ganske bra) () 21

22 Vi bør ha ekstern sensor på 1. avdeling, det ble inflasjon på karakter i år ( stryk) Ved mange skoler jeg har vært sensor gjennomfører de eksamen med 3 sensorer, tror det kan være en relevant problemstilling å diskutere for å sikre en best mulig og nøytral bedømmelse. ( stryk) Ønsker et større og bredere grunnlag for vurderingen, særlig gjelder dette masternivå. (/ komposisjon) Ekstern sensor og jeg som intern sensor skrev en detaljert begrunnelse for karakter, da vi regnet med at kandidaten ville be om dette. Vi tenker at dette er viktig for at kandidaten kan lære noe fra tilbakemeldingene som gis i begrunnelsen () Eksterne sensorer: Vid examenssituationen värderades inte den skriftliga delen, reflektionen. Att bedöma studentens förmåga till reflektion kring tex konsertprogram, roll i det omgivande samhället mm, var därför inte möjligt vid det aktuella tillfället. () Jeg synes dessuten at det er litt merkelig at det ikke er noen annen vurderingsform på mastereksamen enn en muntlig tilbakemelding til kandidaten. Dette er deres anliggende, men personlig ville jeg funnet det utilfredsstillende som evalueringsform etter å ha gjennomført et slikt utdanningsløp som et masterstudium faktisk representerer. ( stryk) Det finns naturligtvis fler aspekter på att vara pianist i samhället och de prov jag närvarat vid bedömer ju en del, i och för sig stor del, av dessa aspekter. Jag har ju T.ex. inte hört så mycket kammarmusik, a vistaspel m.m. ( klaver) Det er utfordrende å vurdere de ulike tekstene, da de er skrevet på helt forskjellig sted i utdanningen. Fagtekstene er generelt mye bedre gjennomarbeidet og burde nok sånn sett fått større vekting. () Om karaktersystemet: Interne sensorer: Diskusjonen om gradert vurdering i folkemusikkstudiet er høyst levende, og det er ikke noe absolutt svar på hva som er best, men tendensen er at flertallet av studentene, og også lærerne er FOR gradert vurdering. (Hovedinstrument folkemusikk) Karakterer bruks aldrig i ansettelse av f.ex orkestermusikere. Bare prøvespill teller ( stryk) Vil ha bort graderte karakterer, det skjer fra neste år av. (Hovedinstrument jazz) Eksterne sensorer: Er svært skeptisk til prøveprosjektet på Masternivå, der en evaluering/karaktergiving evt. kunne ha foregått med publikum tilstede. Syns det hadde vært svært uheldig i de tilfeller der karakteren "Ikke bestått" måtte brukes. I tillegg er dette en prosedyre jeg som ekstern sensor burde ha blitt informert om i god tid på forhånd. (Hovedinstrument klassisk stryk) Jeg fikk inntrykk at bruken av hele karaktérskalaen, slik den er beskrevet ikke er godt nok implementert hos dere. At karakteren C er en karakter som skal gis dersom alle læringsmål for studiet er innfridd på en tilfredsstillende måte oppleves ikke som en innarbeidet størrelse. B gis dersom det samme er tilfelle og kandidaten i tillegg viser stor grad av selvstendighet og A er en karakter som gis i ekstraordinære tilfeller. ( stryk) Det borde vara graderade karaktärer (A-F) även vid Master examen. (Hovedinstrument klassisk blås) 22

23 Om organisering av eksamen: Interne sensorer: Masterstudentenes sensor og jury fikk ikke info om masteroppgaven og det skriftlige materialet til studenten. Dette er jo helt merkelig når det legges så mye tid og ressurser i masterarbeidet. ( stryk) Eksterne sensorer: To a visiting member of the jury everything was excellently organized and the exam situation on a high professional level. () Ang læringsmål: Har ikke NMHs læringsmål for orgel HI tilgjengelig. (Hovedinstrument klassisk orgel) 4. I hvilken grad opplever du at hovedinstrumentrapporten er nyttig informasjon for deg som sensor? Interne sensorer: Figur 3-27 nytteverdi av hovedinstrumentrapport, interne sensorer Eksterne sensorer: Figur 3-28 nytteverdi av hovedinstrumentrapport, eksterne sensorer De fleste sensorer anser hovedinstrumentrapporten som nyttig informasjon. 9 interne sensorer oppgir at den ikke var nyttig mot ingen av de eksterne sensorene. I fritekstkommentarene kommer det frem at rapporten er spesielt nyttig for eksterne sensorer som ikke kjenner studentene så godt og for å vise studentenes bredde. Noen påpeker at rapporten er nyttig for at studentene selv skal få et overblikk. Det er også noen som mener rapporten burde fornyes i format og heller bestå av en mappe/portfolio med hva studenten har gjort f.eks. refleksjoner, lydopptak etc. 23

24 5. I hvilken grad opplever du at studentens refleksjonsnotat og prosjektbeskrivelse er nyttig informasjon for deg som sensor? Interne sensorer: Figur 3-29 nytteverdi av refleksjonsnotat og prosjektbeskrivelse, interne sensorer Eksterne sensorer: Figur 3-30 nytteverdi av refleksjonsnotat, prosjektbeskrivelse, eksterne sensorer De aller fleste sensorer anser refleksjonsnotat som nyttig informasjon. Kun 3 interne sensorer oppgir at den ikke var nyttig. I fritekstkommentarene kommer det frem at rapporten er med å vise bredde over tid, arbeidskapasitet og refleksjonsevne og dermed gir et bedre grunnlag for å vurdere studenten. Den gir «et mer komplett bilde av kandidaten». 6. Har du fått tilstrekkelig informasjon før sensureringen startet? (f.eks. angående studentene, studieplanen eller sensors rolle) Interne sensorer: Figur 3-31 informasjon, interne sensorer Eksterne sensorer: Figur 3-32 tilstrekkelig informasjon, eksterne sensorer 24

25 Vennligst oppgi hvilken type informasjon som manglet: Interne sensorer: Refleksjonsnotat, hovedinstrumentrapport. Også informasjon om kandidater med spesielle 'tilfeller'. ( stryk) Sensor ble skaffet uken før eksamen, og hadde ikke mottatt informasjon om studentens repertoar. ( blås) Det at det er ulike studieplaner fra år til år kan være utfordrende å holde rede på. ( blås) Vi pleier å lese beskrivelsen av karakterskalaen høyt før vi begynner vår diskusjon om karaktersetting. Den fikk vi ikke i år. Vi klarte ikke å finne den på nettet heller. ( slagverk) oppdatert eksamensplan for muntlig eksamen () Eksterne sensorer: Informasjon om studenten og studiet ( stryk) Ønsker å få det tilsendt i god tid før eksamen ( stryk) Jeg manglet informasjon om et par av bachelorstudentene og i tillegg var så vidt jeg husker en av kandidatene oppsatt i min plan med annen grads eksamen enn det det faktisk var. Informasjon om dette forholdet måtte etterspørres i eksamenssituasjonen på eksamensdagen. ( stryk) Savner en klarere beskrivelse av sensors rolle og ansvar (forventning). For ordens skyld, er det greit å bli minnet om karaktersystemet, eller bruken av bestått/ikke bestått. ( blås) Ønsker skriftlig eller link direkte (nb) til vurderingskriterier. I år var det bare jeg som hadde funnet fram til disse, interne (erfarne) sensorer vet jo hva de skal se etter, men bedre om det er enda tydeligere hva vi vurderer etter. () Grunnet feil i mailadresse, fikk jeg ikke beskjed fra transportfirma/post om at besvarelsene var ankommet. Jeg har vært borti liknende problematikk tidligere og ønsket besvarelsene i pdf for å være på den sikre siden. Dette skjedde ikke, og sensurering ble kraftig utsatt. () Fikk emneplanen men ikke oversikt over den litteraturen som var forventet kjent for studentene () Kriterier og oppdaterte lister () Ej fullständig information. För sen information, examensprogram saknades, även karaktärsskala mm. Efter påtalande tog det tid och samma dag fick jag fullständig information. ( blås) Det manglet noen verkslister og opptak. (Komposisjon) 25

26 7. Hvordan foretrekker du å motta informasjon om eksamen? Interne sensorer: Figur 3-33 mottak av informasjon, interne sensorer Eksterne sensorer: Figur 3-34 Mottak av informasjon, eksterne sensorer De aller fleste sensorer ønsker å motta informasjon om eksamen elektronisk, dette er spesielt gjeldende for eksterne sensorer. I fritekstkommentarene kommer det likevel frem et mer nyansert bilde hvor mange oppgir at de kunne ønske seg begge deler. Gjerne informasjon elektronisk i forkant for så å få papirformat på dagen eller lydopptak etc. elektronisk, men partitur i papirformat. Noen sensorer opplever det som tryggere å få informasjon i papirformat og påpeker at det lettere ville kunne forekomme utilsiktete problemer man ikke ha r kontroll over ved bruk av elektronisk informasjon. En sensor synes at viktige eksamenspapirer bør komme i papirformat heller enn en mail blant tusen andre mailer. 8. På en skala fra 1-5, der 1 er ikke i det hele tatt og 5 er i svært stor grad, i hvilken grad er du fornøyd med... Interne sensorer: Figur 3-35 tilfredshet med eksamenskommisjonen, interne sensorer, frekvens Figur 3-36 tilfredshet med eksamenskommisjonen, interne sensorer, gjennomsnitt 26

27 Eksterne sensorer: Evaluering av eksamen 2016 Figur 3-37 tilfredshet med eksamenskommisjonen, eksterne sensorer, frekvens Figur 3-38 tilfredshet med eksamenskommisjonen, eksterne sensorer, gjennomsnitt Dersom du har synspunkter du ikke føler at har kommet frem i spørreskjemaet kan du skrive dem her. Interne sensorer: masterkommisjonen opplevde det som merkelig og litt pinlig at en utenom juryen ved ett tilfelle blandet seg inn og tok regien med mye irrelevant snakk og belærende oppførsel. ( stryk) Skal hovedinstrumentlærer være en del av kommisjonen? Opplevde at så ikke var tilfelle selv om vedkommende var til stede på eksamen. Litt lite tid mellom eksamener når disse lå på forskjellige steder. ( stryk) Praktisk gjennomføring på bachelor: Ingen var ansvarlig for lyssetting- skapte en del stress før start Ingen var ansvarlig for å finne notestativer og stoler der en kandidat hadde en kammermusikkavdeling. Bør avklares og informeres om hvem som skal påse at dette er i orden. ( klaver) Eksamensordningene har godt av å bli tett fulgt opp gjennom kontinuerlig evaluering. Viktig. (/komposisjon) Jag hoppas att det nuvarande betygssystemet vid NMH bör diskuteras. När jag försiktigt har ställt frågan med några kollegor har jag dock förstått att detta är mycket känsligt och svårt att ändra på. Det vore dock intressant att vid någon personaldag uppmärksamma frågan och få kunskap om pedagogisk forskning i ämnet. Som jag nämnde tidigare i detta frågeformulär tycker jag mig se olika tendenser bland de studenter som jag har undervisat i Oslo och Göteborg. Dessa iakttagelser är förstås inte vetenskapliga utan endast en känsla som vore intressanta att diskutera. ( orgel) Vår jury vil gjerne ha god tid mellom studentenes eksamener. De er i en presset situasjon, og bør ha tid til å ta noen toner alene på podiet før publikum kommer. Denne gangen måtte en student vente på at studenten før henne skulle bli ferdig med sin eksamen, og så gå inn til en fylt sal, etter angitt tidspunkt. ( blås) Det må settes av nok tid i mellom kandidatene. Virker ikke som adm. berammer faktisk konserttid. Antall min spilletid er effektiv spilletid og ikke varighet på eksamen. Det må påregnes tid i mellom hvert stykke, presentasjon og evt instrumentbytte. ( blås) Mener det også vil være relevant med eksterne sensorer. Dette ble ikke kommunisert til fagmiljøet at var mulig i år før planen var lagt. Trenger klarere retningslinjer. () Spørsmål om relevans for arbeidsliv er utfordrende. Våre studenter har mange ulike arbeidsoppgaver og karriereveier. () 27

28 Eksterne sensorer: Jag önskar att även vi i Stockholm ska komma igång med att ha sensorer från er. ( klaver) Et fint og ryddig sensoroppdrag ved NMH. ( sang) Bra å vurdere flere oppg samtidig. Det blir bedre vurdering når man også kan sammenlikne flere/få kompetanse fra flere opp fra samme kull/studium. () Det var veldig hyggelig å sensurere hos dere. () Jeg leverer sensorrapport. () Eksamene tok mange timer og det var ikke mulig å få noe å spise eller drikke undervegs. ( blås) Noen av bachelorstudentene avslutter med en konsert, men ikke alle, og heller ikke masterstudenten gjør dette. Presentasjonsformen burde være lik for alle. Hvis man ikke kan arrangere konserter, burde det kanskje være en muntlig presentasjon. (Komposisjon) Jeg fikk ingen kontrakt av NMH i forkant av sensureringen. Etter jeg etterlyste denne, fikk jeg en kontrakt tilsendt på epost, etter at alt arbeidet med sensur var ferdig, men der stod ingenting om hvor mange timer sensureringen var beregnet til, kun lønnstrinn. Dette synes jeg var meget beklagelig. Sensorer blir også betalt svært dårlig ved NMH. For tilsvarende sensuroppdrag ved andre institusjoner brukes mitt lønnstrinn, som er 72. Men på NMH brukes ltr 52! Jeg må derfor vurdere om jeg vil takke ja en annen gang til å være sensor her og vil fraråde mine kolleger å være sensor ved NMH. () 28

29 29