Brukerveiledning for sensor 1
Innholdsfortegnelse Innledning Endre profil Hjelp Sensur Arbeidsflyt for sensor Invitasjon Informasjon Din vurdering Felles vurdering Startside for vurdering Vurdér en prøve Før eksamen- vurderingsinnstillinger Enkel- eller Flersensur Plagiatkontroll Karakterskala Terskelverdier Sensorveileding Navigasjon Brødsmulesti Navigering mellom oppgavebesvarelser Navigasjonslinjen Notater og annotering Notater Offline annotering Plagiatkontroll Hjemmeeksamen og filopplasting Vurderingsprotokoll Alle karakterer Se tidligere vurderinger Hovedansvarlig og tilgang til sensur Velg eksamen Informasjonsside Kandidatliste - Din vurdering Kandidatens besvarelse - Din vurdering Sette hovedkarakter Blank besvarelse Vurdering av oppgaver - Din vurdering Besvarelsen Oppgaven Annotering Plagiatkontroll 2
Innledning Sensorrollen i Inspera assessment har tilgang til sensurvektøyet Vurdering i Inspera Assessment. For å kunne sensurere en prøve må du ha fått en brukerkonto og tildelt rolle som Sensor. For hver eksamen du skal sensurere, vil Hovedansvarlig invitere deg inn som bidragsyter til prøven. Denne veiledningen gir en gjennomgang fra sensor får brukerkonto til sensor har sensurert og lastet ned protokoll. Hjelp-funksjonen i Inspera Assessment kan benyttes for kontekstbasert hjelp når du sensurerer. Endre profil Du kan når som helst endre fornavn, etternavn, e-post og passord i brukerprofilen din. Det er imidlertid IKKE mulig å endre brukernavnet. For å endre brukerprofilen din, klikker du på Klikk deretter på Brukerprofil. - knappen til høyre for navnet ditt i oppgavelinjen. 3
Når du er ferdig med å gjøre endringer i brukerprofilen din, klikker du på Lagre profil -knappen for å lagre endringene. 4
Hjelp Du kan når som helst klikke på Hjelp-knappen øverst til høyre og få en beskrivelse av funksjonalitet knyttet til der du står: 5
Sensur Sensur foregår i modulen Vurdering som du har tilgang til med rollen som sensor. Sensorene for en eksamen kan enten settes opp av de som setter opp prøven, direkte i Inspera Assessment, eller de kan importeres fra FEIDE. Dersom man setter opp sensorer direkte i Inspera Assessment, har man ikke mulighet til å sette opp sensur-kommisjoner for prøven. Det vil si at ALLE sensorene som settes opp har tilgang til ALLE besvarelsene på prøven. Når man sensurerer, må ALLE sensorer på prøven sette den samme karakteren på alle kandidater for at sensuren skal kunne ferdigstilles. Det vil si at i tilfeller hvor man har flere sensorer på en prøve, og disse er satt opp i Inspera Assessment, slik at man ikke har sensurkommisjoner, må alle sensorene sette samme karakter på alle kandidater. I tilfeller hvor man importerer sensur-kommisjoner fra FEIDE, hvor man har delt besvarelsene på forskjellige komisjoner, må alle sensorene sette samme karakter på alle kandidater i sin bunke. Arbeidsflyt for sensor Arbeidsflyten i sensureringen visualiseres i følgende modell: Er det flere sensorer i en kommisjon, er det viktig å legge merke til at alle sensorer må fullføre Din vurdering (ved å godkjenne sine karakterer) før de går videre til Felles vurdering, som er en felles prosess der sensormøte er en naturlig del. Etter at alle sensorene i kommisjonen har blitt enige om endelig karakter kan de godkjenne disse, karakterene blir da låst og vurderingsprotokoll blir tilgjengelig for nedlasting. Invitasjon Hovedansvarlig for en eksamen inviterer sensorer til den enkelte eksamen, enten via Inspera Assessment eller gjennom å opprette sensorkommisjon i FS. 6
Når sensor logger inn, vil alle eksamener som sensor er invitert til vises i en oversikt, og sensor velger den aktuelle eksamenen. Informasjon Informasjonsside med detaljer for eksamenen er utgangspunktet for å gå videre i prossessen. Velg "vurder kandidater" for å starte sensur. Din vurdering Sensor jobber i tre nivåer. Oversikt: Gir en oversikt over alle kandidater og karakter når dette er satt. Kandidat: En oversikt over hele besvarelsen til kandidaten, med mulighet for å navigere mellom oppgaver og kandidater. Oppgave: Visning av manuelt vurderte oppgaver. Navigering mellom nivåene gjøres i brødsmulestien øverst på siden eller ved å navigere i nettleseren. Det er mulig å navigere mellom oppgaver og kandidater i menyen nederst på siden. Ulike filtre er tilgjengelig for å strukturere gjennomgangen. Når sensor har sensurert alle besvarelsene og anser seg ferdig, godkjenner sensor karakterene og "felles vurdering" starter. Felles vurdering Sensorene jobber seg gjennom kandidatene på samme måte som i "Din vurdering". Når sensorene er enige om karakterene, kan endelige karakterer godkjennes og vurderingsprotokoll skrives ut for signering. 7
Startside for vurdering Begrepet Vurdering i Inspera Assessment omfatter både automatisk og manuell vurdering. I verktøyet Vurdering kan manuell vurdering starte umiddelbart etter at en besvarelse har blitt levert, selv om prøven fremdeles pågår. Verktøyet Vurdering benyttes til: Manuell vurdering av skriftlige oppgaver (Langsvar, filopplasting og programmering) Fordeling av karakterer basert på en total poengsum per kandidat. Lagring av resultater Tabellen viser prøver som er klare til å vurderes eller har blitt vurdert: Tittel - Hva heter prøven? Status - Har prøven startet? Er den avsluttet? Sist endret - Når ble prøven redigert sist? Av - Hvem redigerte prøven sist? Like over tabellen finner man filtre for tabellens innhold: Forfatter - Hvem opprettet prøven? 8
Status - Er vurdering av prøven komplett? Vurdér en prøve Tabell viser kun prøver sensor har tilgang til. For å vurdere en prøve, velg en prøve i tabellen med status Startet eller Avsluttet. Før eksamen- vurderingsinnstillinger Før eksamen blir avholdt er det en del innstillinger man må sette som har innvirkninger på vurderingsprosessen. Alle disse innstillingene gjøres fra Prøver. Enkel- eller Flersensur For FS-prøver vil sensorer bli overført og lagt til automatisk. For andre prøver legger man til sensorer i bidragsytermenyen øverst til høyre. Hvis man legger til to eller flere sensorer vil det automatisk bli flersensur og alle sensorene må sensurere alle kandidatene (gjelder ikke FS-prøver). Plagiatkontroll Hvis man har lisens for plagiatkontroll har man mulighet til å forhåndsbestille rapporter for plagiatkontroll på alle oppgaver som støtter dette. 9
Karakterskala Før eksamen velger man ønsket karakterskala, f.eks. A-F eller Bestått/Ikke bestått. Synkroniseres prøven fra FS, vil karakterskalaen bli overført automatisk. Terskelverdier Velger man å bruke poeng på oppgavene, må man definere terskelverdier som er poenggrensene for de forskjellige karakterene. Disse kan også justeres etter at eksamen er avholdt. 10
11
Sensorveileding Sensorveiledning kan lastes opp av hovedansvarlig i Vurderinsinnstillinger (Guide for graders i dette skjermbildet som er på engelsk) 12
Navigasjon Brødsmulesti Øverst i vurdering vises det alltid en brødsmulesti som brukes for å navigere. I eksempelet under vil man ved å klikke på de forskjellige tekstene navigere på følgende måte: EKSEMPELPRØVE - Navigerer til informasjonssiden for prøven. KANDIDATER - Navigerer til kandidatlisten. KANDIDAT2 - Navigerer til resultatsiden for kandidat 2. OPPGAVE 006 - Navigerer til besvarelse på oppgave 6 for kandidat 2. Ikonet øverst til venstre i skjermbildet - Avslutter vurdering av prøven og vender tilbake til listen over alle prøver. Navigering mellom oppgavebesvarelser Det er ikke nødvendig å navigere tilbake til kandidatlisten for å åpne en ny besvarelse. Sensor kan navigere direkte til neste kandidat eller neste oppgave. Sensor kan også velge å skjule alle kandidater eller oppgaver som allerede er vurdert. Navigasjonen vil ta hensyn til at disse er skjult og hoppe over disse. Dette betyr at sensor på en naturlig måte kan jobbe seg gjennom oppgaver og kandidater til listen over gjenstående arbeid er tom. 13
Navigasjonslinjen Navigasjonslinjen viser alle oppgavene i besvarelsen, eventuelt bare de som ikke er vurdert, hvis sensor har valgt dette. De oppgavene som er markert med et lyn har blitt automatisk rettet. De oppgavene som er markert med en sort prikk er oppgaver sensor må poeng- eller karaktersette. Etter hvert som sensor jobber seg gjennom oppgavene som skal vurderes, blir de sorte prikkene for gjenstående oppgaver til vurdering endret til grønne haker. Kandidater som har fått besvarelsen sin vurdert markeres med en blå figur. Kandidater som ikke er ferdig rettet vises som sorte. I menyen for å navigere mellom kandidater brukes samme markering. Menyen åpnes ved å klikke på symbolet for kandidat. Da vil sensor få opp en liste over alle kandidatene på prøven. Sensor kan da velge å navigere direkte til en kandidats besvarelse. Notater og annotering Notater Sensor kan gjøre notater på hele besvarelsen eller på hver enkelt oppgave. Disse er private for sensor. Notatfeltet er plassert til høyre i skjermbildet. 14
På kandidatens besvarelse vil det også være mulig å gjøre notater. I tillegg vil det vises en samlet oversikt over sensors siste kommentarer på oppgavenivå. 15
Offline annotering Hvis sensor ønsker å knytte kommentarer til avsnitt, setninger eller ord i kandidatens svar, kan det gjøres i fanen Annotering. Filopplastings oppgaver kan f.eks. lastes ned som PDF eller Word (samme fil og format som kandidaten leverte). Denne filen kan sensor så annotere lokalt på sin egen PC. Sensor vil da bruker kommentarfunksjonalitet i Adobe Reader(PDF) eller Word. Sensor kan så laste den kommenterte filen opp igjen. Den annoterte besvarelsen vil da eksistere parallellt med kandidatens besvarelse, som vil være urørt. Plagiatkontroll Inspera Assessment er integrert med plagiatkontrolltjenestene Urkund og Ephorus (krever lisens). Når hovedansvarlig setter opp en eksamen, kan han velge å få utført plagiatkontroll for hver oppgave som blir manuelt vurdert. Sensor vil da få presentert resultatene fra plagiatkontrollen under fanen Plagiatkontroll i Vurdering. 16
Dersom det på forhånd ikke er valgt å gjennomføre plagiatkontroll, har sensor mulighet for å bestille dette i etterkant. Resultatene fra plagiatkontroll presenteres som prosenter som angir hvor mye av kandidatens svar som forekommer i andre kilder. Rapporten inneholder også lenker til de eksterne kildene. Tekst som finnes i andre kilder vises i oransje. (Ephorus rapport) 17
Hjemmeeksamen og filopplasting Sensor kan velge å vurdere oppgavene med poeng og terskelverdier, men i noen tilfeller vil det ikke være naturlig å bruke poeng for å vurdere oppgaver, bare karakter. Det kan f.eks. være tilfellet for hjemmeeksamen hvor kandidatene kun skal laste opp én fil. I oversikten over kandidatens oppgaver vil det da kun være én oppgave, og den viser da karakter, ikke poeng. I de tilfellene hvor det bare er én oppgave vil hovedkarakteren automatisk oppdateres når den ene oppgaven har fått karakter. Det gjøres for å effektivisere prosessen og minimere antall klikk sensor må gjøre for å fullføre vurderingen. Kandidatens besvarelse - Din vurdering vil da se slik ut Har kandidaten lastet opp en PDF-fil støtter Inspera Assessment visning av denne i løsningen. Det er ikke behov for å laste ned besvarelsen for å lese den. Sensor kan skrive private notater i notatfeltet til høyre for besvarelsen. 18
Vurderingsprotokoll Vurderingsprotokoll vil være tilgjengelig fra informasjonssiden når vurderingen er fullført. Er det sensur med kommisjoner fra FS vil protokollen kun inneholde karakterene for kandidatene i kommisjonen. 19
Alle karakterer Vurderingsprotokollen inneholder kun de karakterene som er i sensors kommisjon. Er det kun én kommisjon (eller prøven ikke er en FS-prøve) vil vurderingsprotokollen inneholde samtlige karakterer. For FS-prøver med flere kommisjoner kan alle karakterene for alle kommisjonene lastes ned av hovedansvarlig fra Prøver som en csv-fil (Excel ikon opp til høyre). 20
Se tidligere vurderinger Etter at sensorene har godkjent endelig vurdering er karakterene klare for overføring til FS (manuelt) og karakterene blir derfor låst og kan ikke lenger endres. Har man som sensor behov for å se tidligere vurderinger f.eks. for å kunne gi en begrunnelse kan man gjøre dette ved å gå inn på en prøve som har status vurdert og klikke på Vis resultater. Da vil man kunne se de endelig karakterene som nå er lyseblå for å indikere at de ikke lenger kan endres. Man kan også se sine egne notater som kan være nyttig for f.eks. å kunne gi en begrunnelse for en karakter. (Man vil snart kunne gi begrunnelse direkte fra Inspera Assessment, men det støttes ikke i dagens versjon). 21
Hovedansvarlig og tilgang til sensur Hovedansvarlig på en eksamen har tilgang til karakterene som er satt i endelig vurdering. Hovedansvarlig kan gå inn på Informasjonssiden på en eksamen og klikke på vurderingsprotokoll, han får da en oversikt over alle kandidatene i alle kommisjoner for den aktuelle eksamenen. Ønsker hovedansvarlig en karakterliste for å legge inn karakterene i FS, kan han fra Prøver-verktøyet åpne den aktuelle eksamenen og klikke på Last ned liste. Kandidatnummer og tilhørende karakterer kan da lastes ned som en csv-fil som kan åpnes i Excel. 22
Velg eksamen Klikk på eksamenen du skal sensurere i listen: Skjermbilde: Eksempel. Informasjonsside 23
Informasjonsside - Din vurdering På prøvens informasjonsside får sensor presentert informasjon som er relevant for den valgte eksamenen og hennes arbeidsoppgaver. 24
Er det en prøve som er definert i FS vil relevant informasjon bli overført til Inspera Assessment. Siden er delt i tre: Under Status får sensor presentert relevante frister. Her kan sensor følge sin egen og medsensorers progresjon og se om fellesvurdering har startet eller ikke. Under Informasjon kan sensor finne sensorveiledning, karakterskala og terskelverdier hvis det er brukt. Under Bidragsytere vil sensor få oversikt over andre sensorer i kommisjonen med kontaktinfo og lenke for å sende e-post. Her vises også kontaktinfo for hovedansvarlig for eksamenen. Etter at eksamen er gjennomført og sensurperioden har startet, kan sensor begynne sin vurdering. Sensor får da tilgang til de besvarelsene som skal vurderes. Eksamenskommisjoner importeres fra FS. Fra informasjonssiden kan sensor starte sitt vurderingsarbeid ved å klikke på Vurder kandidater. Har sensor vært inne og vurdert tidligere er det enkelt å fortsette der hun slapp ved å klikke på Fortsett fra sist vurderte. Sensor kan klikke på Godkjenn karakterer når han er ferdig. I en flersensur vil karakterene da deles med medsensor. 25
Kandidatliste - Din vurdering Sensor får her presentert en liste over alle kandidatene og deres karakter, hvis den er satt. Kandidatene vil vises med kandidatid. I eksempelet som er vist her er det foreløpig ikke satt karakterer. Sensor klikker på en av knappene i venstre kolonne for å starte vurderingen. 26
Kandidatens besvarelse - Din vurdering Kandidatens besvarelse blir presentert som en liste med alle spørsmål i prøven. Hvilke oppgaver som må vurderes av sensor og hvilke som er rettet automatisk vises tydelig. For bedre oversikt kan sensor velge å bare vise de oppgavene som skal karakter- eller poengsettes. Det gjøres ved å klikke på SKJUL AUTOMATISK RETTEDE OPPGAVER. I listen vil det markeres hvilke oppgaver i besvarelsen som ikke er vurdert (svart ring) slik at sensor har en god oversikt over gjenstående arbeid på denne besvarelsen. Hvis det brukes poeng for vurdering av oppgavene vil total poengsum oppdateres fortløpende og poeng eller karakter som er gitt på de enkelte oppgavene vil vises under hverandre. Automatisk rettede oppgaver vil, som navnet tilsier, alltid ha poeng ferdig beregnet. For å starte vurdering av enkeltoppgaver kan sensor klikke på en av oppgavene i listen. Da får sensor presentert kandidatens svar på den oppgaven. 27
Sette hovedkarakter Når alle oppgaver er poeng- eller karaktersatt vil kandidatens karakter regnes ut. Sensor har mulighet for å overstyre den foreslåtte karakteren. Dersom den utregnede karakteren overstyres av sensor, vil man se dette i grensesnittet, som vist under. 28
Blank besvarelse Hvis kandidaten har levert blankt vil det vises tydelig i tittelen på siden slik som vist under. Sensor er fortsatt selv nødt til å gi karakter (den foreslåtte automatisk utregnede karakteren vil da alltid være den dårligste karakteren for valgte karakterskala). 29
Vurdering av oppgaver - Din vurdering Besvarelsen Denne fanen viser kandidatens besvarelse for en av oppgavene. Til høyre på skjermen vises poeng- eller karakterskalaen. Sensor vurderer oppgaven ved å klikke på poeng eller karakter. Sensor kan legge inn notater på hver enkelt oppgave. Disse notatene er private og vil ikke vises for andre brukere. Notatene vil ikke følge med ved en eventuell ny vurdering som følge av en klage. Sensor kan her også kan se kandidatens svar på automatiske oppgaver, selv om sensor ikke skal vurdere disse med poeng eller karakter. Det kan være nyttig for sensor å se kandidatens svar på automatiske oppgaver, det kan f.eks. tydeliggjøre misforståelser eller manglende forståelse hos kandidaten. Oppgaven I denne fanen vises oppgaven slik den ble vist for kandidaten på prøven. Annotering Hvis sensor ønsker å knytte kommentarer til avsnitt, setninger eller ord i kandidatens svar, kan det gjøres i fanen Annotering. Langsvars- og filopplastings oppgaver kan lastes ned som PDF. Denne PDF-en kan sensor så annotere lokalt på sin egen PC, for så å laste den opp igjen. Den annoterte besvarelsen vil da eksistere parallellt med kandidatens besvarelse, som vil være urørt. Plagiatkontroll Inspera Assessment er integrert med plagiatkontrolltjenestene Urkund og Ephorus (krever lisens). Når man setter opp en eksamen, kan man velge å få utført plagiatkontroll for hver oppgave som blir manuelt 30
vurdert. Sensor vil da få presentert resultatene fra plagiatkontrollen under fanen Plagiatkontroll. Dersom det på forhånd ikke er valgt å gjennomføre plagiatkontroll, har sensor mulighet for å bestille dette i etterkant. 31