Å undervise i høyere utdanning: Vurdering torsdag 15. September 2016 Marit Allern, Result
Innhold Den norske konteksten Situasjonen internasjonalt Hvorfor vurdere Constructive alignment Formativ vurdering Summativ vurdering Vurdering av læring eller for læring Assessment literacy
Begreper dere skal kjenne og kunne anvende Feedback respons tilbakemelding Formativ vurdering Summativ vurdering Medstudentvurdering Egenvurdering Eksamen AFL Assessment for learning Assessment literacy
Den norske konteksten Eksamen skal ivareta samfunnets behov for seleksjon, sertifisering og kontroll Endringer etter KR I 2003: 71 % sier det er gjort middsel eller store endringer i eksamensordningene (Michelsen og Aamodt, 2007, p. 68) Dreining mot tradisjonelle eksamener 10 år etter? Hvem bestemmer hva slags vurdering som skal tas i bruk?
Situasjonen internasjonalt Students can, with difficulty, escape from poor teaching, they cannot by definition (if they want to graduate) escape from the effects of poor assessment (Boud, 1995: 35) Assessment systems dominate what students are oriented towards in their learning. Even when lecturers say they want students to be creative and thoughtful, students often recognize what is really necessary, or at least what is sufficient, is to memorise. (Gibbs, 1992: 10) Paradigmeskifte fra fokus på undervisning til fokus på læring fra siste del av 1990-tallet. Viktige bidrag fra England og Centres for Excellence in Teaching and Learning de som var Assessment for Learning CeTl i 2005-2010, Oxford Brookes University & Northumbria University
Hvorfor vurdere? Seleksjon Kvalitetskontroll for å opprettholde en standard Motivasjon av studenter Feedback til studenter Feedback til lærere Forberedelser til (yrkes-)liv cf. Rowntree, 1987
Constructive alignment (cf.biggs, 1999) Betydningen av en klar sammenheng mellom forventet læringsutbytte, undervisning, vurdering og eksamen Krever et kursdesign som har følgende trinn: Identifiserer tydelige læringsmål Designer egnede vurderingsoppgaver som vil kunne slå fast om alle læringsmål er nådd Designer egnede læringsaktiviteter slik at studentene kommer til et punkt hvor vurderinger kan skje med godt resultat Dyp eller overflatisk læring? (cf. Rust, 2002; 148)
Formativ vurdering Underveisvurdering med det siktemål å øke studenters læring Kan være: formell, uformell, tydelig eller vag En vurdering kan sies å være formativ hvis formålet er å identifisere områder og potensial for forbedringer. Dette kan skje gjennom - Diagnostisering - Følge studenters læring (monitor) - Motivere - Feedback - Forbedre læring og utvikle refleksjon over læring (cf. Falchikov, 2005)
Verdien av feedback Feedback, however, is not «the answer», but it is one powerful answer. (Hattie & Timperley, 2007: 104) Medstudentvurdering og egenvurdering Troen på feedback som vidundermedisin: 1. Alle feedback er god feedback 2. Jo mer desto bedre 3. Feedback er virkningsfull 4. Feedback ender i et resultat (Boud & Molloy, 2013)
Summativ vurdering Eksamen som en avsluttende prøve og sensur som en dom. (cf. Sambell et al, 2013) Normbasert vurdering (studenten sett i forhold til en gruppe) Ipsativ vurdering ( studenten er referanserammen og prosessen tillegges vekt) Kriteriebasert vurdering ( avhengig av at kriteriene er identifisert av studenter, institusjon og eventuelle sensorer). NB! Kriterium versus standard, gjenkjenne kvalitet versus grad av kvalitet. Forskrift for eksamen ved UiT http://uit.no/utdanning/art?p_document_id=347697&dim=179066
Aktivisering av studenter (Boud & Molloy, 2013)
Lokale emneplaner- vi ser på eksemplene dere har med hit To og to samarbeider Presenter emneplanene for hverandre, gjenfinnes CA i disse planene? Er forventet arbeidsmengde rimelig i forhold til antall stp? I hvilken grad er vurdering en integrert del av emneplanen?
Assessment literacy (cf. Price et al, 2012: 10 ff) Involves a combination of knowledge, skills and competencies, including knowledge of a vocabulary and a grammar. Encompasses: An appreciation of assessment s relationship to learning; A conceptual understanding of assessment (i.e. understanding the basic principles of valid assessment and feedback practices, including the terminology used); Understanding the nature, meaning and level of assessment criteria and standards; Skills in self- and peer assessment
Assessment literacy Familiarity with technical approaches to assessment (i.e. familiarity with pertinent assessment and feedback skills, techniques, and methods, including their purpose and efficacy); and Possession of the intellectual ability to select and apply appropriate approaches and techniques to assess tasks (not only does one have the requisite skills, but one is also able to judge which skill to use, for which task).
The Student Cycle Explicit criteria Active engagement with feedback Students Active engagement with criteria Completion and submission of work
The staff/faculty cycle Tutor discussion of criteria Assessment design and development of explicit criteria Staff/faculty Assessment guidance to staff/faculty Marking and moderation
Interacting cycles The cultivated community of practice model
Planlegge vurdering Planlegging med focus på programnivå Prevurdering aktiviteter for studenter Vurderingsaktiviteter se på oppgave og karaktersetting og Post-vurdering aktiviteter - tilbakemelding
Revising Bloom s Taxonomy (cf. Krathwohl, 2002) The Knowledge Dimension 1. Remember 2. Understand 3. Apply 4. Analyze 5. Evaluate 6. Create A. Factual Knowledge B. Conceptual Knowledge C. Procedural Knowledge D. Metacognitive Knowledge
Referanser Biggs, J. (1999) Teaching for Quality Learning at University. Open University Press Boud, D. (1995) Assessment and Learning: Contradictory or Complementary? In Knight, P. Assessment and Learning: Contradictory or Complementary? Kogan page Boud, D. & Molloy, E. EDS. 2013. Feedback in Higher and Professional Education. Understanding it and doing it well. Routledge Falchikov, n, (2005) Improving Assessment Through Student Involvement. Practical solutions for aiding learning in higher education and further education, Routledge Gibbs, G. (1992) Improving the Quality of Student Learning, Bristol TES Hattie, J. & Timperley, H. 2007. The Power of Feedback, Review of Educational Research, 77(1): 81-112 Krathwohl, D.R. (2002) A Revision of Bloom's Taxonomy: an Overview, in Theory into Practice, 41:4 Michelsen, S. & Aamodt, P.O.(2007) Evaluering av kvalitetsreformen - Sluttrapport Price, M., Rust, C.,O Donovan, B., Handley, K. (2012) Assessment Literacy. The Foundation for Improving Student Learning, ASKE, Oxford Brookes University Rust, C. (2002) The Impact of Assessment on Student Learning: How Can the Research Literature Practically Help to Inform hte Development of Departmental Assessment Stragegies and Learner-Centred Assessment Practices? In Active Learning in Higher Education, 3:2 Rowntree, D. (1978) Assessing students: how shall we know them? Harper & Row Sambell, K., McDowell, L. and Montgomery, C. (2013). Assessment for Learning in Higher Education. Routledge