Pilot- test 2013 Verifisering av kompetanse UBorming av spørsmål Oppsummering fra pilot- tester

Transkript

1 SIK Pilot 1 Evalueringsseminar, Fredrikstad, Pilot- test 2013 Verifisering av kompetanse UBorming av spørsmål Oppsummering fra pilot- tester Ver /JMJ THE EUROPEAN UNION

2 Deltagere i testen Deltagere Styring UBører Byggherre Mesta, Konsmo Mesta, Helsingborg PEAB, Kungälv PEAB, Berger Svevia, Uddevalla NCC, Hamar NCC, Borås Skanska, Karlskrona

3 RikMge svar - % Styring UBører Byggherre Samlet resultat «RikMg» svar: RikMg svaralternamv i henhold Ml vår fasit. Vårt svaralternamv bygger på en del forutsetninger som ikke allmd framgår av spørsmålet. Vårt svaralternamv bygger noen ganger på informasjon gix i vinterkurs. RikMg svar kan være et annet svaralternamv, dersom deltageren legger inn sine forutsetninger

4 Tidsforbruk (26 spørsmål) Samlet resultat Tid min

5 Antall spørsmål i test Tilbakemelding: Spenn fra 30 Rl bør være nok for å klarlegge kompetanse 50: Noen blir slitne/trøue Vurdering: StaRsRsk teori: Mange fag skal dekkes: 50 Tid for gjennomføring Tilbakemelding: De fleste ville levert like raskt ved virkelig test. 50 spørsmål: Anslag 1-2 Rmer Vurdering: Behov for pause Tidsbehovet er individuelt Behov for pauser Få vil «se over» svarene sine

6 Spørsmål/svaralternaMver generelle forhold 1 Test i Rlknytning Rl kurs/uten Rlknytning Rl kurs (eventuelt definert pensum): Betyr mye for forståelsen av benyuede begrep - større krav «uten kurs/pensum» Bruk av begrep som kan ha ulik betydning i normalt språk og i fagspråket (eks. «normal», «store nedbørsmengder») Bruk av begrep som kan ha ulik betydning på ulike steder (eks. «drivsnø/fokksnø») Bruk av faguurykk hvor man lokalt benyuer andre begrep (eks. plogtyper og detaljer på plog) Behov for større presisjon og bedre beskrivelse av forutsetningene (eks. presisering at spørsmålet gjelder «bar veg»)

7 Spørsmål/svaralternaMver generelle forhold 2 Figurer/bilder/diagrammer anses å kunne bidra Rl bedre forståelse av spørsmål (unngår misforståelse av begreper, presiserer forutsetningene bedre, mindre «skriclighet», nærmere prakrsk virkelighet) Ikke entydig Rlbakemelding på hva som er egnede spørsmål for dricsledere og operatører, ulik oppfatning om kompetansekravene for de to gruppene, skyldes kanskje ulik rolle fra sted Rl sted mht ansvar for utkalling og annet. (eks. spørsmål 2) I stor grad Rlbakemelding på at man ikke skal testes på det man ikke har behov for (salrng/ikke salrng, veg/g- s- veg, o.a.) [også et policyspørsmål hvilken basiskompetanse ønsker vi hos utøverne? Behov for å uhøre andre oppgaver/reserve?]

8 Gir testen godt bilde av teoremske kunnskaper? I hovedsak bekrecende posirv Rlbakemelding på deue Men for å dekke total nødvendig kompetanse, er det i Rllegg nødvendig med: Kompetanse på utstyr, montering, innsrlling, kalibrering, vedlikehold, HMS, o.l (dokumentert vinterdag) Kompetanse på prakrsk uhørelse, inkludert HMS, trafikksikkerhet, forholdet Rl trafikanter og naboer, o.l. (oppkjøring med sensor, lærerd med erfaren sjåfør) Og rikrg holdning/adferd som flere angir som vanskelig å måle, men som muligens kan sjekkes ut gjennom spesielle typer spørsmål?

9 Krav Ml % rikmge svar? Tilbakemeldingene angir % Behov for sikkerhetsneu for de som ligger reu under kravet (muntlig gjennomgang) 70 % bør benyues fordi spørsmålene aldri vil være 100 entydige, må ta høyde for at ulik tolking av spørsmålet kan gi annet svaralternarv enn det «rikrge». Krav bør gjelde for hvert delområde (ikke kompensatorisk)

10 De som stryker - Tilbud om muntlig test? Tilbud om muntlig test/gjennomgang må gis Rl de som «så vidt» stryker og kanskje Rl alle som stryker? Hovedentreprenør må også ta ansvar for de som får dårlig resultat avklare hva som er årsaken og reue på deue forholdet Tilbud om muntlig test må også gis Rl kandidater med lese/ skrive- vansker og Rl andre som ikke er vant Rl å håndtere skriclige problemsrllinger (før testen starter)

11 Beskrivelse av kompetansekrav klarer vi dexe Mlstrekkelig presist? 1. KorhaUede beskrivelser av kompetanseområder (som vi har arbeidet med i SIK- prosjektet) 2. Utdypede og konkrerserte beskrivelser 3. Spørsmålsdatabase 4. Pensumoversikter/Læreplan 5. Kurs/kursinnhold 6. Annet?