Usability testing Brukertester

Like dokumenter
Evaluering og brukertesting

GRUPPE 5, UKE 11 EVALUERING IN1050

Interaksjonsdesign Utvikling for og med brukere

Evaluering vol. 1. Plenum IN1050 Uke 11 Maria og Helle

INF Introduksjon til design, bruk, interaksjon Evaluering, del 2

INF1500 Høst 2015 Magnus Li Martine Rolid Leonardsen. Evaluering

Frokostseminar om metoder for universell utforming av IKT

INF Introduksjon til design, bruk, interaksjon Evaluering del 2

Diskusjonsoppgaver Hvilke fordeler oppnår man ved analytisk evaluering sammenliknet med andre tilnærminger?

Nettredaktørskolen, Høst Google Analytics Brukertesting Brukerundersøkelser

Notater: INF1510. Veronika Heimsbakk 20. mai 2015

UKE 2 Forstå bruk/ datainnsamling. Plenum IN1050 Julie og Maria

Brukersentert design Kapittel 3 i Shneiderman

Nettredaktørskolen, Sommer juni Brukertesting Brukerundersøkelser Google Analytics

INF1500 Høst 2016 Magnus Li Martine Rolid Leonardsen EVALUERING / DECIDE

Repetisjon. Plenum IN1050 Uke 14 Maria og Helle

HCI, Interaksjon, grensesnitt og kontekst. Intervju, spørsmålstyper og observasjon

INF Introduksjon til design, bruk, interaksjon Evaluering del 2

Kvalitativ metode. Karin Torvik. Rådgiver Senter for omsorgsforskning, Midt Norge Høgskolen i Nord Trøndelag

En enkel modell. Hvorfor?

Evaluering. INF 1500; introduksjon 9l design, bruk og interaksjon 24 oktober 2011

UNIVERSITETET I OSLO

Metodevalg i et tilgjengelighetsperspektiv: erfaringer, fallgruver og anbefalinger

Hva får vi igjen for å involvere brukerne og hvordan måler vi det? IKT

INF Introduksjon til design, bruk, interaksjon Evaluering, del 1

Enkel og effektiv brukertesting. Ida Aalen LOAD september 2017

F.I.F.F.I.G. Fleksibelt og Innovativt system For FakultetsInformasjon og andre Greier

Evaluering vol. 2. Plenum IN1050 Uke 12 Maria og Helle

Psykososiale målemetoder og psykometri.

Informasjonsorganisering. Information Architecture Peter Morville & Jorge Arango Kapittel 4, 5 & 6

Hva er nytten av brukersentrerte metoder og aktiviteter? En litteraturgjennomgang

Dokumentstudier, innholdsanalyse og narrativ analyse. Pensum: Dag Ingvar Jacobsen (2005): Hvordan gjennomføre undersøkelser, s

Forelesning i INF våren 2014 Hvordan jobber vi med evaluering? Tomm Eriksen Interaksjonsdesigner - Universitetet I Oslo

Eli Toftøy-Andersen og Jon Gunnar. brukertesting

Gjennomgang - prøveeksamen. Plenum IN1050 Maria og Helle

VELKOMMEN. UKE 1: Introduksjon Plenum IN1050. Julie og Maria

Hvorfor får man musikk på hjernen?

Prototyping. Plenumstime Uke 6. Med Maria og Helle

Forskningsmetoder i informatikk

Ulike metoder for bruketesting

Hvordan kan brukertester av nettsider gjennomføres

NTNU. Brukbarhetstesting. En introduksjon Fremgangsmåte Praksis...

Beat the Competition. Forelesning 17. januar, Utvikling av interaktive nettsteder

Sist oppdatert: 18.november Øvelsesoppgaver til INF1500

Vedlegg Brukertester INNHOLDFORTEGNELSE

Informasjonsarkitektur - Planlegging og design av store nettsteder Peter Morville & Louise Rosenfeld. Kapittel 1-4

CHAPTER 11 - JORUN BØRSTING, ANALYZING QUALITATIVE DATA

Forundersøkelse (Research)

Forskningsmetoder. INF1050: Gjennomgang, uke 13

Forelesning 4 torsdag den 28. august

Forskningsmetoder i informatikk

Informasjonsarkitektur og Prototyping

Children s search on web

Digitale ferdigheter og digital dømmekraft Voksenopplæring Buskerud 16. august 2016

)RUVNQLQJVPHWRGLNNLQQHQ.XQVWLJLQWHOOLJHQV

Datainnsamling. Are Karlsen

Forskningsmetoder i informatikk

Komparative design. Forelesning 12 Mer om kvantitative forskningsdesign. Sammenligninger av to eller flere case i rom og tid

INF1510: Obligatorisk oppgave 2: prosjektforslag

Sjekkliste for vurdering av en kvalitativ studie

Brukerinvolvering ved utvikling av ehelse-teknologi

INF1500 Introduksjon til design, bruk, interaksjon Kapittel 10 Identifisere behov og etablere krav

Rigorøs evaluering EVALUERINGSPLAN KAN INNEHOLDE ROLLER I EVALUERINGEN FORBEREDELSE

Innhold. Del 1 Grunnleggende begreper og prinsipper... 39

GRUPPE 5 UKE 2 IN1050

Innhold. Login. Påvirkningskraft som kvalitetskriterium Forskjeller mellom evalueringsmetoder? En til? Kanskje litt vanskeligere denne

Kapittel 1 Vitenskap: grunnleggende antakelser

Nysgjerrigper-konkurransen Hvordan kan folk telle til ett minutt riktig i hodet?

UNIVERSITETET I OSLO

Innhold. Forord... 11

3. Innsamling av kvantitative data. I dag. Kvalitative og kvantitative opplegg 1/27/11. MEVIT februar 2011 Tanja Storsul

For noen er alt brukervemmelig

INF1500 Høst 2015 Magnus Li Martine Rolid Leonardsen. Design og prototyping

Notat om design for og med brukere, inkludert evaluering av Tone Bratteteig

Test og kvalitet To gode naboer. Børge Brynlund

Design, bruk, interaksjon

Bli kjent med kunden med enkel brukertesting. Laura Arlov, Brukskvalitet, Skatteetaten

UNIVERSITETET I OSLO

Ventilasjon av spesielle installasjoner - operasjonsstuer, laboratorier og isolater

Kvalitative intervju og observasjon. Hva er kvalitative intervju? Når kvalitative intervju? MEVIT mars Tanja Storsul

Stikkordene her peker på at musikk kan skapes og deles på mange ulike måter, i mange ulike situasjoner, av mange ulike mennesker.

DET TEKNISK-NATURVITENSKAPELIGE FAKULTET MASTEROPPGAVE

INF Introduksjon til design, bruk, interaksjon Kapittel 3 bruk og brukere

Introduksjon til evaluering av It-systemer. Hvordan vurdere og verdsette?

Hvorfor markedsundersøkelser?

Kvalitative intervju og observasjon

Grunnlaget for kvalitative metoder I

Prototyping. Håkon Tolsby Håkon Tolsby

Mennesker er nysgjerrige

KVANTITATIV METODE. Marit Schmid Psykologspesialist, PhD HVL

Prosessen sett i et fugleperspektiv

Brukbarhetstesting. En introduksjon Praksis... Fremgangsmåte NTNU NTNU

Ressurs Aktivitet Resultat Effekt

Brukertesting i et nøtteskall

Kokebok for einnsyn. Verktøy for å kartlegge holdninger. Versjon 0.2

Forstå bruk og datainnsamling. INF 1500; introduksjon 9l design, bruk og interaksjon 29 august 2011

Menneske-Maskin Interaksjon. Definisjon av usability: ISO Effektivitet. Anvendbarhet. Tilfredstillelse. Brukskvalitet (usability) Usability

BRUKERSENTRERTE metoder i innovasjon av IT-systemer

Metodisk arbeid. Strukturert arbeidsmåte for å nå et bestemt mål

Evaluering av brukskvalitet for et Web-grensesnitt

Transkript:

Usability testing Brukertester Håkon Tolsby 13.01.2017 Håkon Tolsby 1

Usability-testing (brukertest) Representative brukere utfører typiske oppgaver. Mest mulig kontrollerte omgivelser, i form av eksperimenter. Innhenting av kvantitative målinger «usability metrics». Ofte i et eget laboratorium konstruert for formålet - et såkalt «Usability Lab». 13.01.2017 Håkon Tolsby 2

Eksempel på Usability Lab - Microsoft 13.01.2017 Håkon Tolsby 3

Eksempel på testsituasjon 13.01.2017 Håkon Tolsby 4

Forenklet testomgivelse 13.01.2017 Håkon Tolsby 5

Rammen for Usability-testing Mål og spørsmål fokuserer på hvor bra brukere utfører oppgaver Vanlig med sammenligning av flere systemer Fokus er på tiden det tar å fullføre en oppgave og antall feil. Data innsamles med video, observasjon og logging av interaksjon (Screen recorder: CamStudio, Screencast). Typisk 5-10 deltagere (3-4 fungerer også). En seksjon tar ca 30 minutter Noen eksperter argumenter for at testtingen skal fortsette inntil man ikke oppdager noe nytt. 13.01.2017 Håkon Tolsby 6

Hva måles i en usability-test Primært: tiden en oppgave tar hyppigheten av feil Andre mulige målinger: hvor lang tid det tar å lære seg å løse oppgaver vha. applikasjonen fleksibilitet mulighet til å ta opp i seg endringer i utførelsen av oppgaven, sekvenser Brukerens subjektive opplevelse evalueres med spørreskjema og intervjuer 13.01.2017 Håkon Tolsby 7

Testplan usability-test Formålet med testen VELDIG VIKTIG! Problemer som skal testes Brukerprofil Metodologi En beskrivelse av metoder og gjennomføring (Terminologi evaluering) Testomgivelse Observatørrollen Hva som skal evalueres måledata Oppgaveliste 13.01.2017 Håkon Tolsby 8

Metodologi usability-test et eksempel 0. Utfylling av avtale om anonymitet 1. Utfylling av spørreskjema om bakgrunnsinformasjon 2. Orientering om testen 3. Gjennomføring av test 4. Debrifing med oppfølgingsspørsmål/spørreskjema 5. Analyser resultatene umiddelbart 6. (rette feil/mangler før neste test??????) 13.01.2017 Håkon Tolsby 9

Formålet med testen Oppgave brukertesting hiof.no Problemer som skal testes Arbeid to og to Tid ca 5 minutter 13.01.2017 Håkon Tolsby 10

Oppgave brukertesting hiof.no Lag tre testoppgaver som utdyper formål og problem. Hva slags testdata skal samles inn? Arbeid to og to Tid ca 5 minutter 13.01.2017 Håkon Tolsby 11

Think-aloud teknikken Dette er en teknikk som kommer fra kognitiv psykologi der man prøver å «kikke inn i hodet til folk». Ble opprinnelig utviklet av psykologer for å skaffe til veie empiri for å forstå kognitive prosesser. Brukeren snakker høyt om hvordan han løser en oppgave. Oppvarming, lurt å starte med å venne brukeren til å tenke høyt. Brukeren skal fokusere på oppgaven ikke høyttenkningen. Kan brukes både til testing og under feltobservasjon 13.01.2017 Håkon Tolsby 12

Testing og den altfor enkle informasjonsmodellen Hva er problemet med denne modellen? Hvordan bør testen utformes? 13.01.2017 Håkon Tolsby 13

Hva slags oppgaver skal testes? Definer nøkkeloppgaver: Bedre med åpne oppgaver enn lukkede. Åpen: Finn en reise som du ønsker a ta med familien på. Lukket: Finn en reise til Tyrkia som koster under 2500. Forstå det - fri bruk strategi 13.01.2017 Håkon Tolsby 14

Hva gjør man med resultatene? Analyser umiddelbart etter test Identifiser problemer Planlegg hvordan problemene kan utbedres Typiske problemer: Uklare konsepter og begreper Ordene de ser etter mangler For mye å forholde seg til Ignorer kajakk -problemer Motstå fristelsen til å legge til nye ting. Hver kritisk til forespørsler etter flere funksjoner Ta først tak i de enkle og opplagte problemene 13.01.2017 Håkon Tolsby 15

Når testresultatet ikke sier noe Et vanlig problem i begynnelsen Dårlig gjennomført test Dårlig forståelse av formålet med nettsted/app og formålet med testen. Feil problemer og feil oppgaver Mangelfull gjennomføring HUSK PILOTTEST! 13.01.2017 Håkon Tolsby 16

Andre teknikker ved testing Retrospective walk through Brukeren forteller hva han har gjort eller lært i et semistrukturert intervju Piggybacking Følger en bruker som tester et system over tid. Blanding mellom feltstudie og brukertest 13.01.2017 Håkon Tolsby 17

Videre lesing DON T MAKE ME THINK, Kapittel 9 Interaction Design, Kapittel 12-15 13.01.2017 Håkon Tolsby 18