Testdokumentasjon Testdokumentasjon Side 1
1. Innledning Dette er en testrapport som er laget for å teste applikasjonene for ios og Android plattformer. Den vil være delt opp i 4 deler. Den første delen tar for seg test av funksjonalitet. Den andre delen tar for seg brukertest. Den tredje delen vil en statistikk over de resultater som har blitt generert bli presentert. Til slutt vil det bli presentert en tilgjengelighetstest. Selve testingen er blitt gjort av studenter, prosjektgruppen, oppdragsgiver og enkelt personer som har blitt spurt om de kan være med på å teste applikasjonene. Dette vil være interessant for personer som har til hensikt å drifte og vedlikeholde programmet. Formålet med testene har vært i hovedsak å prøve å finne feil eller forbedringer som gjør at funksjonalitet eller brukervennlighet blir avklart, slik at det er mulig å forbedre. De type testene som er utført på applikasjonene er funksjonstesting, brukertesting og tilgjengelighetstesting.. Testdokumentasjon Side 2
2. Innholdsfortegnelse 1. Innledning... 2 2. Innholdsfortegnelse... 3 3. Test av funksjonalitet ios & Android... 4 3.1 Test av ios-applikasjonen.... 4 3.2 Test av Android-applikasjonen.... 5 4. Brukertest... 6 4.1 Resultat av brukertest ios... 7 4.2 Resultat av brukertest Android... 8 5. Tilgjengelighetstest... 9 5.1 ios... 9 5.2 Android... 9 Testdokumentasjon Side 3
3. Test av funksjonalitet ios & Android I dette kapittelet vil det bli beskrevet hvordan vi gjennomførte tester av de funksjoner som finnes i applikasjonene. Under ser man tabeller på de tester vi har utført på emnenes funksjoner. Vi har testet om funksjonene fungerer ved å komme ut og inn på hvert delsystem tilhørende hvert emne. Tiden er i ca tid og er relative på grunn av hvilke forutsetninger som hvor god internett forbindelse og versjoner av operativsystem som blir brukt. Tiden er også i ca fordi Vi har brukt WIFI ved testingen. Til slutt er det beskrevet om det er tilfredsstillende eller ikke. 3.1 Test av ios-applikasjonen. Type funksjon Funksjonell Ca tid inn i app/emner målt i sek. Ca tid ut av app/emner målt i sek. Tilfredsstillende ja/nei Meny Ja 0,5 0,2 Ja Nyheter Ja 2 0,2 Ja Om NR Ja 0,2 0,2 Ja Kontakt NR Ja 0,2 0,2 Ja Blogg Ja 1 0,2 Ja Feeds Ja 0,2 0,2 Ja Abonnering Ja 0,2 0,2 Ja Kart Ja 1 0,2 Ja Testdokumentasjon Side 4
3.2 Test av Android-applikasjonen. Type funksjon Funksjonell Tid inn målt i sek. Tid ut målt i sek. Tilfredsstillende ja/nei Meny Ja 0,2 0,2 Ja Nyheter Ja 2 0,2 Ja Om NR Ja 0,2 0,2 Ja Kontakt NR Ja 1 0,2 Ja Blogg Ja 2 0,2 Ja Feeds Ja 0,5 0,2 Ja Abonnering Ja 0,2 0,2 Ja Kart Ja 1 0,2 Ja Som man ser har man ikke store forskjeller mellom tidene mellom funksjonaliteten og tiden det tar å gå inn i emnene. Den største forskjellen er i Nyheter som det tar to sekunder å få kommet inn på og få all informasjon ut i fra. Dette på grunn av at man må lese all informasjon som er i kildekoden på nett. Den andre funksjonen er tilhørende blogg og bruker ett sekund i ios. Grunnen til at den bruker litt mer tid, er på grunn av at man henter headere i fra kildekoden til websiden til NR. I Android er vi usikre på hvorfor det tar lengere tid. En mulighet er at det er forskjellig operativsystem. Testdokumentasjon Side 5
4. Brukertest Under er det lagt frem en brukertest som er blitt utført på applikasjonene. Det ble stilt ti spørsmål til brukerne om applikasjonenes brukervennlighet og funksjonalitet. 1. Gå inn på applikasjonen og finn en nyhetsartikkel. 2. Finn et blogginnlegg. 3. Finn når Norsk Regnesentral ble stiftet? 4. Finn ut av hvor Norsk Regnesentral ligger? 5. Finn kontakt informasjon for Norsk Regnesentrals IT-Leder. 6. Finn et feeds innlegg. 7. Abonner på Norsk Regnesentrals nyhetsbrev. Hvor lett var dette i fra en skala fra1 til 5 hvor 1 er dårligst og 5 er best? 8. Hva synes du om teksten som ble vist under de forskjellige emnene i fra en skala fra 1 til 5, hvor 1 er dårligst og 5 er best? 9. Hvor fornøyd er du med responstid på valgte emner i applikasjonen i fra en skal i fra 1 til 5 hvor, 1 er dårligst og 5 er best? 10. Ville du brukt applikasjonen? Testdokumentasjon Side 6
4.1 Resultat av brukertest ios Under ser man resultatet av spørsmålene i brukertesten. Man ser at det ikke er så store forskjeller på de forskjellige svarene foruten på spørsmål åtte. Her ble det sagt at teksten på nyheter kunne vært større og lettere å lese. Det samme kommenterte de på blogg. Noen andre kommenterte at man skulle kunne lese dette på bred skjerm og at de synes det var verst å lese teksten her da denne var veldig liten. Noen ønsket å slippe å forstørre teksten og at denne automatisk skulle vise teksten i en behagelig størrelse. På spørsmål om brukeren ville brukt applikasjonen sa alle ja. Sp1 Sp2 Sp3 Sp4 Sp5 Sp6 Sp7 Sp8 Sp9 Pers1 5 5 4 4 4 5 5 4 5 Pers2 5 5 5 5 4 4 5 5 5 Pers3 5 5 5 5 5 5 5 3 5 Pers4 5 4 5 5 5 5 5 4 5 Pers5 5 5 4 5 5 5 5 4 5 Pers6 5 5 4 5 5 3 5 3 5 Pers7 4 5 5 5 5 5 5 3 5 Pers8 5 5 5 5 5 3 5 3 5 Testdokumentasjon Side 7
4.2 Resultat av brukertest Android Under ser man resultatet av spørsmålene i brukertesten. Man ser at det ikke er så store forskjeller på de svarene som har blitt stil foruten på spørsmål tre og fem. Her ble det sagt at denne disse sidene kunne vært mer oversiktlig og lettere å lese. På spørsmål om brukeren ville brukt applikasjonen sa alle ja. Sp1 Sp2 Sp3 Sp4 Sp5 Sp6 Sp7 Sp8 Sp9 Pers1 5 4 2 5 4 4 4 4 5 Pers2 5 4 3 5 3 5 5 4 4 Pers3 4 4 3 5 4 5 5 4 5 Pers4 4 4 2 5 3 5 4 3 4 Pers5 4 4 2 5 4 5 5 4 5 Pers6 4 5 3 5 3 5 4 4 4 Pers7 4 5 2 5 4 5 5 3 5 Pers8 5 5 3 5 3 5 4 4 5 Testdokumentasjon Side 8
5. Tilgjengelighetstest 5.1 ios Først testet vi hvordan Voice Over fungerte på en iphone 4 og simulatoren på Mac. Dette gjorde vi ved å sette på den innebygde funksjonen i innstillinger. Dette fungerte etter våre forventninger ved å lese tekst og innhold i applikasjonen. Den klarte å skille mellom funksjonell og vanlig statisktekst. 5.2 Android På Android testet vi dette i versjon 2.3.6 ved å laste ned en applikasjon som heter Talkback. Vi brukte da denne applikasjonen med den vi har utviklet, men dette viste seg ikke å fungere. Grunnen til dette er fordi Androids Talkback er ufullstendig og trenger mer utvikling før dette kan fungere. Android 4 kommer med forbedringer når det gjelder tilgjengelighet. Testdokumentasjon Side 9