Klient rapport

KIMS BIX
Klient rapport
Usability test
Lavet af:
Steven Beck Klingberg_________________________________
Lasse Jensen _________________________________
Nicolai Larsen _________________________________
Institution
Erhvervsakademiet Lillebælt
Vejledere:
Erik Østergaard
Lars Bojen
12/18/2012

Senior Class Production Usability Klient Rapport for PBA E-Concept Development Odense 2012
Information
Modtager:
Att: Kim Christensen
Kims Bix
Korsebjergvej 30
5491 Blommenslyst
CVR nr: 26740703
E-mail: salg@kims.nu
Telefon: 24 64 55 23
Afsendere:
Senior Class Production
Steven Beck Klingberg
Lasse Jensen
Nicolai Larsen
Institution
Erhvervsakademiet lillebælt
Munkebjergvej 130
5230 Odense M
E-Konceptudvikling
1

Senior Class Production Usability Klient Rapport for PBA E-Concept Development Odense 2012
Indholdsfortegnelse
Indledning ............................................................................................................................................... 3
Forberedelse til usability test ................................................................................................................. 3
Remote testing ........................................................................................................................................ 3
Remote test af Kims bix ...................................................................................................................... 3
Opgaverne ....................................................................................................................................... 3
Resultater af remote test .................................................................................................................... 4
Think aloud test ...................................................................................................................................... 6
Beskrivelse af testpersoner ................................................................................................................. 6
Spørgsmål til think aloud test ............................................................................................................. 7
Samlede resultater af think aloud test ............................................................................................... 8
Konklusion ............................................................................................................................................. 10
2

Senior Class Production Usability Klient Rapport for PBA E-Concept Development Odense 2012
Indledning
Rapporten henvender sig til Kims Bix 1 , den omhandler usability tests 2 af butikkens webshop.
SCP (Senior Class Production red.) har igennem en række usability test fundet informationer omkring
navigeringen på webshoppen.
Testene har vist at navigeringen på webshoppen er yderst vanskelig hvis man ikke er ekspertbruger
med hensyn til e-handel, er det svært at finde vare på webshoppen. SCP har også testet tilfældige
brugere på internettet, ved hjælp af remote testing. Der er 20 brugere der har deltaget i testen.
Dette kan bevises ud fra undersøgelserne der er at finde igennem denne rapport.
Forberedelse til usability test
Før SCP kunne gå i gang med usability test af webshoppen hos Kims bix, skulle der findes metoder
der ville være nyttige at bruge. Metoderne der blev valgt var think aloud 3 og remote testing 4 .
Think aloud testing foregår ved hjælp af en computer, et kamera og en mikrofon. Testdeltagerene
bliver filmet under testen, og de bliver bedt om at tænke højt så man kan få deres meninger og
tanker om webshoppen.
Ved remote testing bliver frivillige på internettet bedt om at løse en række stillede opgaver, testen
er en klik test hvor brugerne kun får mulighed for at klikke én gang, samtidigt med at softwaren
registrere hvor brugerne klikker henne. Softwaren udregner herefter hvor stor en procentdel af
brugerne der har klikket de forskellige steder. Disse udregninger kan bruges af SCP til at se hvor stor
en del af de adspurgte der har svaret forkert på opgaverne.
Remote testing
Resultaterne af remote testen blev lidt usikre grundet fejl i softwaren. SCP har dog stadig valgt at
bruge resultaterne da det kun er svarende fra 10% af testdeltagerne der mangler i 2 af de 3 opgaver.
Remote test af Kims bix
Opgaverne
Din opgave er at finde en pakke med 3 tuber camouflage creme. Klik på den
varegruppe du mener camouflage creme er under.
20 clicks
0 skips
Average time taken: 20 seconds
Du er nu under den varegruppe der har en kategori med camouflage creme.
Klik på den underkategori du mener camouflage creme er i.
20 clicks
0 skips
Average time taken: 28 seconds
Du er i underkategorien med camouflagecreme. Find camouflage cremen
med 3 tuber, sort, brun og grøn.
20 clicks
1 www.kims.nu – 18/12/2012
2 Rubin, Jeffrey & Chisnell, Dana (2008) Handbook of Usability Testing: How to Plan, Design, and Conduct
Effective Tests, Wiley Publishing Inc.,ISBN 9780470185483
3 http://www.usabilityfirst.com/glossary/think-aloud-protocol/ - 18/12/2012
4 Dray, Susan; Siegel, David (March 2004). "Remote possibilities?: international usability testing at a
distance". Interactions 11 (2): 10–17. doi:10.1145/971258.971264
3

Senior Class Production Usability Klient Rapport for PBA E-Concept Development Odense 2012
0 skips
Average time taken: 14 seconds
Resultater af remote test
På ovenstående screendump kan man se at 40% af deltagerne har klikket på “Udstyr”. 50% af
deltagerne har klikket på “Beklædning”. Det rigtige svar til opgaven er “Udstyr”. 50% af de adspurgte
har svare forkert på opgaven. Grundet de manglende 10% på grund af fejl i softwaren, kan SCP ikke
fastslå om det er halvdelen af testpersonerne der har svaret forkert eller om det er mere.
4

Senior Class Production Usability Klient Rapport for PBA E-Concept Development Odense 2012
Ud fra det ovenstående ovenstående screendump kan SCP konkludere at alle de adspurgte brugere
har klikket på den rigtige knap til den stillede opgave. Dog har hele 80% af de adspurgte valgt at
bruge knappen ude i varegruppen, kun 20% har valgt at bruge knappen inde på selve
underkategorien. Det giver et indtryk af at “Øvrige dele” ikke er tydeligt nok for brugerne. SCP kunne
have bedt de adspurgte om ikke at benytte varegruppen for at se om dette havde ændret på
resultatet således at 100% af de adspurgte havde klikket på “øvrige dele” i undermenuen. Dette vil
blive velovervejet næste gang der skal foregå remote testing af en webshop/hjemmeside.
5

Senior Class Production Usability Klient Rapport for PBA E-Concept Development Odense 2012
I ovenstående screendump ses at 90% af de adspurgte har klikket på det rigtige svar til den stillede
opgave. Grundet fejl i softwaren mangler der svar fra 10% af de adspurgte, denne fejl kan SCP ikke
rette på, og det må derfor betragtes som en fejlkilde, da SCP ikke ved om de sidste 10% har svaret
rigtigt eller forkert.
Think aloud test
SCP valgte at benytte testpersoner efter erfaring med e-handel. På denne måde var det muligt for
SCP at bevise hvor erfaren brugerne af hjemmesiden skal være for at kunne navigere fejlfrit på
webshoppen. Resultaterne er at finde på nedenstående sider.
Beskrivelse af testpersoner
Nedenstående er beskrivelser af de testpersoner der har deltaget i think aloud testene.
Testperson 1 - Sebastian
Testperson nr. 1 er en ung mand fra odense der i hverdagen bestiller alt sit tøj og accessories på
webshops. Personen bor i Odense og er 22 år gammel, han læser til dagligt som økonom på
universitetet. Testpersonen er valgt fordi testpersonens lillebror ønsker sig en softgun i julegave,
brugeren er derfor et godt valg til denne think aloud test, da personen ofte benytter sig af andre
6

Senior Class Production Usability Klient Rapport for PBA E-Concept Development Odense 2012
webshops og kan betegnes som en øvet person indenfor webshopping.
Testperson 2 - Chris
Testperson nr. 2 er en ung elektrikerlærling fra Årslev, midtfyn. Testpersonen er 19 år gammel. Han
bestiller til dagligt redskaber til sit arbejde via e-handel og må derfor betegnes som en ekspertbruger
inden for e-handel. Testpersonen har ingen viden indenfor design, men har en god fornemmelse af
hvordan de forskellige webshops fungere. Testpersonen er valgt fordi han flere gange har spillet
paintball arrangeret og købt hos kims bix af andre.
Testperson 3 - Mike
Testperson nr. 3 er en 8. klasses folkeskole elev, fra Sdr. nærå på midtfyn. Han er 15 år gammel.
Testpersonen bruger kun sjældent e-handel til at købe ting og er valgt til Think aloud testen på grund
af sin manglende erfaring. Gruppen går derfor udfra at testpersonen kan have udfordringer ved at
navigere på webshoppen hos Kims bix.
Testperson 4 - Morten (Pilot tester)
Testperson nr. 4 er uddannet multimediedesigner og handler ofte via e-handel. Testpersonen har
derfor både en stor viden indenfor hvordan en webshop, burde være designet, samt stor erfaring i at
bruge en webshop. Testpersonen er 24 år gammel og bor i Odense. Testpersonen læser en prof.
bach. indenfor E-konceptudvikling, hvor testpersonen yderligere bliver undervist i hvordan
webshops skal fremstå, for at virke professionelle.
Testpersonen har ikke tidligere handlet igennem Kims bix.
Testperson 5 - Casper K
Testperson nr. 5 arbejder som pædagogmedhjælper i odense kommune, og bor i otterup.
testpersonen er 24 år gammel, og bruger internettet dagligt, men handler kun 2 - 3 gange om året
på nettet, og derfor uerfaren hvad angår e-handel.
Testperson 6 - Casper H
Testperson nr. 6 er igang med at uddanne sig til tonemester på 18frames i Odense, bor også i
Odense og er 20 år gammel. Testpersonen er dagligt på nettet hvor han blandt andet videoblogger
meget, men er en uerfaren e-shopper.
Spørgsmål til think aloud test
Think aloud test af www.kims.nu
Tak fordi du vil hjælpe til med en brugertest af webshoppen www.kims.nu. Undervejs i testen må du
meget gerne sige hvad du tænker om siden og hvor svært du synes det var at udføre de opgaver du
7

Senior Class Production Usability Klient Rapport for PBA E-Concept Development Odense 2012
bliver stillet.
Er der en opgave du har svært ved at løse, har du ikke mulighed for at spørge om hjælp, har du ikke
løst opgaven efter 3 minutter vil du blive bedt om at gå videre til den næste.
1. Gå til www.kims.nu.
2. Kig på forsiden og sig hvad du mener om den.
3. Køb 3 gavekort til en værdi af 1 krone.
4. Køb 2 stk COLT M4A1 RIS Metal rail.
5. Vis hvordan du kan betale dine køb via aftale.
6. Tøm din indkøbskurv.
7. Find en vedligeholdelses vejledning til din COLT M4A1 RIS Metal rail.
8. Find den billigste Sparmax sprøjtepistol og læg den i din indkøbskurv.
9. Find den billigste kompresser til din sprøjte pistol.
10. Find alle produkterne fra producenten ICS.
11. Find ud af hvor Kims bix holder til.
12. Find ud af hvad et 2 timers spil paintball koster.
13. Find ud af hvor mange udendørsbaner der er til rådighed.
Hvad er din mening om webshoppen på en karakterskala 1 - 10, hvor 10 er godt og 1 er skidt.
Samlede resultater af think aloud test
SCP har lagt de samlede resultater i nedenstående diagrammer. Diagrammerne fortæller hvordan
testene er gået for deltagerne, de viser antallet af fejl per testdeltager under alle opgaver, opgaven
med flest fejl, og den tid testdeltagerne har brugt på hver enkelt opgave.
Ovenstående diagram viser antallet af fejl begået af hver deltager under hele testen. De deltagere
der ikke fremgår på diagrammet har ikke haft nogen fejl. Casper,Casper og Mike er alle uerfarne e-
8

Senior Class Production Usability Klient Rapport for PBA E-Concept Development Odense 2012
brugere. Chris er en erfaren bruger.
Diagrammet ovenover viser antallet af fejl i de forskellige opgaver. de opgaver der ikke fremgår er
der ikke fejl i fra nogle af testdeltagerne. Man kan se at den sværeste opgave var nr. 6 som handlede
om at tømme indkøbskurven.
Ovenstående diagram viser antallet af tid, angivet i sekunder, hver enkelt testdeltager har brugt på
opgaver 1-6.
9

Senior Class Production Usability Klient Rapport for PBA E-Concept Development Odense 2012
Ovenstående diagram viser antallet af tid, angivet i sekunder, hver enkelt testdeltager har brugt på
opgaver 7-13.
Konklusion
SCP kan ud fra resultaterne af remote testing konkludere at brugerne har haft svært ved at finde den
rigtige varegruppe de skulle søge efter svaret på opgaven. Hele 50% af brugerne svarede forkert på
opgaven, dette betyder at halvdelen af brugerne skulle til at lede efter den rigtige varegruppe for at
finde det ønskede produkt. Derfor mener SCP at Kims Bix burde overveje at nytænke deres
varegruppering for at gøre den mere overskuelig for brugerne. 100% af brugerne svarede rigtigt på
opgave 2, men svarede på to forskellige menuer der føre dem videre til samme undermenu. SCP
konkludere at Kims bix skal finde en løsning der gør det nemmere for brugerne at finde varegrupper
i undermenuerne. I opgave 3 svarede 90% rigtigt, grundet de manglende 10% kan SCP ikke fastslå at
alle 100% svarede korrekt, men derfor mener SCP ikke der er grund til nytænkning på dette punkt.
Think aloud testene viste at man skal være enten ekspertbruger eller en erfaren bruger for at kunne
navigere næsten fejlfrit på webshoppen. Dette mener SCP er et stort problem da det er sjældent at
det kun er erfarne brugere der benytter sig af e-handel. De uerfarne brugere laver mange fejl og
melder pas til 4-6 af opgaverne. Dette mener SCP er til stor bekymring. SCP’ samlede konklusion af
usability testene er at Kims bix skal redesigne deres webshop for at gøre den mere brugervenlig for
de uerfarne brugere.
10