Emina Sendijarevic

Automatiek INNL

Evaluatie usability testing resultaten

De automatiek INNL is al geruim een maand in gebruik. Om de uiteindelijke interactie tussen de gebruiker, de automatiek en de ruimte van het AHM te bepalen, is een evaluerend usability onderzoek uitgevoerd. De resultaten worden per handeling van de gebruiker in chronologische volgorde beschreven.

Methode: Observeren hoe testers objecten uit de automatiek trekken. Alleen in geval de tester er niet uitkomt, te hulp schieten. Aan het einde vindt een korte evaluatie met algemene vragen plaats (vond u de aanwijzingen op het scherm begrijpelijk? was het duidelijk wat u moest doen? vond u het leuk om te doen?). Test is uitgevoerd zaterdag 26 juni en maandag 28 juni 2010.

Aantal testers: 14; Mannen: 3; Vrouwen: 11; Jong (tot 35): 7; Ouder (vanaf 35): 7

Vinden van het geld-automaat
Na enige tijd (en vaak aanwijzingen van mij), vinden testers de kaartjes automaat. Wellicht zou er een aanwijzing moeten zijn om mensen duidelijk te maken dat kaarten bij de automaat gehaald kunnen worden. Een pijltje op het automaat zelf waarop staat ‘Kaart kopen’--->

Een aantal zaken die opvallen:

  • De kaartjes-automaat is absouut niet zichtbaar vanaf het punt waar iedereen binnen komt. Iedereen komt namelijk via de ingang binnen en stopt bij de automatiek. Ze lopen niet door naar de kaartjes-automaat.
  • De schermen liggen ook dieper dan de automatiek, in een hoek verscholen. Haal ze meer naar voren, zodat het één geheel wordt met de automatiek.
  • De enorme pijlen boven de kaartjes automaat hebben absoluut geen effect.
  • Gek genoeg lopen toeristen er meteen naartoe als ze een kaartje voor het museum willen kopen ( maar niet als ze er een object uit willen halen). Kunnen we hieruit concluderen dat de kaartjes-automaat door bezoekers niet als een onderdeel van de automatiek wordt gezien?

Scherm na het inwerpen van geld
Wanneer een tester geld in de automatiek werpt, verandert het scherm. Bij dit scherm blijven de testers een tijdje stilstaan. Ze weten volgens mij niet zo goed wat nu de volgende stap is (op OK drukken) en moeten even nadenken. Wellicht kan deze aarzeling verminderd worden door i.p.v. OK, ‘Ga verder’ of ‘Zet het geld op de kaart’ te gebruiken. Zo weet de gebruiker dat er nog iets komt. ‘OK’ klinkt alsof de actie hier eindigt? Het duurde in 8 van de 14 gevallen een tijdje voordat er op OK werd gedrukt.

INNL-kaart
Drie testers vonden het door die kaart onnodig lang duren om een object te kopen. Één vond het niet nodig: wil alleen aan object eruit halen. Twee testers raakten in paniek, nadat ze geld in de automaat hadden gegooid en geconfronteerd werden met de kaart. Ze dachten dat de kaart een toegangskaartje was voor het museum en niets met de automatiek te maken had. In totaal dus 6 mensen die de kaart zoals die bedoeld was, niet waardeerden of begrepen.

Onder deze testers waren er ook 4 mensen die ervan overtuigd waren dat het om de museum-jaarkaart of andere kaart ging (zoals de I amsterdam kaart). Ze drukten dan ook op ‘kaart opladen’(2x) of vroegen mij om hulp (2x).

Bij de andere 8 testers ging het heel soepeltjes. Ze vroegen niet eens waarvoor een kaart nodig was.

Wat is geschiedenis voor jou-keuzemenu
Bijna iedereen op één na doorliep deze stap. Niemand merkte er echt iets over op. Ik merkte dat veel mensen deze vraag best serieus namen en er goed over na gingen denken. Hierdoor duurde het halen van een kaart langer.

Skippen
Slechts één tester gebruikte de skip-button om de ‘wat is geschiedenis voor jou’-keuzemenu te skippen. Ik had ook niet het idee dat mensen een stap wilden skippen. Over het algemeen vulden testers alles in (behalve het e-mail adres in sommige gevallen).

Toetsenbord
@ zou ergens bovenin moeten zitten. Niet bij de rand van het toetsenbord. Soms een typefout met de @ gemaakt, doordat hij bij de rand van het scherm zit. Voor de rest doet het toetsenbord het goed.

E-mail
Sommige mensen vulden hun e-mail in, anderen niet. De tekst daaronder hielp hun keuze niet gemakkelijker te maken: in de meeste gevallen lazen ze het namelijk niet eens. In enkele gevallen waarin ze het wel lazen, maakte het geen indruk (naar mijn mening).

‘Waarvoor heb je mijn e-mail nodig?’ Was een veelvoorkomende vraag onder diegenen die hun e-mail niet wilden prijsgeven. Het besluit bleef hoe dan ook onveranderd, ookal legde ik het uitgebreid uit.

Uiteindelijk hebben 10 van de 14 mensen hun e-mail adres ingevuld. Iedereen vulde zijn naam in, één persoon gebruikte een fictieve naam.

RIFD-tag scannen om object eruit te halen
Één persoon wist meteen dat het de bedoeling was om de kaart bij het ik-hartje te scannen. De rest slaagde er niet in. Gebruik in plaats van het hartje een afbeelding van de kaart. Dan is het gelijk ook duidelijker dat een kaart nodig is om een object uit de muur te trekken. Dit is namelijk nergens uit af te leiden. Zelfs niet uit de folder.

voorstel voor de automatiek INNL
voorstel voor de automatiek INNL - Een sticker met de aanwijzing waar kaartjes gekocht/ gescand moeten worden in plaats van het ik-hartje.

Media-scherm
Mensen hebben niet door dat ze een filmpje kunnen kijken over hun object door de INNL-kaart te scannen bij het media-scherm. Wederom moet een kaart worden afgebeeld i.p.v.een ik-hartje.

Algemene observaties

  • Soms duurt het lang voordat het licht op groen overgaat en de tester er iets uit kan halen: Waarom?
  • De folder legt niets uit. Er staan 9 bakjes aan folders recht tegenover de automatiek waarin niets beschreven staat over de INNL-kaart. Hoezo 9 bakjes ? Hoezo geen introductie van de kaart of uitleg hoe het werkt?
  • Geldwisselaar nodig.
  • Ontzettend veel mensen denken dat de ingang van het museum bij de automatiek is. Veel toeristen die binnenkomen willen hun entreekaartje voor het museum kopen via de automatiek. Misschien entree-bordje bij de echte ingang van het AHM zetten?
  • Iedereen kijkt eerst heel goed welk object hij/zij uit de automatiek wil halen. Het is een deel van wat de automatiek zo leuk maakt
  • Mensen vinden het object erg leuk en de automatiek ook. Vooral het feit dat ze een persoonlijke souvernir van geschiedenis hebben en het zelf mogen uitzoeken. Ontzettend veel positieve reacties op de objecten, het design van de automatiek en de filmpjes.
  • Het media-scherm trekt bezoekers door het geluid, dus dit is goed.
  • Platte objecten moeten niet bovenin worden gezet in de automatiek. Kleine mensen zien de bovenste vakjes niet (misschien een kruk neerzetten?)
  • De persoon die uitleg staat te geven, moet er wel bijblijven, niet verscholen achter de automaat. De persoon moet ook kunnen enthousiasmeren, mensen erbij betrekken en een beetje leuk kunnen vertellen.

Bugs

  • Wanneer het mediascherm ‘re-set’, zie je een scherm van mediamatic met een dialoogvenster. Het ziet er niet uit. Het re-setten gebeurt om de 10 min.? Kan daar geen scherm overheen dat alles verbergt?
  • In 3 van de 14 gevallen is er per ongeluk geen geld op de kaart gezet: De kaart kon ook niet meer gescand worden. Heel vervelend.
  • Soms flikkert ‘Invalid address’ in het rood wanneer je je e-mail nog moet invoeren (3x). Testers zagen het gelukkig niet.
  • De naam van een persoon wordt altijd ingevuld. Echter zag ik later op Any.nu dat de naam in het geval van één tester niet bekend was. Dit is een bug, want die persoon heeft wel haar naam ingevuld.
  • Soms wordt ook niet het goede object bij de persoon gekoppeld op any.nu. Zo heeft Oscar een Kruisje gekocht, maar zie je in zijn profiel dat hij Haaientanden heeft gehaald.
  • In de e-mail die je van het NHM krijgt, staat geen link naar je persoonlijke pagina. Dat terwijl er alleen maar informatie over je persoonlijke pagina staat geschreven.