4 tips voor de ultieme remote UX test | M2mobi
Alle blogs

4 Tips voor de ultieme remote UX test

We hebben het de afgelopen maanden waarschijnlijk allemaal meegemaakt: prototype fantastisch mooi uitgewerkt, UX test scripts tot in de puntjes voorbereid, respondenten geworven voor je in-person interviews, testlocatie- en techniek paraat, en toen … Corona!

Remote moderated UX testing is natuurlijk niets nieuws, maar in de huidige low touch realiteit is deze vorm van gebruikersonderzoek relevanter en waardevoller dan ooit. Wij ervaarden dat de afgelopen maanden ook en delen daarom graag onze valkuilen, succesfactoren, onze eigen leerpunten én 4 tips om jouw remote research gegarandeerd te laten slagen.

Het eerste dilemma: testen op smartphone vs grotere schermen

Bij M2mobi zijn we mobile natives en denken we altijd mobile first. Bij remote UX tests is dit direct je eerste uitdaging: Laat je jouw respondenten thuis jouw mobiele prototype op een groot scherm bekijken, of laat je hen dit op hun smartphone doen? En welke device en camera setup geeft de beste inzichten?

De vraag is immers: hoe kun je nu echt goed meekijken met wat er op hun smartphone gebeurt en hoe ze hier op reageren? Je kunt natuurlijk geen eye tracking tools bij ze installeren of meerdere camera’s plaatsen om hun oog- en vingerbewegingen, gezichtsuitdrukkingen en interacties vast te leggen.

Onze setup

Essentieel om je test te laten slagen, is de juiste setup. In onderstaande afbeelding hebben we onze favoriete stack gevisualiseerd. We werken standaard met 1 interviewer en 1 observator / datalogger, zodat de een alle aandacht op de test en testpersonen kan richten en de ander alle bevindingen direct vast kan leggen én feedback kan geven, wanneer nodig. Onze tip: gebruik Slack (of welke messaging of communicatie tool maar je voorkeur heeft, zoals bijvoorbeeld Microsoft Teams) om tijdens het interview mogelijke aandachtspunten aan de interviewer door te geven, zodat je geen inzichten mist.

Remote UX testing setup

Waarom welke tool?

Je kunt je remote research prima uitvoeren van een set van gratis en relatief standaard tools. Onze favorieten:

  • Onze favoriete video conferencing tool is Google Meet. Waarom? Het is browser based en dus door iedereen te gebruiken (ook zonder account), het staat je eenvoudig toe om schermen te delen, je kunt simpel de compositie van je vensters aanpakken, de video- en geluidskwaliteit zijn goed en crashes zijn zeldzaam.
  • InVision is een van onze favo prototyping tools voor dit soort tests, maar kies vooral je eigen favoriet. Essentieel is dat je je prototyping in-browser kunt delen en - mocht toch blijken dat je een foutje hebt gemaakt - je hem pijlsnel kan aanpassen en syncen.
  • Google Docs is de tool waarin we onze test scripts en research notes bijhouden.
  • Slack is praktisch om tijdens je interview een lijntje met je observator en mogelijke toehoorders te houden.
  • Via Google Forms kun je - indien gewenst - testpersonen achteraf eenvoudig aanvullende zaken als een System Usability Scale laten invullen.
  • QuickTime Player is een prima gratis tool om je sessies op te nemen.
  • Een tool als uxcam kan je helpen om bijvoorbeeld heatmaps te maken en je interview op te nemen. Evengoed zijn er verschillende alternatieven.

Onze positieve ervaringen

Belangrijk om vooraf te melden: de afgelopen periode voerden we met name exploratief en comparatief onderzoek uit. Daar zijn onze ervaringen dan ook op gebaseerd.

Tijdens de tests die wij uitvoerden, bleek een groter scherm prima te volstaan om een gebruiker een smartphone ervaring te geven. Immers, je prototype is gevisualiseerd in een mock up, waardoor de gebruiker mentaal toch snel de switch lijkt te maken van desktop naar smartphone experience.. Bijkomend voordeel: wanneer je je testpersonen vraagt om met hun cursor aan te geven waar ze op dat moment specifiek naar kijken, creëer je een semi-eyetracking inzicht. Omdat hun webcams doorgaans direct boven hun scherm zijn gemonteerd, heb je bovendien perfect zicht op hun gezichtsuitdrukkingen.

Onze valkuil

In onze eerste remote tests vroegen we testpersonen om het prototype op hun smartphones te gebruiken en het scherm direct te delen in de Google Meet. We verwachtten immers dat deze meest pure gebruikerservaring ook de meest pure inzichten zou verschaffen. Wat bleek: we hadden meer moeite om te volgen wat de gebruiker deed, maar met name om hun oogbewegingen te volgen en gezichtsuitdrukkingen te zien. Een extra device blijkt voor veel deelnemers bovendien een flinke extra horde (feedback vanwege meerdere microfoons en speakers, problemen bij het delen van het scherm en terughoudendheid bij testpersonen om hun smartphone scherm te delen).

Essentieel:

  • Ga altijd voor een setup met 2 schermen

Het grote scherm om mee te kijken met je gebruikers, het kleine scherm voor je script en eventueel Slack

  • Maak separate meetings aan per testpersoon, in plaats van 1 lange

Je wilt voorkomen dat je een vroege respondent moet laten wachten of weigeren, omdat je nog de uitgelopen test met die breedsprakige andere respondent moet afronden. Natuurlijk zijn planning en timeboxing essentieel, maar maak vooral losse meetings aan, zodat in geval van nood je collega vast de introductie doet, terwijl jij een andere test afrondt.

AVG en het bewaren van persoonsgegevens

Het is natuurlijk vrij standaard om je sessies op te nemen. Maar waarom eigenlijk? Zeker als je samenwerkt met een observator of datalogger, zul je doorgaans geen enkel interview meer terugkijken. Wil je toch absoluut je sessies recorden? Houd er dan rekening mee dat je je respondenten hierover vooraf informeert, zorg dat ze expliciet toestemming geven én hou rekening met de AVG richtlijnen. Organisaties mogen gegevens immers niet langer bewaren dan noodzakelijk is. Er is op grond van de Algemene verordening gegevensbescherming (AVG) weliswaar geen concrete bewaartermijn voor persoonsgegevens, maar je wilt voorkomen dat je bijvoorbeeld na een data breach je respondenten moet vertellen dat je onzorgvuldig met hun gegevens en opnames bent omgegaan. Onze mening: neem interviews alleen op wanneer strikt noodzakelijk, zorg voor beveiligde opslag én verwijder de gegevens (zowel de persoonsgegevens van de respondenten als hun interview) direct, nadat je deze toch niet meer nodig hebt.

Onze 4 onmisbare tips

1. Test en dubbel check de technologie

Onderwerp je complete setup minimaal 1x aan een stresstest en probeer je vooral ook in je testpersonen in te leven. Geloof ons, je komt het allemaal tegen: haperende wifi-verbindingen, out-of-date browsers, screen capture die nét het verkeerde scherm en geen geluid vastlegt, gebruikers die je prototype volledig laten crashen et cetera. Onze tip: kies voor compatibiliteit, zorg dat je testpersonen niets additioneels hoeven te installeren en zorg dat je bent voorbereid op de worst case scenario.

2. Bereid je respondenten goed voor

Zo eenvoudig als het is om een testpersoon in real life aan te voelen, te informeren, te coachen en gerust te stellen, zo moeilijk kan dat in een remote test zijn. Start met hen - na de werving - te mailen met een heldere uitleg van wat ze van de test kunnen verwachten en hoe ze zich kunnen voorbereiden. Stuur ze een aantal uur van tevoren een laatste reminder met daarin de belangrijkste need-to-knows. Stel ze aan het begin van de test gerust en neem stap voor stap de belangrijkste technische zaken door: gebruik van voor hen nieuwe technieken maakt ze mogelijk nog zenuwachtiger dan normaal. Het is aan jou om te zorgen dat alles aan hun kant vlekkeloos verloopt.

3. Ga er vanuit dat je ook meteen een remote help desk bent

Je kunt je het beste voorbereiden door uit te gaan van Murphy’s Law: “Alles wat fout kan gaan, zal ook fout gaan”. Haperende webcams, instabiele Wifi-verbindingen, PC’s die halverwege een test updates gaan installeren, testpersonen die niet snappen hoe ze een scherm kunnen delen, you name it. Calculeer hier voldoende tijd in je script voor in, zorg dat je bent voorbereid op mogelijke issues en wees zo helder, begripvol en geduldig mogelijk.

4. Zet je zintuigen extra op scherp

Vanachter je laptop is het nóg belangrijker om je testpersonen goed aan te voelen. Vanzelfsprekend heb je hen vooraf gevraagd hardop te denken, maar wat als ze ineens stilvallen? Valt die ene frons je op, of keek je net even naar je andere scherm? Zoals we eerder al zeiden: vraag je testpersoon om zijn cursor als z’n ‘ogen’ te gebruiken en om altijd hardop te denken, maar blijf vooral zelf gefocust op alle kleine nuances in de gedragingen van te testpersonen. Dit zal je leven een stuk makkelijker maken.

Onze conclusie: vanaf nu alleen nog maar remote?

Geloof ons: Remote moderated testing - en specifiek exploratief en comparatief onderzoek - is eenvoudiger en waardevoller dan je wellicht zou denken. Het is wat ons betreft dan ook een prima alternatief of aanvulling op on-site testing Waarom?

  • De inzichten zijn doorgaans van vergelijkbare kwaliteit.
  • Het is eenvoudiger om respondenten te werven: respondenten geven momenteel de voorkeur aan thuis blijven.
  • Lagere kosten, vanwege het ontbreken van reiskosten.

Heb je vragen of opmerkingen over deze blog? Laat het ons weten! Voor nu: have fun testing!

Andere artikelen

Wees de eerste.

Krijg als eerste toegang tot speciale content als whitepapers en blog posts.