het opzetten van experimenten voor het testen van de bruikbaarheid van meerdere gebruikersinterfaces en het uitvoeren van gebruikersonderzoek vereist enige planning. Een ding waar je over moet nadenken is of je voor een tussen-proefpersonen studie gaat of een binnen-proefpersonen studie benadering.
In dit artikel zullen we de verschillen tussen beide benaderingen bekijken in de context van het testen van meerdere gebruikersinterfaces op bruikbaarheid. We zullen ook wijzen op de belangrijkste voordelen van beide methoden om u te helpen beslissen welke geschikt is voor uw studie.,
kwantitatieve Usability Studies uitvoeren
wanneer u de bruikbaarheid van meerdere gebruikersinterfaces test in een enkele studie (met dezelfde testdeelnemers), moet u een manier vinden om testdeelnemers toe te wijzen aan de verschillende omstandigheden waarvoor u test.
er zijn twee mogelijke manieren om dit te doen:
- tussen proefpersonen studie-experiment: deze studie opzet omvat het toewijzen van verschillende gebruikersinterface aan verschillende testdeelnemer. Op deze manier interageert elke testdeelnemer met één gebruikersinterface.,
- binnen-proefpersonen onderzoeksexperiment: dit onderzoeksontwerp omvat het blootstellen van elke testdeelnemer aan alle gebruikersinterfaces die u test. Op deze manier zal elke testdeelnemer alle voorwaarden testen.
wanneer u bijvoorbeeld de gebruikersinterfaces van twee e-commercewebsites X en Y vergelijkt om te zien hoe gemakkelijk het is voor gebruikers om filters te gebruiken en producten toe te voegen aan hun winkelwagentje, kunt u dit op twee manieren doen:
- tussen proefpersonen studie-experiment: u wijst elke testdeelnemer een andere website toe., Ze zouden dan de taak te voltooien (Gebruik filters en producten toe te voegen aan hun site) alleen op de site waaraan ze zijn toegewezen.
- binnen-proefpersonen studie-experiment: elke testdeelnemer wordt geïnstrueerd om de taak op beide websites X en Y. te voltooien
dus, wanneer uw doel is om de bruikbaarheid van meerdere voorwaarden (bijvoorbeeld meerdere gebruikersinterfaces) in een enkele studie te testen, moet u beslissen of u de tussen-proefpersonen benadering of de binnen-proefpersonen benadering voor uw onderzoek kiest.,
Experimental Design in Quantitative Studies
in het kader van usability testing kan het primaire doel van kwantitatieve studies zijn om:
- verschillende iteraties van dezelfde gebruikersinterface te vergelijken.
- één site naar de site van de concurrent.
- hoe gebruikers met verschillende expertiseniveaus interageren met de interface.
kwantitatieve bruikbaarheidsstudies omvatten doorgaans onafhankelijke variabelen en afhankelijke variabelen., Onafhankelijke variabelen zijn die die onderzoekers (in dit geval, u) manipuleren terwijl afhankelijke variabelen zijn die worden gemeten tegen veranderende onafhankelijke variabelen.
in ons voorbeeld zouden de twee verschillende e-commerce websites X en Y onafhankelijke variabelen zijn en de tijd die nodig is voor de gebruiker om de taak te voltooien (efficiëntie van het gebruik) of hoe gemakkelijk het is voor de gebruiker om de taak te voltooien (gemak van leren) zouden de afhankelijke variabelen zijn.,
in dit geval zou het doel van de usability studie kunnen zijn om te bepalen of de afhankelijke variabelen veranderen of hetzelfde blijven wanneer we de onafhankelijke variabelen manipuleren. Betekenis is het makkelijker (of sneller) voor de testdeelnemer om de taak op website Y te voltooien dan op website X of niet. Zo ja, dan concluderen we dat site Y beter is dan site X.
een deel van de experimentele opzet van de kwantitatieve usability-studie is om te beslissen of de studie tussen-proefpersonen of binnen-proefpersonen moet zijn.
tussen-proefpersonen vs. binnen-proefpersonen: welk Experiment is beter?,
beide benaderingen hebben hun eigen belangrijke voordelen. Het experiment ontwerp dat u besluit om te gaan met voor uw usability studie kan afhangen van vele factoren, waaronder uw onafhankelijke variabelen, test deelnemers, en de voorwaarden waarvoor u test.
Hier leggen we de voordelen uit van zowel tussen-proefpersonen studies als binnen-proefpersonen studies om u te helpen een weloverwogen beslissing te nemen.,
voordelen van studies tussen proefpersonen
Hier is wat u in gedachten moet houden als u besluit om de benadering tussen proefpersonen te nemen in uw experimentontwerp:
er is geen overdracht van kennis
laten we een scenario overwegen: testdeelnemers die taken uitvoeren op e-commerce website X zullen enige kennis hebben opgedaan met betrekking tot e-commerce websites en de taken die ze zijn toegewezen voordat ze beginnen met het testen van de bruikbaarheid van website Y.,
bijvoorbeeld, ze zullen een beter begrip ontwikkelen van het gebruik van productfilters, of ze een pagina-verversing verwachten of een AJAX-gebaseerde site of waar het winkelwagenpictogram waarschijnlijk zal worden geplaatst nadat ze de taakscenario ‘ s op website X hebben voltooid.
dus, zelfs als de website Y volledig anders is dan website X, gaat de testdeelnemer nog steeds in de test, gewapend met kennis (en expertise) die ze niet hadden toen ze de bruikbaarheid van website x testten.,
bij studies tussen proefpersonen is er geen kans om kennisoverdracht tegen te gaan omdat aan elke testdeelnemer een andere gebruikersinterface wordt toegewezen om te testen.
de sessies zijn korter
vergeleken met studies binnen proefpersonen, studies tussen proefpersonen hebben kortere testsessies. Test deelnemers aan wie één website wordt toegewezen om te testen zullen in staat zijn om de usability test sneller te voltooien dan degenen die twee (of meer) websites moeten testen, waardoor de tussen-studies aanpak ideaal is voor remote usability tests.,
sessies zijn gemakkelijker in te stellen
in het geval van studies binnen proefpersonen moet u de testvolgorde van de onafhankelijke variabelen willekeurig bepalen om het risico van ordeeffecten op de usability-studie te minimaliseren. Wat dit betekent is dat elke testdeelnemer niet eerst website X moet testen en dan website Y. De helft van de testdeelnemers moet in plaats daarvan eerst website Y en daarna website X testen.,
het op deze manier structureren klinkt misschien eenvoudig voor als je twee gebruikersinterfaces test, maar als je het aantal onafhankelijke variabelen verhoogt, zal het randomiseren van de testvolgorde van de onafhankelijke variabelen steeds moeilijker worden.
bij studies tussen proefpersonen hoeft u zich echter geen zorgen te maken over het randomiseren van testorders, aangezien elke testdeelnemer verantwoordelijk is voor het testen van de bruikbaarheid van een enkele gebruikersinterface.,
voordelen van Within-Subjects Studies
echter, als u besluit om de within-subjects benadering te volgen in uw experimentontwerp, zijn er twee voordelen die u moet weten:
minder testdeelnemers
om waardevol inzicht te krijgen in de usability studie, hebt u ten minste 30 datapunten nodig. In vergelijking met een studie tussen proefpersonen, vereist een studie binnen proefpersonen minder testdeelnemers om hetzelfde aantal datapunten te krijgen. Waarom? Omdat aan één testdeelnemer meerdere gebruikersinterfaces worden toegewezen om te testen.,
In navolging van ons voorbeeld, zouden we in totaal 30 datapunten kunnen verzamelen als we zouden gaan voor een studie binnen proefpersonen met 15 testdeelnemers. Aan de andere kant, met een tussen-onderwerpen studie, zouden we alleen in staat zijn om 15 datapunten te verzamelen die lang niet genoeg zijn om een verschil te detecteren tussen de bruikbaarheid van beide sites.
Het is ook vermeldenswaard dat hoe meer testdeelnemers je rekruteert, hoe meer het je gaat kosten. Dus, binnen-subject studies zijn ook kosteneffectiever dan tussen-subject studies.,
u kunt willekeurige ruis minimaliseren
wanneer u testdeelnemers rekruteert voor usability studies, zijn er bepaalde factoren waarover u enige controle hebt en andere waarover u praktisch geen controle hebt.
u kunt bijvoorbeeld testdeelnemers werven die onder een bepaalde leeftijdscategorie vallen of over een bepaald niveau van deskundigheid op het gebied van het onderwerp beschikken. U zult echter niet in staat zijn om factoren zoals de stemming of stressniveaus van de testdeelnemer te controleren.,
het voordeel van een onderzoek binnen proefpersonen is dat elke testdeelnemer samenwerkt met elke onafhankelijke variabele. In navolging van ons voorbeeld betekent dit dat elke testdeelnemer de taak zal uitvoeren die hem is toegewezen op beide websites X en Y.
echter, als je voor een tussen-onderwerpen studie zou gaan, zou je usability test ongeveer zo gaan: een testdeelnemer die gestrest is voor de test zal alleen communiceren met website X en een testdeelnemer die niet gestrest is zal alleen communiceren met website Y., Uw usability study testresultaten zullen waarschijnlijk aanzienlijke variantie hebben en zou meer vatbaar zijn voor willekeurige ruis.
op deze manier is het gemakkelijker om willekeurige ruis te minimaliseren voor studies binnen proefpersonen dan voor studies tussen proefpersonen.
conclusie
u kunt usability testing studies uitvoeren met behulp van de tussen-proefpersonen studie benadering of de binnen-proefpersonen aanpak, afhankelijk van uw doelen en middelen. Laten we snel de belangrijkste voordelen van beide methoden samenvatten:
- Als u weinig tijd hebt, wilt u misschien gaan voor een studie tussen proefpersonen.,
- echter, als uw budget beperkt is, kunt u overwegen om voor de binnen-onderwerpen aanpak te kiezen en minder testdeelnemers in te huren om de kosten laag te houden.
- als u de overdracht van kennis tussen verschillende testomstandigheden wilt minimaliseren, is de studie tussen proefpersonen de juiste optie voor u.
- en als u willekeurige ruis zo laag mogelijk wilt houden, raden we u aan om te gaan met een onderzoek binnen proefpersonen.
Leave a Reply