Tworzenie eksperymentów do testowania użyteczności wielu interfejsów użytkownika i prowadzenie badań użytkownika wymaga pewnego planowania. Jedną z rzeczy, o których musisz pomyśleć, Jest to, czy iść na badanie między przedmiotami, czy podjąć podejście do badania wewnątrz przedmiotów.
w tym artykule przyjrzymy się różnicom między obydwoma podejściami w kontekście testowania wielu interfejsów użytkownika pod kątem użyteczności. Podkreślimy również kluczowe zalety obu metod, aby pomóc Ci zdecydować, która z nich jest odpowiednia do twojego badania.,
Przeprowadzanie ilościowych badań użyteczności
podczas testowania użyteczności wielu interfejsów użytkownika w jednym badaniu (z tymi samymi uczestnikami testu), musisz znaleźć sposób przypisania uczestników testu do różnych warunków, dla których testujesz.
można to zrobić na dwa sposoby:
- międzyosobnicze badanie eksperyment: projekt badania polega na przypisaniu różnych interfejsów użytkownika do różnych uczestników badania. W ten sposób każdy uczestnik testu współdziała z jednym interfejsem użytkownika.,
- badanie wewnątrz-badanych eksperyment: ten projekt badania obejmuje wystawienie każdego uczestnika testu na wszystkie interfejsy użytkownika, które testujesz. W ten sposób każdy uczestnik testu przetestuje wszystkie warunki.
na przykład, porównując interfejsy dwóch witryn e-commerce X i Y, aby zobaczyć, jak łatwo użytkownicy mogą korzystać z filtrów i dodawać produkty do koszyka, możesz to zrobić na dwa sposoby:
- między-przedmiotami badanie eksperyment: każdemu Uczestnikowi testu przypisujesz inną stronę internetową., Następnie wykonają zadanie (używają filtrów i dodają produkty do swojej witryny) tylko w witrynie, do której są przypisani.
- badanie wewnątrz przedmiotów eksperyment: każdy uczestnik testu jest poinstruowany, aby wykonać zadanie na obu stronach internetowych X i Y.
Tak więc, gdy twoim celem jest przetestowanie użyteczności wielu warunków (na przykład wielu interfejsów użytkownika) w jednym badaniu, musisz zdecydować, czy podejmiesz podejście między przedmiotami lub podejście wewnątrz przedmiotów do swoich badań.,
projektowanie eksperymentalne w badaniach ilościowych
w kontekście testów użyteczności podstawowym celem badań ilościowych może być porównanie:
- różnych iteracji tego samego interfejsu użytkownika.
- jedna strona na stronie konkurenta.
- jak użytkownicy o różnym poziomie wiedzy wchodzą w interakcję z interfejsem.
ilościowe badania użyteczności zazwyczaj obejmują zmienne niezależne i zmienne zależne., Zmienne niezależne to te, którymi badacze (w tym przypadku ty) manipulują, podczas gdy zmienne zależne to te, które są mierzone w stosunku do zmieniających się zmiennych niezależnych.
idąc za naszym przykładem, dwa różne witryny e-commerce x I Y byłyby niezależnymi zmiennymi, a czas potrzebny użytkownikowi na ukończenie zadania (efektywność użytkowania) lub łatwość wykonania zadania (łatwość uczenia się) byłyby zmiennymi zależnymi.,
w tym przypadku celem badania użyteczności może być ustalenie, czy zmienne zależne zmieniają się lub pozostają takie same, gdy manipulujemy zmiennymi niezależnymi. Oznacza to, że łatwiej (lub szybciej) dla uczestnika testu wykonać zadanie na stronie Y niż na stronie X lub nie. Jeśli tak, doszlibyśmy do wniosku, że strona Y jest lepsza niż strona X.
częścią eksperymentalnego projektu ilościowego badania użyteczności jest decyzja, czy badanie powinno być między osobami, czy wewnątrz osób.
Between-Subjects vs. Within-Subjects: który projekt eksperymentu jest lepszy?,
oba podejścia mają swoje kluczowe zalety. Projekt eksperymentu, który zdecydujesz się zastosować do badania użyteczności, może zależeć od wielu czynników, w tym od zmiennych niezależnych, uczestników testu i warunków, na jakie testujesz.
tutaj przedstawimy zalety zarówno studiów między przedmiotami, jak i studiów wewnątrz przedmiotów, aby pomóc ci w podjęciu świadomej decyzji.,
zalety studiów między przedmiotami
oto, o czym musisz pamiętać, jeśli zdecydujesz się na podejście między przedmiotami w projekcie eksperymentu:
nie ma Transferu Wiedzy
rozważmy scenariusz: uczestnicy testów, którzy wykonują zadania na stronie e-commerce x, uzyskają pewien poziom wiedzy na temat stron e-commerce i zadań, które są im przypisane, zanim zaczną testować użyteczność strony Y.,
na przykład, będą rozwijać lepsze zrozumienie, jak korzystać z filtrów produktów, czy oczekiwać odświeżania strony lub witryny opartej na Ajaxie lub gdzie ikona koszyka zakupów zostanie prawdopodobnie umieszczona po zakończeniu scenariuszy zadań na stronie X.
tak więc, nawet jeśli strona Y jest zupełnie inna niż strona x, uczestnik testu nadal przechodzi do testu uzbrojony w wiedzę (i doświadczenie), których nie mieli, gdy testowali użyteczność strony X.,
w przypadku badań między przedmiotami nie ma szans na problem transferu wiedzy, ponieważ każdemu Uczestnikowi testu przypisany jest inny interfejs użytkownika do testu.
sesje są krótsze
w porównaniu do badań wewnątrzosobniczych, badania międzyosobnicze mają krótsze sesje testowe. Uczestnicy testu, którym przypisana jest jedna strona internetowa, będą mogli ukończyć test użyteczności szybciej niż ci, którzy muszą przetestować dwie (lub więcej) strony internetowe, dzięki czemu podejście między studiami jest idealne do zdalnych testów użyteczności.,
sesje są łatwiejsze do skonfigurowania
W przypadku badań wewnątrzosobniczych należy randomizować kolejność testowania zmiennych niezależnych, aby zminimalizować ryzyko wpływu kolejności na badanie użyteczności. Oznacza to, że każdy uczestnik testu nie powinien najpierw testować strony internetowej X, a następnie strony internetowej Y. połowa uczestników testu powinna zamiast tego najpierw przetestować stronę internetową Y, a następnie stronę internetową X.,
taka struktura może wydawać się prosta, gdy testujesz dwa interfejsy użytkownika, ale w miarę zwiększania liczby niezależnych zmiennych losowa kolejność testowania zmiennych niezależnych staje się coraz trudniejsza.
jednak w przypadku badań między przedmiotami nie musisz się martwić o randomizację zleceń testów, ponieważ każdy uczestnik testu jest odpowiedzialny za testowanie użyteczności pojedynczego interfejsu użytkownika.,
zalety badań wewnątrz przedmiotów
Jeśli jednak zdecydujesz się na podejście wewnątrz przedmiotów w projekcie eksperymentu, są dwie zalety, o których powinieneś wiedzieć:
potrzebujesz mniej uczestników testu
aby uzyskać cenne wgląd z badania użyteczności, potrzebujesz co najmniej 30 punktów danych. W porównaniu do badania międzyosobniczego, badanie wewnątrzosobnicze wymaga mniejszej liczby uczestników testu, aby uzyskać taką samą liczbę punktów danych. Dlaczego? Ponieważ jednemu Uczestnikowi testu przypisanych jest wiele interfejsów użytkownika do testu.,
idąc za naszym przykładem, gdybyśmy mieli przeprowadzić badanie wewnątrz przedmiotów z 15 uczestnikami testu, moglibyśmy zebrać łącznie 30 punktów danych. Z drugiej strony, dzięki badaniu między obiektami, zdołalibyśmy zebrać tylko 15 punktów danych, które nie są wystarczające, aby wykryć różnicę między użytecznością obu stron.
warto również zauważyć, że im więcej uczestników testu rekrutujesz, tym więcej będzie cię to kosztować. Tak więc studia wewnątrz przedmiotu są również bardziej opłacalne niż studia między przedmiotami.,
będziesz w stanie zminimalizować przypadkowy szum
rekrutując uczestników testów do badań użyteczności, są pewne czynniki, nad którymi masz kontrolę, a inne, nad którymi praktycznie nie masz kontroli.
na przykład możesz rekrutować uczestników testów, którzy nie są w określonym przedziale wiekowym lub mają określony poziom wiedzy na ten temat. Jednak nie będziesz w stanie kontrolować czynników takich jak nastrój uczestnika testu lub poziom stresu.,
zaletą badania wewnątrzosobowego jest to, że każdy uczestnik testu współdziała z każdą niezależną zmienną. Idąc za naszym przykładem, oznacza to, że każdy uczestnik testu ukończy zadanie przypisane do niego na obu stronach internetowych X i Y.
jednak, jeśli miałbyś przejść do badania między przedmiotami, twój test użyteczności przebiegałby w następujący sposób: uczestnik testu, który jest zestresowany przed testem, będzie wchodził w interakcję tylko z witryną X, a uczestnik testu, który nie jest zestresowany, będzie wchodził tylko w interakcję z witryną Y., Wyniki testu usability study będą prawdopodobnie miały znaczną wariancję i będą bardziej podatne na przypadkowe szumy.
w ten sposób łatwiej jest zminimalizować przypadkowy hałas w przypadku badań wewnątrz przedmiotów niż w przypadku badań między przedmiotami.
wnioski
możesz przeprowadzić badania użyteczności, korzystając z podejścia między-przedmiotowego lub podejścia wewnątrz-przedmiotowego, w zależności od twoich celów i zasobów. Szybko podsumujmy kluczowe zalety obu metod:
- Jeśli masz mało czasu, możesz chcieć przeprowadzić badanie między przedmiotami.,
- jednak, jeśli twój budżet jest ograniczony, możesz rozważyć zastosowanie podejścia wewnątrz przedmiotów i zatrudnić mniej uczestników testu, aby utrzymać niskie koszty.
- Jeśli chcesz zminimalizować transfer wiedzy w różnych warunkach testowania, badanie między przedmiotami będzie dla Ciebie odpowiednią opcją.
- i jeśli chcesz utrzymać przypadkowy hałas na jak najniższym poziomie, zalecamy przeprowadzenie badania wewnątrz przedmiotów.
Leave a Reply