Vyhodnotenie 1. prototypu

Ciele

  1. Pripraviť podklady a prostredie pre používateľské testovanie.
  2. Vykonať používateľské testovanie vášho individuálneho zadania s aspoň 3 testovacími subjektmi. Zaznamenať celé testovanie a vyhodnotiť výsledky.

Úvod

Akýkoľvek prototyp ostane vždy iba prototypom, pokiaľ sa nedostane do rúk samotným používateľom a žiadny prototyp sa nedá zlepšiť bez ich spätnej väzby. Tú vieme získať viacerými spôsobmi, okrem iného aj prostredníctvom používateľského testovania, kde priamo vidíme, ako používateľ naše používateľské rozhranie používa.

V rámci dnešného cvičenia pripravíme protokol pre záznam používateľského testovania, prostredie pre vykonanie testu a vykonáme používateľský test nášho prvého prototypu s reálnymi budúcimi používateľmi.

Postup

Krok 1

Pripravte si podklady a prostredie pre vykonanie používateľského testu. Podklady zahŕňajú hlavne scenár, podľa ktorého budú vaši účastníci postupovať a protokol pre záznam výsledkov testu.

Poznámka

Inšpirujte sa scenárom vytvoreným na minulých cvičeniach. Podstatné je však nedávať účastníkom detailný postup, ale vysvetliť im skôr ciele, ktoré majú dosiahnuť. Môžete pripraviť aj viacero scenárov, podľa potreby vášho používateľského rozhrania.

Poznámka

Scenár by mal byť primerane stručný, aby používatelia nemali všetky detaily pre jeho vykonanie (testujete objaviteľnosť a naučiteľnosť) ale zároveň nie príliš všeobecný, aby bolo jasné, o čo v danej úlohe ide. Pre vlastné potreby by ste mali mať pripravený zoznam očakávaných výsledkov krokov scenára.

Úloha 1.2

V rámci prípravy podkladov pre účastníkov vytvorte jednoduchý dotazník na Google Forms, ktorý má slúžiť na záznam subjektívneho vyhodnotenia. Za účelom štandardizovania merania využite štandardnú škálu pre hodnotenie SUS.

Poznámka

V rámci dotazníka využite štandardné otázky SUS metriky podľa vzoru. Ak overujete aj dostupnosť alebo iné aspekty systému, potom je možné pridať do dotazníka doplňujúce otázky, ktoré sa týkajú tohto overenia.

Upozornenie

Pozor, pokiaľ dotazník nebude obsahovať štandardné otázky SUS, nebudeme ho akceptovať. Jediný akceptovateľný dotazník je taký, ktorý využíva inú štandardizovanú techniku, no v tomto prípade musíte poskytnúť odkaz na zdroj k tejto štandardizovanej technike (v úvode dotazníka resp. vo výsledkovej tabuľke).

V prípadne modifikácie pôvodných SUS otázok už nie je možné vypočítať hodnotenie podľa štandardného vzorca SUS.

Plný počet bodov za používateľské testovanie je možné získať len vtedy, ak bude protokol obsahovať štandardnú metriku a výpočet SUS hodnotenia systému. Výpočet SUS vykonajte vo výsledkovej tabuľke dotazníka.

Úloha 1.3

Pripravte prostredie pre vykonanie používateľského testu.

Poznámka

V rámci testovania je povinné zaznamenávať výsledky do protokolu a tiež prostredníctvom kamery. Kamerový záznam bude slúžiť pre vaše potreby, no v prípade nedôveryhodnosti výsledkov testu môže byť z našej strany vyžiadaný náhľad videí. Kamerový záznam môžete urobiť akýmkoľvek vám dostupným spôsobm: kamerou na notebooku, webkamerou, fotoaparátom, mobilným telefónom a pod.

Poznámka

Môžete využiť aj ďalšie formy záznamu: pero a papier, eyetracker, mindwave, program pre záznam udalostí v rozhraní, zvukový záznam, kombinácia viacerých kamerových záznamov, voľne dostupné služby pre záznam používateľských testov a pod.

Poznámka

Pripravte si zariadenie a prostredie, na ktorom bude účastník používať váš prototyp. Snažte sa o čo najvernejšie napodobnenie prirodzeného cieľového použitia. Ak ide o mobilné dotykové rozhranie, potom je najvhodnejšie využiť práve mobilné zariadenie. Ak má byť používané na počítači alebo notebooku, potom pripravte prototyp tak, aby používateľa zbytočne nerušili okolité aplikácie alebo záložky či notifikácie. Ak ide o responzívnu aplikáciu, je vhodné testovať oba typy zariadení.

Krok 2

Úloha 2.1

Vykonajte používateľské testovanie vášho individuálneho zadania s aspoň 3 testovacími subjektmi. Prostredie účastníka spolu so samotným účastníkom si pri každom testovaní odfoťťe a fotografiu vložte na zodpovedajúce miesto v protokole. Z celého testovania vytvorte kamerový záznam. Výsledky zaznamenajte do pripravenej tabuľky protokolu.

Poznámka

Účastníci testu nesmú byť vaši spolužiaci, no môžete využiť spolužiakov z nižších ročníkov. Najvhodnejšie je nájsť používateľov priamo z domény používateľského rozhrania či doménových expertov. Mali by zodpovedať vašej persone. Pre overenie je potrebné v protokole zadať meno a priezvisko. Tieto údaje nebudú nikde zverejňované a v prípade Vašho použitia vo finálnej bakalárskej práci by mali byť anonymizované.

Poznámka

Pre kontrolu použiteľnosti expertom môžete využiť aj spolužiakov z vyšších ročníkov, ktorí absolvovali tento predmet a je ich teda možné považovať za odborníkov na použiteľnosť, čím by mali vedieť spraviť pre Vás guidelines review alebo usability expert review. Táto aktivita je však nad rámec základného zadania, teda spolužiaci z vyšších ročníkov sa nerátaju ako účastníci štandardného vyžadovaného používateľského testu.

Úloha 2.2

Na konci testu urobte s účastníkom krátke inteview zamerané na retrospektívu z testovania. Položené otázky aj odpovede zaznamenajte do protokolu.

Úloha 2.3

Po skončení interview dajte každému z účastníkov vyplniť SUS dotazník a odkaz na výsledky pridajte do protokolu.

Krok 3

Úloha 3.1

Odovzdajte zadanie do systému podľa požiadaviek k zadaniu C.

Upozornenie

Pri odovzdaní si radšej dvakrát skontrolujte, či máte vhodne nastavené zdieľanie oboch dokumentov (dotazníka i jeho výsledkov). Oba dokumenty zdieľajte prostredníctvom odkazu, nie pridaním vášho cvičiaceho do zoznamu zdieľaných používateľov. Dokumenty, ktoré nebudeme schopní otvoriť, budú hodnotené počtom bodov 0.