89/
UMUX
Vyhodnoťte použitelnost systému.
Potřebujete rychle zjistit, zdali byla vaše webová stránka nebo aplikace pro uživatele použitelná? Vyzkoušejte metodu UMUX – krátký normalizovaný dotazník, který vychází ze slavného System Usability Scale (SUS).
Potřebujete
Čas: 20 minut na respondenta
Lidé: 1 výzkumník, 30 respodentek a více
Nástroje: UMUX dotazník
Postup
- Připravte si UMUX dotazník v online nebo vytištěné variantě. Obsahuje čtyři otázky (dvě kladné, dvě záporné) se sedmistupňovou škálou, která vyjadřuje míru souhlasu – od rozhodně nesouhlasím (1) po rozhodně souhlasím (7):
- Možnosti (systému) splňovaly mé požadavky.
- Používání (systému) mě frustrovalo.
- (Systém) bylo snadné používat.
- Dostat se k cíli zabralo hodně času.
- Nechejte respondenty, ať si vyzkouší váš systém.
- Požádejte respondenty o vyplnění dotazníku.
- UMUX použijte samostatně, nebo jako doplňující metodu k jinému uživatelskému testování.
- Odpovědi vyhodnoťte:
- u kladných otázek odečtěte od hodnoty odpovědi číslo 1, tedy [skóre – 1],
- u záporných odečtěte hodnotu odpovědi od čísla 7, tedy [7 – skóre],
- součet všech hodnot vydělte 24 (nejvyšší možné skóre) a tento podíl vynásobte stovkou,
- UMUX skóre daného systému pak získáte zprůměrováním hodnot všech respondentů.
- Vyhodnocování použitelnosti systému se v případě UMUX neřídí oficiálně stanovenými číselnými limity (jako tomu je u SUS).
- Při evaluaci se řiďte průměrným skóre všech respondentů, systém testujte průběžně a sledujte, jestli se jeho použitelnost zlepšuje (průměr roste), zhoršuje (průměr klesá) nebo nemění (průměr stagnuje).
Tipy
UMUX vychází ze System Usability Scale (SUS) s 10 položkami. Byť je SUS hojně používán, bylo zjištěno, že k otestování použitelnosti bohatě stačí 4 položky. UMUX-Lite pak pracuje dokonce pouze s dvěma položkami.
Ačkoliv vám metoda vrátí konkrétní hodnotu, myslete na to, že je dotazník stále subjektivní. Buďte při testování konzistentní – zvolte si jednu cílovou skupinu a se všemi testujte stejnou funkci.
Hodnotit můžete různé systémy, produkty, služby, ale i hardware. Testovat můžete také prototyp, ale musí být ve fázi vývoje, kdy s ním již lze interagovat.
Příklady a inspirace
Stanislav Škop ve své diplomové práci zkoumal, jak uživatelské skupiny s omezenou schopností pohybu a orientace vnímají hodnotu map přístupnosti města Brna. Užitečnost mapové aplikace měřil pomocí UMUX-Lite a celkovou použitelnost podle UMUX. Před vyplňováním dotazníků zjišťoval rozhovorem informační potřeby uživatelů a hned na to testoval, jak je uživatelé dokážou naplnit přímo v mapové aplikaci.
Tai-Liang Chen, I-An Su a Jenq-Kuen Lee otestovali pomocí UMUX použitelnost nástroje na vizuální programování, které oproti klasickému psaní kód generuje skládáním jednotlivých grafických bloků. Zatímco jedna skupina testerů vyplňovala UMUX dotazník, druhá skupina posuzovala praktičnost navrhovaného řešení a odpovídala na tři volněji položené otázky.
UMUX posloužil také k evaluaci použitelnosti e-wallet aplikace (neboli mobilní peněženka). Uživatelské hodnocení výzkumný tým ještě rozšířil o expertní evaluaci ve formě heuristické analýzy, která přinesla detailnější doporučení, jak design aplikace vylepšit.
Více informací
- Borsci, S., Federici, S., Barcci, S., & Gnaldi, M. (2015). Assessing User Satisfaction in the Era of User Experience: Comparison of the SUS, UMUX and UMUX - LITE as a Function of Product Experience. International Journal of Human-Computer Interaction 31(8), 484–495. https://www.researchgate.net/publication/279179170_Assessing_User
_Satisfaction_in_the_Era_of_User_Experience_Comparison_of_the_
SUS_UMUX_and_UMUX_-_LITE_as_a_Function_of_Product_Experience - Finstad, C. (2010). The Usability Metric for User Experience. Interacting with Computers 22(5), 323–327. https://www.researchgate.net/publication/220054775_The_Usability_Metric_for_User_Experience
- Lewis, J. R., Utesch, B. R., & Maher, D. E. (2013). UMUX-LITE – When There’s No Time for the SUS. CHI 2013: Changing Perspectives, Paris, France. https://testscience.org/wp-content/uploads/sites/10/2019/11/UMUX-Lite_Article.pdf
- Saurro, J. (2017). Measuring Usability: From the SUS to the UMUX-Lite. MeasuringU. https://measuringu.com/umux-lite/