Interval.cz
Nßvrh hodnocenφ metod testovßnφ pou₧itelnosti

┌Φelem tohoto Φlßnku je vysv∞tlenφ äPractical Review Systemô (PRS). PRS je nßΦrtem dvaceti osmi charakteristik, kterΘ mohou b²t vyu₧ity k pochopenφ jakΘkoli metody pou₧itelnosti, co₧ by m∞lo vÜem umo₧nit rozhodnout se mezi nimi. SystΘm °eÜφ mno₧stvφ problΘm∙, spojen²ch s chßpßnφm a vysv∞tlovßnφm metod pou₧itelnosti. (P°inßÜφme vßm p°eklad Φlßnku A Proposal for Evaluating Usability Testing Methods: The Practical Review System (PRS) ze serveru Webword.com.)

Pracuji v oblasti pou₧itelnosti nejmΘn∞ p∞t let, p°esto tomu sotva rozumφm. Pou₧itelnost je tak zmatenß tolika zp∙soby, ₧e si opravdu nemyslφm, ₧e by jφ n∞kdo mohl rozum∞t. Äßdnφ guru nejsou, p°ßtelΘ. Jist∞, existuje n∞kolik talentovan²ch lidφ, p°esto si nemyslφm, ₧e n∞kdo pou₧itelnosti opravdu rozumφ. Je to änepolapitelnß rybaô v²robnφho procesu. Na rovinu, porozum∞t pou₧itelnosti nenφ jednoduchΘ. A jestli₧e je tak t∞₧kΘ jφ porozum∞t, je samoz°ejm∞ stejn∞ t∞₧kΘ ji vysv∞tlit ostatnφm.

Mn∞ osobn∞ mΘn∞ zajφmß mΘ vlastnφ pochopenφ pou₧itelnosti ne₧ pochopenφ ostatnφch. Chci, aby jφ porozum∞li designΘ°i a v²vojß°i. Chci, aby pou₧itelnosti rozum∞li äin₧en²°i sv∞taô a pou₧φvali ji tam, kde to mß smysl, u ko°ene. Pokud vlo₧φme pou₧itelnost do rukou lidφ, kte°φ vytvß°ejφ v²robky a poskytujφ slu₧by, prosp∞jeme vÜem. SpecialistΘ na pou₧itelnost se takΘ budou moci zam∞°it na problΘmy vyÜÜφ ·rovn∞. SpφÜe ne₧ aby se zajφmali o malΘ problΘmy, mohou za·toΦit na ty podstatnΘ.

OpiΦφ test

Je-li pou₧itelnost obtφ₧nΘ pochopit a jeÜt∞ obtφ₧n∞jÜφ vysv∞tlit, kde tedy zaΦφt? Odpov∞∩ mi je naprosto jasnß. Je zapot°ebφ poskytnout lidem mimo °φÜi pou₧itelnosti nßstroj k objektivnφmu zhodnocenφ r∙zn²ch metod testovßnφ pou₧itelnosti. Pokud dßme designΘr∙m a v²vojß°∙m nßstroj pro snadnΘ rozhodovßnφ mezi r∙zn²mi metodami pou₧itelnosti, pou₧itelnost bude vΦlen∞na p°φmo do procesu v²voje.

ProΦ by se pou₧itelnost stala souΦßstφ produktu, pokud by bylo snazÜφ jφ rozum∞t? JednoduÜe. Je snadnΘ pochopit p°φnos pou₧itelnosti, ale pou₧itelnost sama je t∞₧ko pochopitelnß, vysv∞tlitelnß a aplikovatelnß.

Jak pou₧itelnost dostateΦn∞ zjednoduÜφme, aby byla pochopitelnß a pou₧itelnß i pro opici? Vytvo°φme nßstroj pro hodnocenφ r∙zn²ch metod pou₧itelnosti. Usnadnφme vzßjemnΘ porovnßvßnφ metod mezi sebou. Dodßme jednoduchΘ Üablony, jednoduchΘ pokyny a jednoduchΘ rozhodovacφ nßstroje.

The Practical Review System

V tΘto Φßsti se budu v∞novat popisu äPractical Review Systemô (PRS). V tomto okam₧iku jeÜt∞ nemßm systΘm zcela dokonΦen a rozhodn∞ nenφ vhodn² k b∞₧nΘmu pou₧itφ. Tento Φlßnek je pouze zßkladem pro PRS a bude pot°eba jeÜt∞ hodn∞ prßce, ne₧ budou dota₧eny vÜechny detaily. P°esto, nßΦrt tohoto nßstroje by nßm vÜem m∞l poskytnout nezbytn² referenΦnφ rßmec.

Nφ₧e jsem vypsal 28 charakteristik, kterΘ mohou b²t pou₧ity k popisu jakΘkoli metody pou₧itelnosti. Zßkladnφ myÜlenkou je zp°φstupnit detaily ka₧dΘ metody pou₧itelnosti tak, aby osoba, neobeznßmenß s pou₧itelnostφ, mohla navzßjem jednotlivΘ metody porovnat a nßsledn∞ zvolit nejlepÜφ z nich vzhledem k omezenφm a pot°ebßm konkrΘtnφho projektu. Na prvnφ pohled to m∙₧e vypadat spφÜe jako zßklad encyklopedie pou₧itelnosti. NicmΘn∞, jak dßle vysv∞tlφm, to nenφ zcela p°esnΘ. Zde jsou charakteristiky:

  1. jmΘno û popis metody
  2. stßdium v²vojovΘho cyklu û kdy je test nejefektivn∞jÜφ/relevantnφ
  3. mno₧stvφ po₧adovan²ch u₧ivatel∙ û poΦet u₧ivatel∙, pot°ebn²ch k zφskßnφ dostateΦn²ch/u₧iteΦn²ch ·daj∙
  4. druh u₧ivatel∙ û novßΦci, experti, sm∞s; aplikace na specifickΘ pohlavφ, rasu, v∞k
  5. po₧adovanß ·rove≥ zkuÜenosti hodnotitele metody û druhy schopnostφ, znalostφ, pot°ebn²ch zkuÜenostφ
  6. po₧adovan² poΦet hodnotitel∙ û poΦet pot°ebn² k zφskßnφ dostateΦn²ch/u₧iteΦn²ch ·daj∙
  7. doporuΦen² poΦet hodnotitel∙ - poΦet pot°ebn² k zφskßnφ dostateΦn²ch/u₧iteΦn²ch ·daj∙
  8. v²hody metody û popis v²hod v prostΘm jazyce; ROI
  9. nev²hody metody û popis nev²hod v prostΘm jazyce; specifickΘ nßklady
  10. ·rove≥ (nebo mno₧stvφ) interakce mezi u₧ivateli a hodnotiteli û vysokß, st°ednφ, nφzkß; pasivnφ/interaktivnφ
  11. metoda(y) zßznamu dat û metody u₧itΘ k zßznamu u₧iteΦn²ch ·daj∙ b∞hem testovßnφ/hodnocenφ
  12. souhrnn² po₧adovan² Φas testovßnφ û po₧adovanΘ roky, m∞sφce, t²dny, dny, hodiny, minuty, sekundy
  13. Φas testovßnφ na u₧ivatele - po₧adovanΘ roky, m∞sφce, t²dny, dny, hodiny, minuty, sekundy
  14. typick² v²stup testu û objektivnφ data, subjektivnφ data; voln² text, Φφseln² zßznam, videozßznam atd.
  15. zp∙sob provßd∞nφ testu û zßkladnφ pokyny k provßd∞nφ textu
  16. p°φbuznΘ testy û odkazy na podobnΘ metody pou₧itelnosti
  17. p°φklad testu û Üablona testu; vzorovß data; vzor finßlnφho v²stupu/hlßÜenφ
  18. po₧adovan² testovacφ materißl û video, laborato°, papφr, zßznamovΘ karty, mikrofony atd.
  19. cena provedenφ testu û vysokß, st°ednφ, nφzkß; odhad b∞₧nΘ ceny provedenφ testu
  20. reference/odkazy na dalÜφ zdroje û knihy, Φlßnky, auto°i, weby atd.
  21. druh systΘmu, na n∞m₧ m∙₧e b²t test provßd∞n û prototypy, aktußlnφ systΘmy, intranety, weby atd.
  22. cφle testovßnφ û popis v²stupu testu v prostΘm jazyce; koneΦnΘ zßv∞ry; ROI
  23. subjektivita Φi objektivita testu û p°edpoklad experimentßtorovy zaujatosti; druh dat generovan²ch testem
  24. obtφ₧nost nauΦenφ se provßd∞nφ testu û vysokß, st°ednφ, nφzkß; po₧adavek na zkuÜenosti s v²zkumem
  25. Φas na obrßtku û schopnost testu poskytovat v²stupy pr∙b∞₧n∞; rozvrhy
  26. zam∞°enφ hodnocenφ û ·zkΘ Φi ÜirokΘ; druh v∞cφ, kterΘ mohou b²t hodnoceny (nap°φklad ätlaΦφtkaô versus äcel² webô)
  27. zam∞°enφ ·kolu û skuteΦnΘ nebo laboratornφ podmφnky; kde m∙₧e b²t provßd∞n
  28. souvisejφcφ statistickΘ metody û ANOVA (ANalysis Of VAriance - anal²za variacφ û zp∙sob, jak se ujistit, ₧e zjiÜt∞n² rozdφl mezi dv∞ma skupinami dat je skuteΦn∞ v²znamn² rozdφl), regresivnφ anal²za, T-test atd.

V²Üe uvedenΘ charakteristiky se mohou p°ekr²vat a n∞kterΘ se dokonce mohou zdßt irelevantnφmi. P°esto si m∙₧ete b²t jisti, ₧e jsem je vybφral peΦliv∞. P°edpoklßdßm, ₧e je bude zapot°ebφ revidovat, jakmile budou do PRS Üablony p°idßny jednotlivΘ metody.

PRS povzbudφ standardizaci pou₧itelnosti

ZaΦal jsem pracovat na n∞kolika metodßch pou₧itelnosti (nap°φklad na heuristickΘ anal²ze) a p°esv∞dΦil se o funkΦnosti PRS. Byl jsem schopen porovnat n∞kolik r∙zn²ch metod, proto₧e jsem pou₧il PRS jako vodφtko.

Pokud jste specialisty na pou₧itelnost, nebo pokud se o pou₧itelnost zajφmßte, m∙₧ete PRS okam₧it∞ aplikovat na svß rozhodnutφ, projekty a nßvrhy. M∞ nepot°ebujete. JednoduÜe se podφvejte na metody, kterΘ jsou vßm dostupnΘ, identifikujte pot°ebnΘ charakteristiky a zaΦn∞te se rozhodovat. Dovoluji si takΘ p°edpoklßdat, ₧e PRS charakteristiky jsou dostateΦn∞ ÜirokΘ a p°esto dostateΦn∞ silnΘ, aby je bylo mo₧no aplikovat v jin²ch oblastech, kde je rozhodovßnφ mezi dv∞ma metodami obtφ₧nΘ (nap°φklad informaΦnφ architektura, psychologick² v²zkum, sociologick² v²zkum a tak dßle).

PRS je olivovou ratolestφ, kterou nap°ahuji k designΘr∙m a v²vojß°∙m v zßjmu specialist∙ na pou₧itelnost. Samoz°ejm∞, v mnoha ohledech jde o subjektivnφ zßle₧itost, ale my vÜichni m∙₧eme PRS vyu₧φt jako rßmec pro dalÜφ rozmluvu o pou₧itelnosti. M∙₧eme jej vyu₧φt, abychom pou₧itelnost uΦinili objektivn∞jÜφ, a to je dobrß v∞c. VÜichni budeme schopni pou₧itelnost lΘpe pochopit a, p°irozen∞, ji takΘ budeme schopni snßze vysv∞tlit.

Fßze druhß a t°etφ

Jak jsem °ekl v²Üe, prvnφ v∞c, kterou musφme ud∞lat, je vytvo°it PRS profily pro vÜechny metody pou₧itelnosti. Tento prvnφ krok pot°ebujete, nebo¥ je to jako kdy₧ p°ipravujete encyklopedii. Ale, jak jsem u₧ zmφnil, za projektem PRS se toho skr²vß mnohem vφce.

A₧ bude dokonΦena prvnφ fßze, b∞hem nφ₧ budou podle charakteristik PRS popsßny vÜechny metody, budeme se muset p°esunout k druhΘ fßzi. Idea druhΘ fßze spoΦφvß ve vytvo°enφ jednoduchΘ matice, kterß umo₧nφ lidem porovnat metody pou₧itelnosti jedin²m pohledem, ve vztahu k charakteristikßm PRS. Dokß₧i si p°edstavit jedno- Φi dvoustrßnkovou matici, pomocφ nφ₧ by se designΘr nebo v²vojß° mohl rychle rozhodnout, kterß metoda(y) je nejvhodn∞jÜφ. V urΦit²ch ohledech by tato matice mohla slou₧it jako Obsah celΘho PRS listu.

Pokud by to nenapl≥ovalo dostateΦn∞ veÜkerΘ ambice, pom²Ülel bych na t°etφ fßzi. B∞hem nφ bychom mohli vzφt PRS data a PRS matici a prom∞nit je v interaktivnφ offline aplikaci, nebo jednoduchou ale mocnou webovou aplikaci. P°edstavte si to. NavÜtφvφte web, odpovφte na n∞kolik otßzek spojen²ch s vaÜφm projektem a potΘ dostanete seznam nejlepÜφch metod pou₧itelnosti, spolu se Üablonami, analytick²mi nßstroji a tak dßle. T°etφ fßze projektu PRS p°inßÜφ pou₧itelnost masßm. To povede ke standardizaci a nßsledn∞ k ÜirokΘmu akceptovßnφ.

Epilog

Rßd bych na projektu PRS spolupracoval se seri≤znφmi zßjemci. NaΦrtl jsem vizi, ale nynφ pot°ebuji pomoc. Pokud jste skuteΦn∞ zaujati a chcete se zaplΘst s tφmto projektem, kontaktujte mne.

╚lßnek "A Proposal for Evaluating Usability Testing Methods: The Practical Review System (PRS)" byl p°elo₧en redakcφ Interval.cz s laskav²m svolenφm autora.



John S. Rhodes (26.5. 2003)

Redakce Interval.cz |  Inzerce na Interval.cz |  Hledßme novΘ autory ISSN 1212-8651 
 ⌐ Zoner software, s.r.o., vÜechna prßva vyhrazena, tento server dodr₧uje prßvnφ p°edpisy o ochran∞ osobnφch ·daj∙.