Nesmotra
na to, 4to na Zapade uzabiliti-testirovanie davno igraet vajnuu rol' v
ispitanii PO, v Rossii ono nikak ne voydet v obixod. Mnogie daje ne
znaut, 4to eto takoe. Tem ne menee, danniy instrument testirovania ne
menee vajen, 4em drugie. Veroatno, v skorom vremeni i u nas na rinke
uzabiliti-uslug vozniknet jestkaa konkurencia.
Vladelec i direktor britanskoy uzabiliti-kompanii Seren Terri Xit, posetiv6iy Moskvu v sentabre etogo goda, nazval rossiyskiy rinok uzabiliti exciting area (zaman4ivoy oblast'u). Prosto
v protivopolojnost' rodnomu, britanskomu rinku, gde slovo "uzabiliti"
davno nikogo ne manit. Kompaniy i 4astnix specialistov, predlagau6ix
uzabiliti-uslugi (a vernee uzabiliti-issledovania, ved' imenno v takom
kontekste na Zapade ispol'zuut eto slovo), na Zapade o4en' i o4en'
mnogo. Konkurencia na etom rinke visoka, a uzabiliti-testirovanie kak
4ast' proizvodstvennogo processa razrabotki PO, veb-saytov, servisov,
t.e. prakti4eski lubix produktov stalo normoy. V Rossii je eto
virajenie tak i ne vo6lo v obixod. Krupney6ie igroki v dannoy oblasti —
prejde vsego dizaynerskie kompanii ili proektnie buro, dla kotorix
testirovanie avlaetsa odnim iz ravnopravnix napravleniem deatel'nosti.
A spros na uzabiliti-testirovanie gorazdo nije, 4em, skajem, na
fokus-gruppi, kotorie provodatsa regularno i povsemestno v radu
meropriatiy pri podgotovke vixoda produkta na rinok. Poprobuem
razobrat'sa, po4emu. 4to takoe uzabiliti-testirovanie?
Sobstvenno govora, eto li6' odin iz sposobov viavit' dostoinstva i
nedostatki produkta (ili uslugi) i opredelit' otno6enie pol'zovateley k
nemu. Uzabiliti-testirovanie stoit v odnom radu s takimi ponatnimi i
privi4nimi sposobami issledovaniy kak anketirovanie i telefonnie
oprosi, fokus-gruppi, interv'u.
V etom spiske ono naxoditsa na po4etnom 4etvertom meste posle trex
pere4islennix instrumentov, pri4em srazu po neskol'kim parametram.
Vo-pervix, ono trudoemkoe, vo-vtorix, redkoe (v Rossii, po krayney
mere). Krome togo, ono obespe4ivaet ob&ektivnost' i dostovernost', ved'
inogda vajno ne to, 4to potrebiteli dumaut o produkte, a kak oni im
deystvitel'no pol'zuutsa.
Kone4no, drugie metodi izu4enia povedenia ludey (potrebiteley, v dannom
kontekste) ne menee vajni. Kajdiy iz nix imeet opredelennie
preimu6estva i svou oblast' primenenia. Tak, naprimer, anketirovanie
prekrasno rabotaet, kogda nujno sobrat' statisti4eskie dannie.
Fokus-gruppi bescenni dla izu4enia togo, kak produkt ili usluga budut
vosprinati na rinke. Interv'uirovanie je pozvolaet uznat' mnenie
otdel'nix ludey. Odnako vse eti metodi imeut odin ob6iy nedostatok: oni
napravleni na izu4enie vzglada ludey, t.e. ix predstavleniy o tom, kak
ustroen mir i kak on doljen bit' ustroen. No ix to4ka zrenia ne daet
nam ob&ektivnoy kartini real'nosti, v osobennosti, esli produkt
skol'ko-nibud' slojen v primenenii. Naprimer, esli produkt – programma.
Osobennosti slojnix produktov
Pol'zovateli vrema ot vremeni sover6aut o6ibki. Eto ploxo, poskol'ku
oni tratat vrema na ispravlenie, krome togo, 4ast' o6ibok oni zame4aut
sli6kom pozdno. Odnako priznavat'sa v svoix oplo6nostax nepriatno,
poetomu na interv'u ob o6ibkax umal4ivaetsa (daje esli oni obuslovleni
samim ustroystvom programmi).
Ludi mogut ne umet' pol'zovat'sa 4ast'u funkciy i daje ne znat' ob ix su6estvovanii. Opat' promol4at.
Oni, kak pravilo, ne mogut ocenit' skorost' ispol'zovania
produkta adekvatno, poskol'ku im ne s 4em ee sravnivat'. Nekto mojet s
uverennost'u utverjdat', 4to on rabotaet s programmoy o4en' bistro,
xota v real'nosti est' bol'6oy rezerv dla uskorenia. Samo po sebe eto
normal'no, no ostavlaet lazeyku dla konkurentov.
Takim obrazom, mnenie potrebiteley slojnix produktov za4astuu poprostu
nevajno. Vajnee opoznat' problemi, s kotorimi ludi stalkivautsa pri
ispol'zovanii programmi – v tom 4isle potomu, 4to eti slojnosti
formiruut mnenie o ney. Edinstvenniy nadejno rabotau6iy sposob eto
sdelat' – nabludat' za real'nimi pol'zovatelami, re6au6imi real'nie
zada4i, ispol'zua real'niy soft (ili ego prototip).Nedostatki uzabiliti-testirovania
4asto respondentam (kak pravilo, deystvitel'nim ili potencial'nim
pol'zovatelam) pri uzabiliti-testirovanii predlagaetsa vipolnit'
neskol'ko realisti4nix zadaniy. Vse vzaimodeystvie s produktom pri etom
protokoliruetsa dla posleduu6ego analiza. K sojaleniu, opoznat' problemi interfeysa gorazdo pro6e, 4em uda4nie
re6enia. V slu4ae problem respondenti libo delaut zametnie o6ibki, libo
temp ix raboti vnezapno zamedlaetsa. V slu4ae je uspe6nogo
vzaimodeystvia 4elovek prosto vipolnaet zada4u. Raznica mejdu
"normal'no" i "xoro6o" trudnoulovima.
Dannaa osobennost' uzabiliti-testirovania — napravlennost' na viavlenie
problem — avlaetsa odnim iz faktorov, sderjivau6ix rasprostranenie
dannoy uslugi. Deystvitel'no, komu zaxo4etsa vislu6ivat' massu
negativnix otzivov o svoem produkte, v kotoriy vlojeno stol'ko usiliy?
Etot nedostatok usugublaetsa i drugimi problemami. Uzabiliti-testirovanie izu4aet uje deystvuu6iy produkt, kotoriy v processe razvitia
preterpit zna4itel'nie izmenenia. Takim obrazom, rezul'tati
issledovania mogut o4en' bistro poterat' svou aktual'nost'. Net drugogo
sposoba verificirovat' rekomendacii, sformirovannie v rezul'tate
uzabiliti-testirovania, krome kak realizovat' ix v produkte i zatem
provesti testirovanie snova. 4asto v rezul'tate takogo eksperimenta mi
polu4aem dannie o nedostatkax novoy sistemi. V etoy situacii mogut
prozvu4at' predlojenia vernut'sa k isxodnomu interfeysu (vozmojno, s
nekotorimi variaciami). Raznie je varianti re6enia toy ili inoy zada4i
izredka mogut okazat'sa zerkal'nimi: re6aa odni problemi, mojno sozdat'
drugie, dla re6enia kotorix, v svou o4ered', pridetsa vernut'sa k
na4al'nomu interfeysu. Ne tak vse grustno
Tem ne menee, su6estvuut sposobi polu4it' bolee ob&ektivniy vzglad na
interfeys, a takje videlit' ego sil'nie storoni. Dla etogo, prejde
vsego, slujat koli4estvennie metriki, kotorie mogut bit' sobrani v xode
uzabiliti-testirovania. Naprimer, o6ibki pol'zovatela teraut svoe
zna4enie i kriti4nost', esli on v sostoanii bistro ix ispravit' i
dobit'sa postavlennoy celi. Bolee skrupulezniy detal'niy analiz vremeni
vipolnenia zadaniy pri sravnenii dvux vozmojnix interfeysnix re6eniy v
nekotorix slu4aax pozvolaet sdelat' vivod, 4to interfeys, produciruu6iy
bol'6e o6ibok, poroy mojet bit' effektivnee drugogo, gde pol'zovatel'
o6ibok ne dopuskaet, no dolgo dumaet nad tem, kakoe deystvie
predprinat'.
4tobi realizovat' etu zada4u, nado t6atel'no splanirovat' eksperiment,
opredelit' voprosi, na kotorie mi i6em otveti, i 4asti interfeysa,
kotorie neobxodimo proverit'. Kajdiy takoy vopros doljen otobrajat'
real'noe deystvie ili zada4u pol'zovatela v interfeyse, po kotorim
mojno snat' koli4estvennie pokazateli. Pri etom v eksperiment mojno
zalojit' proverku kak slabix storon interfeysa, tak i tex momentov,
kotorie kajutsa uda4nimi. Polu4ennie je koli4estvennie pokazateli uje
ne avlautsa sub&ektivnim mneniem o produkte, a deystvitel'no pozvolaut
razobrat'sa, 4to xoro6o rabotaet, a 4to trebuet izmeneniy.Cel' – rezul'tativnost'
Pri takom t6atel'nom planirovanii polu4it' rezul'tati mojno bistro i
legko, osobenno pri ispol'zovanii special'nix programm dla provedenia
uzabiliti-testirovania, naprimer programmi Morae 3.1, kotoroy 4asto
ispol'zuutsa dla zapisi xoda issledovania i analiza rezul'tatov. Takoy
produkt privnosit v eksperiment nau4nuu i formatizirovannuu, a zna4it
bistruu metodiku analiza rezul'tatov.
Splanirovanniy scenariy fiksiruetsa v programme, i zapis' testov
vedetsa v ukazannix ramkax s fiksaciey vsex voznikau6ix problem i
potra4ennogo vremeni. Blagodara takomu podxodu neposredstvenno posle
okon4ania eksperimenta mojno uvidet' edinuu kartinu po polu4ennim
rezul'tatam v oblasti o6ibok i zatra4ennogo vremeni na kajduu
opredelennuu dla proverki zada4u, a takje v oblasti kategoriy
pol'zovateley produkta (podgotovlennix/nepodgotovlennix pol'zovateley,
raznix vozrastnix grupp i t.d.). Pri etom net neobxodimosti
prosmatrivat' vse protokoli, a mojno ograni4it'sa tol'ko problemnimi
momentami.
Itak, vpolne vozmojno, 4to postepennoe osoznanie vozmojnostey
uzabiliti-testirovania privedet k 6irokomu rasprostraneniu ego v
Rossii. No osnovnim kriteriem uspexa dla etogo processa doljna stat'
skorost' i ob&ektivnost' polu4enia rezul'tatov i vnedrenia v produkt.
PO dla uzabiliti-testirovania Morae 3.1
Morae 3.1 — special'no razrabotannoe dla uzabiliti-testirovania programmnoe obespe4enie
kompanii TechSmith. V sostav postavki vxodit tri modula. Recorder
prednazna4en dla zapisi videoprotokolov — video ekrana respondenta i
ego lica, a takje zvukovogo treka. S pomo6'u modula Observer mojno
nabludat' za xodom testirovania i stavit' markeri, opredelau6ie to ili
inoe sobitie v xode testirovania: na4alo i konec otdel'nogo zadania,
o6ibki respondenta, interesnie viskazivania i drugie nabludenia. V
module Manager osu6estvlaetsa analiz sdelannix videoprotokolov. Odno iz
osnovnix preimu6estv Morae sostoit v vozmojnosti prostavlenia markerov v xode testirovania. Eta vozmojnost' pozvolaet zna4itel'no sokratit' vrema analiza rezul'tatov.
Krome togo, polu4ennie dannie mojno sortirovat' po razli4nim tipam
markerov i sobitiy (po o6ibkam, klikam mi6i, perexodam respondentov v
interfeyse i d.t).
Uveli4it'
V Morae 3.1 realizovani razli4nie funkcii poiska po videoprotokolu
Morae avtomati4eski ob&edinaet pokazateli po vsem ili vibrannim
respondentam i zadaniam i predlagaet kak gotovie varianti grafikov, tak
i vozmojnost' eksportirovat' tablicu c dannimi dla posleduu6ego
analiza, naprimer, v Excel.
Morae avtomati4eski ob&edinaet pokazateli po vsem ili vibrannim respondentam i zadaniam
