Zrozumiteľnosť vyžaduje pozorovateľný výsledok
Skóre čitateľnosti dokáže identifikovať krátke slová a vety. Neukazuje, či si osoba všimne stav, rozlišuje medzi dvoma podobnými úlohami alebo po prečítaní podnikne vhodné kroky. Zrozumiteľnosť teda nie je vlastnosť, ktorú možno vypočítať iba zo samotného textu. Prejavuje sa vo význame, ktorý ľudia chápu v konkrétnej situácii.
Výsledkom stránky o zbere objemného odpadu by mohlo byť: Ľudia rozpoznajú, ktoré položky sa zbierajú, rezervujú si správny termín a položky vyložia v povolenom čase. Cieľ ako „Text by mal byť jednoduchý“ na druhej strane zostáva príliš vágny. Nehovorí ani o tom, ktorá správa je dôležitá, ani o tom, ako bude zlepšenie viditeľné.
Meranie teda začína pred revíziou. Redakčný tím a odborníci na danú problematiku spoločne objasňujú, čo by čitatelia mali vedieť, rozhodnúť sa alebo urobiť po prečítaní obsahu. Toto očakávanie je zaznamenané v zrozumiteľnom jazyku. V tomto popise je zahrnutá aj cieľová skupina a situácia používania. Vytvára sa tak zrozumiteľné prepojenie. Umožňuje to neskoršie overenie, či nová verzia skutočne pomáha zamýšľaným spôsobom, namiesto toho, aby len zniela príjemnejšie.
Nie každé tvrdenie je rovnako dôležité.
Text často obsahuje viac informácií, ako sa dá rozumne skontrolovať jednotlivo. Kľúčové sú tvrdenia, ktorých nesprávne pochopenie bráni akcii alebo spôsobuje citeľné nevýhody. V prípade lieku to zahŕňa dávkovanie, načasovanie a dôležité varovné signály. História lieku môže byť zaujímavá, ale nie je taká kritická pre bezpečné používanie.
Právne alebo finančné dôsledky tiež zvyšujú dôležitosť. Ak niekto zle pochopí termín, môže stratiť nárok. Ak je nejasný iba názov zodpovedného oddelenia, škoda je zvyčajne menej závažná. Tieto nezrovnalosti sú užitočné neskôr pri posudzovaní. Menšej jazykovej nejasnosti by sa nemala venovať rovnaká pozornosť ako nesprávne pochopenej požiadavke.
Pre každý dôležitý výsledok by malo byť jasne definované, čo predstavuje dostatočné pochopenie. V prípade faktúry nestačí, aby ľudia jednoducho našli celkovú sumu. Možno budú musieť pochopiť aj dôvod platby, dátum splatnosti a spôsob podania reklamácie. Očakávaná odpoveď zostáva úzko prepojená so skutočnou úlohou a vyhýba sa umelému nafukovaniu významu textu. Technicky správne verzie nie sú zbytočne označené ako chyby.
Východiskový bod zviditeľní zmenu.
Bez východiskového bodu je ťažké posúdiť, či bude nová verzia efektívnejšia. Preto pred vykonaním zmien organizácia zhromažďuje existujúcu spätnú väzbu k aktuálnemu obsahu. Môže ísť o nesprávne vyplnené formuláre, otázky na zákaznícky servis, vyhľadávacie výrazy použité na webovej stránke alebo krátke úlohy s čitateľmi. Tieto odhaľujú, kde je súčasné pochopenie nedostatočné.
Napríklad univerzita si všimne, že veľa uchádzačov vyhľadáva „odoslať certifikát neskôr“ a oddelenie študentských služieb je často kontaktované ohľadom chýbajúcich dokumentov. Len málo ľudí dokáže z krátkych úloh rozoznať termín na odovzdanie certifikátu. Tieto pozorovania opisujú rovnakú neistotu z rôznych perspektív a poskytujú užitočný základ pre revíziu.
Počiatočná situácia sa musí zaznamenať za porovnateľných podmienok. Ak je v januári prijatých len niekoľko žiadostí a v auguste obzvlášť veľký počet, absolútne čísla podpory nie sú priamo porovnateľné. Nový sadzobník poplatkov alebo mediálna správa môžu tiež zmeniť správanie. Takéto okolnosti sa zaznamenajú, aby sa prípadné následné nezrovnalosti predčasne nepripisovali textu. Ak chýbajú spoľahlivé údaje, táto medzera sa výslovne uvedie.
Úlohy preukazujú relevantnosť informácií
Realistická úloha poskytuje priame náznaky porozumenia. Ľudia vyhľadávajú informácie, vysvetľujú ich význam vlastnými slovami alebo určujú ďalší krok. Na účely merania je dôležité, či sa dosiahol predtým definovaný výsledok. V prípade vrátenia peňazí by to bola napríklad správna odpoveď na otázku, za akých podmienok budú peniaze vrátené.
Výsledky možno zaznamenať ako percento úspešných úloh alebo ako frekvenciu konkrétnych nedorozumení. Jedno číslo však nestačí. Nesprávna odpoveď môže byť spôsobená neznámym výrazom, prehliadnutým nadpisom alebo nefunkčným odkazom. Stručné vysvetlenie osoby naznačuje, kde sa stratil význam. Akákoľvek potrebná pomoc sa tiež zaznamenáva oddelene od nezávislého úspechu.
Vhodné testované subjekty by mali odrážať skutočné čitateľské publikum a ich rozmanité zázemie. Diskusie vyžadujú realistické úlohy, neutrálne otázky a bezpečné prostredie, najmä pri riešení citlivých tém. Takéto testy poskytujú dôležité priame dôkazy, ale zostávajú len jedným zdrojom. V kombinácii s pozorovaniami z prebiehajúceho používania sa vytvára robustnejší obraz zrozumiteľnosti.
Doplňujúce otázky a vyhľadávacie výrazy dopĺňajú obraz.
Zákaznícky servis počuje, ktoré tvrdenia zostali po prečítaní nezodpovedané. Ak sa volajúci pravidelne pýtajú, či existuje mesačný alebo ročný poplatok, je to konkrétny znak porozumenia. Redakčný tím by mal byť oboznámený so znením a príslušnou stránkou. Všeobecná kategória ako „Otázka o nákladoch“ je príliš široká na to, aby sa z nej dala vyvodiť zmysluplná zmena.
Interné vyhľadávanie odhaľuje, ktoré slová ľudia používajú a ktoré odpovede nenájdu priamo na webovej stránke. Početné vyhľadávania výrazu „zrušiť stretnutie“ môžu poukazovať na chýbajúci štítok v navigácii. Nedokazujú však, že vysvetľujúci text je nezrozumiteľný. Možno je správna stránka jednoducho ťažko dostupná. Vyhľadávacie údaje sa preto posudzujú v spojení s výsledkami vyhľadávania a zvolenými cestami.
Webová analytika dokáže odhaliť opustené návštevy, opakované zobrazenia stránok alebo prechod na stránku s nápovedou. Aj tu zostáva význam nejasný. Rýchle ukončenie môže naznačovať okamžite nájdenú odpoveď alebo neúspešné vyhľadávanie. Technické chyby a prístup používateľa môžu údaje ďalej skresľovať. Vysvetlenie sa stáva spoľahlivejším iba vtedy, keď úlohy, dopyty a údaje o používaní smerujú na to isté miesto.
Signál ešte nie je príčinou
Počet žiadostí o podporu sa môže po revízii znížiť. To naznačuje zlepšenie, ale nedokazuje to. Možno bol zjednodušený formulár, bola odoslaná pripomienka alebo bola servisná linka otvorená kratší čas. Analýza zaznamenáva takéto zmeny a oddeľuje pozorovanie od vysvetlenia: Počet sa znížil; nový text k tomu mohol prispieť.
Rozdiely medzi skupinami si tiež vyžadujú opatrnosť. Ak ľudia s malými technickými znalosťami zlyhávajú častejšie, nemusí to nevyhnutne znamenať, že problém spôsobujú oni. Obsah môže vyžadovať predchádzajúce znalosti, ktoré nie sú nikdy vysvetlené. Relevantnou otázkou je, aké predpoklady text implicitne uvádza a ako možno informácie sprístupniť zamýšľanej cieľovej skupine.
Protichodné signály nie sú dôvodom na ignorovanie jedného z nich. Možno viac ľudí rieši úlohu správne, zatiaľ čo požiadavky na podporu sa zvyšujú. Nová verzia potom môže byť zrozumiteľnejšia, ale aj viditeľnejšia. Organizácia skúma načasovanie, tému a povahu otázok predtým, ako vyhodnotí ich vplyv. Akákoľvek odchýlka vedie k presnejšej otázke.
Závažné nedorozumenia majú väčšiu váhu.
Desať menších podráždení nie je automaticky závažnejších ako jedna zriedkavá chyba s vážnymi následkami. Niekto, kto na podujatí prehliadne názov miestnosti, sa môže opýtať na mieste. Niekto, kto považuje termín za nezáväzný, môže stratiť nárok. Hodnotenie preto kombinuje frekvenciu, potenciálne následky a pravdepodobnosť včasného odhalenia chyby.
Nedorozumenie nadobúda na váhe, keď ovplyvňuje ústredný účel stránky. Na stránke pre núdzové situácie je nejasná zodpovednosť kritická, aj keď je telefónne číslo a otváracie hodiny známe. Rovnaká nejednoznačnosť môže byť menej závažná v prehľade produktu. Kontext použitia určuje, ktorá nezrovnalosť sa opraví ako prvá.
Táto kategorizácia bráni redakčnému tímu v tom, aby sa zaoberal iba ľahko upraviteľnými sekciami. Často zamieňaný nadpis sa dá rýchlo opraviť, zatiaľ čo nejasné pravidlo nároku si vyžaduje konzultáciu s odborníkom. Oba problémy zostávajú viditeľné, ale riziko určuje ich poradie. Zodpovední tak môžu zdôvodniť, ktorá oprava sa zverejní ako prvá. Týmto spôsobom sa revízia zameriava na skutočné nevýhody pre čitateľov.
Pred a po musia byť porovnateľné.
Po revízii sa tie isté kritické zistenia opäť preskúmajú. Úlohy môžu byť mierne preformulované tak, aby si nikto jednoducho nepamätal predchádzajúcu odpoveď. Náročnosť, počiatočná situácia a očakávaný postup by však mali zostať porovnateľné. Iba potom vyššie percento správnych interpretácií hovorí niečo zmysluplné o novej verzii.
Pri práci s priebežnými údajmi je kľúčový vhodný časový rámec. Agentúra neporovnáva pokojný týždeň sviatkov po zverejnení s najrušnejším mesiacom predchádzajúceho roka. Zohľadňuje podobné obdobia podávania žiadostí a ďalšie zmeny v službe. Okrem počtu dopytov je dôležité zvážiť, či sa ich obsah mení alebo či pretrváva rovnaké nedorozumenie.
Revízia môže vyriešiť jeden problém a vytvoriť ďalší. Zvýraznený termín sa teraz rozpoznáva častejšie, ale ľudia môžu prehliadnuť výnimku. Hodnotenie preto zostáva verné všetkým predtým definovaným cieľom porozumenia a venuje pozornosť novým chybným interpretáciám. Aj nezmenené časti môžu mať iný účinok, ak sa zmení poradie. Dobrý celkový výsledok nesmie maskovať kritickú individuálnu chybu.
Poctivá správa uvádza svoje obmedzenia.
Výsledok sa uvádza spolu s jeho zdrojom. Namiesto „92-percentnej zrozumiteľnosti“ sa uvádza, že jedenásť z dvanástich účastníkov správne identifikovalo termín v konkrétnej úlohe. Patria sem cieľová skupina, obsah, časové obdobie a možné zmeny v prostredí. To umožňuje ostatným kontextualizovať vyhlásenie bez zovšeobecňovania z malej štúdie.
Chýbajúce informácie sú tiež viditeľné v údajoch o podpore a webe. Nie každé volanie je možné priradiť k stránke, súhlas obmedzuje hodnotenie a nastavenia súborov cookie ovplyvňujú webovú analytiku. Tieto hranice neznehodnocujú údaje. Ukazujú rozsah záveru a ktoré otvorené otázky si vyžadujú ďalšie pozorovanie.
Správa spája čísla s konkrétnymi zisteniami. Napríklad uvádza, že úlohy boli plnené častejšie, ale dvaja ľudia stále interpretovali pojem „kalendárne dni“ ako pracovné dni. Takéto vyhlásenie je pre redakčný tím užitočnejšie ako jedno skóre. Použité definície sú zdokumentované, aby budúce porovnania mali rovnaký význam. Ukazuje pokrok aj ďalší bod, kde stále existuje riziko.
Konečným výsledkom je dobre podložené rozhodnutie.
Zmena sa považuje za účinnú, ak sa kľúčové ciele porozumenia dosahujú častejšie a nevznikajú žiadne nové kritické nesprávne interpretácie. To, aká úroveň zlepšenia je dostatočná, závisí od rizika. V prípade rekreačného podujatia môže stačiť významný pokrok. V prípade lekárskeho súhlasu alebo základných služieb si aj jedno vážne nedorozumenie vyžaduje ďalšiu prácu.
Nie každý výsledok okamžite vedie k novému textu. Ak problém spočíva na stránke, ktorú je ťažké nájsť, navigácia sa zmení. Ak formulár používa iné pojmy ako vysvetlenie, obe rozhrania musia byť konzistentné. Meranie nielen určuje, či niečo potrebuje zlepšenie, ale tiež ukazuje, ktorá časť ponuky by sa mala riešiť.
Jasnosť sa tak nestáva ani otázkou vkusu, ani zdanlivo presným skóre. Organizácia identifikuje dôležitý vplyv, pozoruje ho z viacerých perspektív a porovnáva skorší stav s neskorším. Ďalšie preskúmanie bude zdokumentované spolu s rozhodnutím. Zodpovedný redakčný tím môže vysvetliť, čo sa zlepšilo, čo zostáva neisté a prečo je publikovaná verzia opodstatnená.