Razumljivost zahteva opazen rezultat
Ocena berljivosti lahko prepozna kratke besede in stavke. Ne kaže, ali oseba opazi stanje, razlikuje med dvema podobnima nalogama ali po branju ustrezno ukrepa. Razumljivost torej ni lastnost, ki bi jo bilo mogoče izračunati zgolj iz samega besedila. Kaže se v pomenu, ki ga ljudje dojamejo v določeni situaciji.
Za stran o zbiranju kosovnih odpadkov bi lahko bil rezultat: Ljudje prepoznajo, kateri predmeti se zbirajo, rezervirajo pravilen termin in predmete odložijo ob dovoljenem času. Cilj, kot je »Besedilo naj bo preprosto«, pa ostaja preveč nejasen. Ne pove niti, katero sporočilo je pomembno niti kako bo vidna izboljšava.
Merjenje se torej začne pred revizijo. Uredniška ekipa in strokovnjaki za področje skupaj razjasnijo, kaj bi morali bralci vedeti, se odločiti ali storiti po branju vsebine. To pričakovanje je zapisano v preprostem jeziku. V ta opis sta vključena tudi ciljna publika in situacija uporabe. To ustvarja razumljivo povezavo. To omogoča kasnejše preverjanje, ali nova različica dejansko pomaga na predvideni način, namesto da se preprosto sliši prijetnejše.
Ni vsaka izjava enako pomembna.
Besedilo pogosto vsebuje več informacij, kot jih je mogoče razumno preveriti posamično. Izjave, katerih napačno razumevanje preprečuje dejanje ali povzroča opazno slabost, so ključne. Za zdravilo to vključuje odmerjanje, čas in pomembne opozorilne znake. Zgodovina zdravila je lahko zanimiva, vendar ni tako pomembna za varno uporabo.
Pravne ali finančne posledice prav tako povečajo pomen. Če nekdo napačno razume rok, se lahko zahtevek izgubi. Če ostane nejasno le ime odgovornega oddelka, je škoda običajno manjša. Ta neskladja so koristna pozneje pri ocenjevanju. Manjša jezikovna negotovost ne bi smela biti deležna enake pozornosti kot napačno razumljena zahteva.
Za vsak pomemben rezultat je treba jasno opredeliti, kaj pomeni zadostno razumevanje. Pri računu ni dovolj, da ljudje preprosto najdejo skupni znesek. Morda morajo razumeti tudi razlog za plačilo, datum zapadlosti in kako vložiti ugovor. Pričakovani odgovor ostaja tesno usklajen z dejansko nalogo in se izogiba umetnemu napihovanju pomena besedila. Tehnično pravilne različice niso nepotrebno označene kot napake.
Osnovni podatki omogočajo vidnost sprememb.
Brez osnovnega podatkov je težko oceniti, ali bo nova različica učinkovitejša. Zato organizacija pred spremembami zbere obstoječe povratne informacije o trenutni vsebini. To lahko vključuje nepravilno izpolnjene obrazce, poizvedbe v službi za stranke, iskalne izraze, uporabljene na spletnem mestu, ali kratke naloge z bralci. Te razkrivajo, kje trenutno razumevanje primanjkuje.
Univerza na primer opazi, da veliko prijaviteljev išče »pošlji potrdilo pozneje« in da študentska služba pogosto dobi stike glede manjkajočih dokumentov. Le malo ljudi lahko iz kratkih nalog razbere rok za oddajo potrdila. Ta opažanja opisujejo isto negotovost z različnih zornih kotov in zagotavljajo koristno podlago za revizijo.
Začetno stanje je treba zabeležiti v primerljivih pogojih. Če je januarja prejetih le nekaj zahtev, avgusta pa še posebej veliko, absolutne številke podpore niso neposredno primerljive. Tudi nov cenik ali medijsko poročilo lahko spremenita vedenje. Takšne okoliščine so zabeležene, da se morebitna poznejša odstopanja ne pripišejo prezgodaj besedilu. Če ni zanesljivih podatkov, je ta vrzel izrecno navedena.
Naloge dokazujejo ustreznost informacij
Realistična naloga zagotavlja neposredne znake razumevanja. Ljudje iščejo informacije, razložijo njihov pomen s svojimi besedami ali določijo naslednji korak. Za namene merjenja je pomembno, ali je dosežen prej opredeljeni rezultat. V primeru vračila bi bil to na primer pravilen odgovor na vprašanje, pod kakšnimi pogoji bo denar povrnjen.
Rezultate je mogoče zabeležiti kot odstotek uspešnih nalog ali kot pogostost določenih nesporazumov. Vendar pa ena sama številka ni dovolj. Napačen odgovor je lahko posledica neznanega izraza, spregledanega naslova ali nedelujoče povezave. Kratka razlaga osebe nakazuje, kje se je pomen izgubil. Vsaka potrebna pomoč je prav tako zabeležena ločeno od samostojnega uspeha.
Primerni testni subjekti bi morali odražati dejansko bralstvo in njihovo raznoliko ozadje. Razprave zahtevajo realistične naloge, nevtralna vprašanja in varno okolje, zlasti pri obravnavanju občutljivih tem. Takšni testi zagotavljajo pomembne neposredne dokaze, vendar ostajajo le en vir. V kombinaciji z opažanji iz tekoče uporabe se dobi bolj robustna slika razumljivosti.
Dodatna vprašanja in iskalni izrazi dopolnjujejo sliko.
Služba za stranke sliši, katere izjave ostanejo neodgovorjene po branju. Če klicatelji redno sprašujejo, ali obstaja mesečna ali letna pristojbina, je to konkreten znak razumevanja. Uredniška ekipa bi morala biti seznanjena z besedilom in zadevno stranjo. Splošna kategorija, kot je »Vprašanje o stroških«, je preširoka, da bi iz nje izpeljali smiselno spremembo.
Notranje iskanje razkrije, katere besede ljudje uporabljajo in katerih odgovorov ne morejo najti neposredno na spletnem mestu. Številna iskanja za »preklic termina« lahko kažejo na manjkajočo oznako v navigaciji. Vendar pa ne dokazujejo, da je pojasnjevalno besedilo nerazumljivo. Morda je pravilna stran preprosto težko dostopna. Podatki iskanja se zato upoštevajo skupaj z rezultati iskanja in prehojenimi potmi.
Spletna analitika lahko razkrije zapuščene obiske, ponovljene oglede strani ali preklop na stran s pomočjo. Tudi tukaj pomen ostaja nejasen. Hiter izhod lahko pomeni takoj najden odgovor ali neuspešno iskanje. Tehnične napake in dostop uporabnikov lahko dodatno popačijo podatke. Šele ko opravila, poizvedbe in podatki o uporabi kažejo na isto lokacijo, postane razlaga zanesljivejša.
Signal še ni vzrok
Število zahtev za podporo se lahko po reviziji zmanjša. To nakazuje na izboljšanje, vendar ga ne dokazuje. Morda je bil obrazec poenostavljen, poslan opomnik ali pa je bila telefonska linija za pomoč strankam odprta krajši čas. Analiza zabeleži takšne spremembe in loči opazovanje od razlage: Število se je zmanjšalo; novo besedilo bi lahko k temu prispevalo.
Razlike med skupinami zahtevajo tudi previdnost. Če ljudje z malo tehničnega znanja pogosteje ne uspejo, to ne pomeni nujno, da povzročajo težavo. Vsebina lahko zahteva predhodno znanje, ki ni nikoli pojasnjeno. Pomembno vprašanje je, katere predpostavke besedilo implicitno vsebuje in kako je mogoče informacije dati na voljo ciljni skupini.
Protislovni signali niso razlog, da enega od njih prezremo. Morda več ljudi pravilno rešuje nalogo, medtem ko se poizvedbe za podporo povečujejo. Nova različica je potem lahko bolj razumljiva, a tudi bolj vidna. Organizacija pred oceno vpliva vprašanj preuči njihov čas, temo in naravo. Vsako odstopanje vodi do natančnejšega vprašanja.
Resni nesporazumi imajo večjo težo.
Deset manjših težav ni samodejno pomembnejših od ene redke napake z resnimi posledicami. Nekdo, ki na dogodku spregleda ime sobe, lahko vpraša na kraju samem. Nekdo, ki meni, da rok ni zavezujoč, lahko izgubi odškodnino. Zato ocena združuje pogostost, morebitne posledice in verjetnost, da se napaka odkrije pravočasno.
Nesporazum dobi dodatno težo, ko vpliva na osrednji namen strani. Na strani za nujne primere je nejasna odgovornost ključnega pomena, tudi če sta telefonska številka in odpiralni čas razumljena. Ista dvoumnost je lahko manj resna v pregledu izdelka. Kontekst uporabe določa, katero neskladje se najprej popravi.
Ta kategorizacija preprečuje uredniški ekipi, da bi obravnavala le enostavno spremenljive dele. Pogosto zmeden naslov je mogoče hitro popraviti, medtem ko nejasno pravilo o upravičenosti zahteva posvetovanje s strokovnjakom. Obe težavi ostajata vidni, vendar tveganje določa njun vrstni red. Odgovorni lahko tako upravičijo, kateri popravek se objavi prvi. Na ta način se revizija osredotoči na dejanske slabosti za bralce.
Prej in potem morata biti primerljiva.
Po reviziji se iste kritične ugotovitve ponovno pregledajo. Naloge se lahko nekoliko preoblikujejo, tako da se nihče ne spomni le prejšnjega odgovora. Vendar pa morajo težavnost, začetna situacija in pričakovano dejanje ostati primerljivi. Šele takrat višji odstotek pravilnih interpretacij pove kaj pomembnega o novi različici.
Pri obravnavi tekočih podatkov je ustrezen časovni okvir ključnega pomena. Agencija ne primerja mirnega prazničnega tedna po objavi z najbolj prometnim mesecem v prejšnjem letu. Upošteva podobna obdobja prijav in druge spremembe storitve. Poleg števila poizvedb je pomembno upoštevati tudi, ali se njihova vsebina spreminja ali pa se isto nesporazum nadaljuje.
Revizija lahko reši eno težavo in ustvari drugo. Označen rok se zdaj prepozna pogosteje, vendar lahko ljudje spregledajo izjemo. Zato evalvacija ostaja zvesta vsem prej opredeljenim ciljem razumevanja in je pozorna na nove napačne interpretacije. Tudi nespremenjeni odseki imajo lahko drugačen učinek, če se spremeni vrstni red. Dober skupni rezultat ne sme prikriti kritične individualne napake.
Iskreno poročilo navaja svoje omejitve.
Rezultat je predstavljen skupaj z njegovim virom. Namesto "92-odstotne razumljivosti" navaja, da je enajst od dvanajstih udeležencev pravilno opredelilo rok pri določeni nalogi. To vključuje ciljno skupino, vsebino, časovno obdobje in morebitne spremembe v okolju. To drugim omogoča, da izjavo postavijo v kontekst, ne da bi posploševali iz majhne študije.
Manjkajoča informacija je vidna tudi v podpornih in spletnih podatkih. Vsakega klica ni mogoče dodeliti strani, soglasje omejuje evalvacijo, nastavitve piškotkov pa vplivajo na spletno analitiko. Te meje ne razveljavljajo podatkov. Prikazujejo obseg sklepa in katera odprta vprašanja zahtevajo nadaljnje opazovanje.
Poročilo povezuje številke s konkretnimi ugotovitvami. Na primer, omenja, da so bile naloge opravljene pogosteje, vendar sta dve osebi izraz »koledarski dnevi« še vedno razlagali kot delovne dni. Takšna izjava je uredniški ekipi bolj koristna kot ena sama ocena. Uporabljene definicije so dokumentirane, tako da imajo prihodnje primerjave enak pomen. Prikazuje tako napredek kot naslednjo točko, kjer tveganje še vedno obstaja.
Končni rezultat je dobro utemeljena odločitev.
Sprememba se šteje za učinkovito, če se ključni cilji razumevanja dosegajo pogosteje in če se ne pojavijo nove kritične napačne interpretacije. Katera raven izboljšanja je zadostna, je odvisno od tveganja. Za rekreativni dogodek lahko zadostuje znaten napredek. V primeru zdravniškega soglasja ali bistvenih storitev že eno samo resno nerazumevanje zahteva nadaljnje delo.
Vsak rezultat ne vodi takoj do novega besedila. Če je težava na strani, ki jo je težko najti, se navigacija spremeni. Če obrazec uporablja drugačne izraze kot razlaga, morata biti oba vmesnika skladna. Meritev ne le določa, ali je treba nekaj izboljšati, ampak tudi kaže, kateri del ponudbe je treba obravnavati.
Jasnost tako ne postane niti stvar okusa niti na videz natančna ocena. Organizacija prepozna pomemben vpliv, ga opazuje z več perspektiv in primerja prejšnje stanje s poznejšim. Naslednji pregled bo dokumentiran skupaj z odločitvijo. Odgovorna uredniška ekipa lahko pojasni, kaj se je izboljšalo, kaj ostaja negotovo in zakaj je objavljena različica upravičena.