Ymmärrettävyys vaatii havaittavissa olevan tuloksen
Luettavuuspistemäärä voi tunnistaa lyhyitä sanoja ja lauseita. Se ei osoita, huomaako henkilö tilan, erottaako hän kaksi samanlaista tehtävää tai toimiiko hän asianmukaisesti lukemisen jälkeen. Ymmärrettävyys ei siis ole ominaisuus, joka voidaan laskea pelkästään tekstistä. Se ilmenee merkityksessä, jonka ihmiset ymmärtävät tietyssä tilanteessa.
Jätteiden keräystä käsittelevällä sivulla tulos voisi olla: Ihmiset tunnistavat kerättävät tavarat, varaavat oikean ajan ja laittavat tavarat ulos sallittuun aikaan. Tavoite, kuten "Tekstin tulisi olla yksinkertainen", on liian epämääräinen. Se ei täsmennä, mikä viesti on tärkeä, eikä se osoita, miten parannus näkyy.
Siksi mittaaminen alkaa jo ennen tarkistusta. Toimituskunta ja aiheen asiantuntijat työskentelevät yhdessä selventääkseen, mitä lukijoiden tulisi tietää, päättää tai tehdä sisällön luettuaan. Tämä odotus kirjoitetaan sitten selkeästi muistiin. Kohderyhmä ja käyttökonteksti sisällytetään myös tähän kuvaukseen. Tämä luo selkeän ja ymmärrettävän yhteyden. Näin voidaan myöhemmin varmistaa, että uusi versio vastaa tehokkaasti aiottuun tavoitteeseen sen sijaan, että se vain kuulostaisi miellyttävämmältä.
Kaikki viestit eivät ole yhtä tärkeitä.
Teksti sisältää usein enemmän tietoa kuin mitä voidaan kohtuudella tarkistaa yksitellen. Ratkaisevia ovat lausunnot, joiden väärinymmärrys estää toiminnan tai aiheuttaa merkittävän haitan. Lääkkeen kohdalla tähän kuuluvat annostus, ajoitus ja tärkeät varoitusmerkit. Lääkkeen historia voi olla mielenkiintoinen, mutta se ei ole yhtä kriittinen turvallisen käytön kannalta.
Myös oikeudelliset tai taloudelliset seuraukset lisäävät merkitystä. Jos joku ymmärtää määräajan väärin, korvausvaatimus voi kadota. Jos vain vastuullisen osaston nimi jää epäselväksi, vahinko on yleensä pienempi. Nämä erottelut auttavat myöhemmässä arvioinnissa. Pienen kielellisen epävarmuuden ei pitäisi saada samaa huomiota kuin väärinymmärretyn vaatimuksen.
Jokaisen tärkeän lopputuloksen osalta tulisi määritellä selkeästi, mikä on riittävä ymmärrys. Laskun kohdalla ei riitä, että ihmiset löytävät kokonaissumman. Heidän on ehkä myös ymmärrettävä maksun syy, eräpäivä ja vastalauseen tekeminen. Odotettu vastaus pysyy lähellä varsinaista tehtävää ja välttää tekstin merkityksen keinotekoista liioittelua. Teknisesti oikeita versioita ei merkitä tarpeettomasti virheiksi.
Lähtökohta tekee muutoksen näkyväksi
Ilman lähtökohtaa on vaikea arvioida, onko uusi versio tehokkaampi. Siksi ennen muutosten tekemistä organisaatio kerää olemassa olevaa palautetta nykyisestä sisällöstä. Tämä voi sisältää väärin täytettyjä lomakkeita, palveluun tehtyjä kyselyitä, verkkosivuston hakusanoja tai lyhyitä harjoituksia lukijoiden kanssa. Nämä paljastavat, missä nykyinen ymmärrys on puutteellista.
Esimerkiksi yliopisto huomaa, että monet hakijat etsivät hakusanoilla "lähetä todistus myöhemmin", ja opiskelijapalveluihin otetaan usein yhteyttä puuttuvien asiakirjojen vuoksi. Lyhyissä harjoituksissa harvat ymmärtävät todistuksen lähettämisen määräajan. Nämä havainnot kuvaavat samaa epävarmuutta eri näkökulmista ja tarjoavat hyödyllisen pohjan tarkistamiselle.
Lähtötilanne on arvioitava vertailukelpoisissa olosuhteissa. Jos tammikuussa vastaanotetaan vain muutama pyyntö ja erityisen suuri määrä elokuussa, absoluuttiset kannatusluvut eivät ole suoraan vertailukelpoisia. Myös uusi hinnasto tai mediaraportti voi muuttaa käyttäytymistä. Tällaiset olosuhteet kirjataan, jotta mahdollisia myöhempiä eroja ei ennenaikaisesti pidetä tekstin syynä. Jos luotettavaa tietoa puuttuu, tämä aukko mainitaan nimenomaisesti.
Tehtävät paljastavat ymmärrettävän merkityksen
Realistisessa tehtävässä annetaan suoria viitteitä ymmärryksestä. Ihmiset etsivät tietoa, selittävät sen merkityksen omin sanoin tai määrittävät seuraavan vaiheen. Mittaamisen kannalta tärkeää on, saavutetaanko aiemmin määritelty tulos. Hyvityksen tapauksessa tämä olisi esimerkiksi oikea vastaus kysymykseen siitä, millä ehdoilla rahat palautetaan.
Tulokset voidaan kirjata onnistuneiden tehtävien prosenttiosuutena tai tiettyjen väärinkäsitysten esiintymistiheytenä. Yksi luku ei kuitenkaan riitä. Väärä vastaus voi johtua tuntemattomasta termistä, huomiotta jätetystä otsikosta tai rikkinäisestä linkistä. Henkilön lyhyt selitys osoittaa, missä merkitys katosi. Myös mahdollinen tarvittava apu kirjataan erikseen itsenäisestä onnistumisesta.
Sopivien testiin osallistujien tulisi heijastaa todellista lukijakuntaa ja heidän monipuolisia taustojaan. Keskustelut vaativat realistisia tehtäviä, neutraaleja kysymyksiä ja turvallisen ympäristön, erityisesti arkaluonteisten aiheiden käsittelyssä. Tällaiset testit tarjoavat tärkeää suoraa näyttöä, mutta ovat vain yksi lähde. Yhdessä jatkuvan käytön havaintojen kanssa syntyy vankempi kuva ymmärrettävyydestä.
Jatkokysymykset ja hakusanat täydentävät kuvaa.
Asiakaspalvelu kuulee sen, mikä jää epäselväksi lukemisen jälkeen. Jos soittajat kysyvät säännöllisesti, onko kuukausi- vai vuosimaksu, se on konkreettinen osoitus ymmärryksestä. Toimituksen tulisi tuntea tarkka sanamuoto ja kyseinen sivu. Yleinen kategoria, kuten "Kysymys kustannuksista", on liian laaja, jotta siitä voitaisiin johtaa merkityksellisiä muutoksia.
Sisäinen haku paljastaa, mitä sanoja ihmiset käyttävät ja mitä vastauksia he eivät löydä suoraan verkkosivustolta. Monet haut "peruuta tapaaminen" saattavat viitata puuttuvaan otsikkoon navigoinnissa. Ne eivät kuitenkaan todista, että selittävä teksti on käsittämätön. Ehkä oikea sivu on yksinkertaisesti vaikeasti löydettävissä. Hakutietoja tarkastellaan siksi yhdessä hakutulosten ja käyttäjäpolkujen kanssa.
Verkkoanalytiikka voi paljastaa hylättyjä käyntejä, toistuvia sivulatauksia tai siirtymisiä ohjesivulle. Tässäkin merkitys jää epäselväksi. Nopea poistuminen voi viitata välittömästi löytyneeseen vastaukseen tai epäonnistuneeseen hakuun. Tekniset virheet ja käyttäjien pääsy voivat vääristää tietoja entisestään. Vasta kun tehtävät, kyselyt ja käyttötiedot osoittavat samaan paikkaan, selityksestä tulee luotettavampi.
Signaali ei ole vielä syy
Tukipyyntöjen määrä saattaa vähentyä verkkosivuston tarkistamisen jälkeen. Tämä viittaa parannukseen, mutta ei todista sitä. Ehkä lomaketta on yksinkertaistettu, muistutus lähetetty tai asiakaspalvelulinja on ollut avoinna lyhyemmän aikaa. Analyysi tallentaa tällaiset muutokset ja erottaa havainnot selityksestä: Lukumäärä on vähentynyt; uusi teksti on voinut vaikuttaa tähän.
Ryhmien väliset erot vaativat myös huolellista harkintaa. Jos vähemmän erikoistunutta tietoa omaavat yksilöt epäonnistuvat useammin, se ei välttämättä tarkoita, että he ovat ongelman syy. Sisältö saattaa vaatia ennakkotietoa, jota ei koskaan nimenomaisesti ilmaista. Olennainen kysymys on, mitä oletuksia teksti implisiittisesti tekee ja miten tiedot voidaan tehdä kohdeyleisön saataville.
Ristiriitaiset signaalit eivät ole syy jättää niitä huomiotta. Ehkä useammat ihmiset ratkaisevat tehtävän oikein, kun taas tukipyyntöjen määrä kasvaa. Tarkistettu versio saattaa silloin olla selkeämpi, mutta myös näkyvämpi. Organisaatio tarkastelee kysymysten ajoitusta, aihetta ja luonnetta ennen niiden vaikutuksen arviointia. Poikkeama toimii sysäyksenä tarkemmalle kysymykselle.
Vakavilla väärinkäsityksillä on enemmän painoarvoa.
Kymmenen pientä virhettä eivät ole automaattisesti tärkeämpiä kuin yksi harvinainen virhe, jolla on vakavia seurauksia. Jos joku unohtaa huoneen nimen tapahtumassa, hän voi kysyä paikan päällä. Jos joku pitää määräaikaa sitomattomana, hän saattaa menettää korvaushakemuksen. Siksi arvioinnissa yhdistetään tiheys, mahdolliset seuraukset ja mahdollisuus havaita virhe ajoissa.
Väärinkäsityksellä on lisäpainoarvoa, jos se vaikuttaa sivun keskeiseen tarkoitukseen. Hätätilannesivulla epäselvä vastuu on kriittinen, vaikka puhelinnumero ja aukioloajat ymmärrettäisiinkin. Sama epäselvyys voi olla vähemmän vakava tuotekatsauksessa. Käyttökonteksti määrää, mikä ristiriita korjataan ensin.
Tämä priorisointi estää toimituskuntaa käsittelemästä vain helposti muokattavia ongelmia. Usein sekava otsikko voidaan korjata nopeasti, kun taas epäselvä korvauskäytäntö vaatii asiantuntijan konsultaatiota. Molemmat ongelmat pysyvät näkyvissä, mutta riski määrää niiden järjestyksen. Vastuulliset voivat näin ollen perustella, mikä korjaus julkaistaan ensin. Tällä tavoin tarkistus keskittyy lukijoille aiheutuviin todellisiin haittoihin.
Ennen ja jälkeen on oltava vertailukelpoisia.
Tarkistuksen jälkeen samat kriittiset kysymykset tarkastellaan uudelleen. Tehtävät voidaan muotoilla hieman eri tavalla, jotta kukaan ei vain muista aiempaa vastausta. Vaikeusasteen, lähtötilanteen ja odotetun toiminnan tulisi kuitenkin pysyä vertailukelpoisina. Vain tällöin suurempi oikeiden tulkintojen prosenttiosuus on merkityksellinen uudelle versiolle.
Käsiteltäessä jatkuvaa dataa sopiva aikataulu on ratkaisevan tärkeä. Virasto ei vertaa julkaisua seuraavaa hiljaista lomaviikkoa edellisen vuoden kiireisimpään kuukauteen. Se ottaa huomioon samankaltaiset hakuajat ja muut palvelun muutokset. Kyselyiden määrän lisäksi on tärkeää pohtia, muuttuuko niiden sisältö vai jatkuuko sama väärinkäsitys.
Tarkistaminen voi ratkaista yhden ongelman ja luoda toisen. Korostettu määräaika saatetaan tunnistaa useammin, mutta ihmiset saattavat unohtaa poikkeuksen. Siksi arvioinnissa säilytetään kaikki aiemmin määritellyt ymmärtämistavoitteet ja kiinnitetään huomiota uusiin väärintulkintoihin. Jopa muuttumattomilla osioilla voi olla erilainen vaikutus, jos järjestystä muutetaan. Hyvä kokonaistulos ei saa peittää kriittistä yksittäistä virhettä.
Rehellinen raportti ilmoittaa rajoituksensa.
Tuloksessa ilmoitetaan sen lähde. "92 prosentin ymmärrettävyyden" sijaan todetaan, että yksitoista kahdestatoista osallistujasta tunnisti oikein määräajan tietyssä tehtävässä. Tämä sisältää kohderyhmän, sisällön, aikataulun ja mahdolliset ympäristön muutokset. Tämä antaa muille mahdollisuuden kontekstualisoida väittämää yleistämättä pienestä tutkimuksesta.
Puuttuvat tiedot näkyvät myös tuki- ja verkkodatassa. Kaikkia puheluita ei voida liittää tiettyyn sivuun, suostumus rajoittaa analyysia ja evästeasetukset vaikuttavat verkkoanalytiikkaan. Nämä rajoitukset eivät mitätöi tietoja. Ne osoittavat johtopäätöksen laajuuden ja sen, mitkä avoimet kysymykset vaativat lisätutkimuksia.
Raportti yhdistää luvut konkreettisiin havaintoihin. Hän mainitsee esimerkiksi, että tehtäviä suoritetaan useammin, mutta kaksi henkilöä tulkitsee edelleen termin "kalenteripäivät" työpäiviksi. Tällainen tieto on toimituskunnalle hyödyllisempää kuin yksittäinen pisteytys. Käytetyt määritelmät dokumentoidaan sen varmistamiseksi, että tulevilla vertailuilla on sama merkitys. Tämä osoittaa sekä edistymisen että seuraavan pisteen, jossa riski on edelleen olemassa.
Tuloksena on perusteltu päätös.
Muutos katsotaan tehokkaaksi, kun keskeiset ymmärrystavoitteet saavutetaan useammin eikä uusia kriittisiä väärintulkintoja synny. Riittävä parannus riippuu riskistä. Virkistystapahtumassa merkittävä edistyminen voi riittää. Lääketieteellisen suostumuksen tai välttämättömien palveluiden tapauksessa jopa yksi vakava väärinkäsitys vaatii lisätyötä.
Jokainen tulos ei johda välittömästi uuteen tekstiin. Jos ongelma on sivulla, jota ei löydy, navigointia muutetaan. Jos lomakkeessa käytetään eri terminologiaa kuin selityksessä, molempien käyttöliittymien on oltava yhdenmukaisia. Mittaus ei ainoastaan määritä, onko jotain parannettavaa, vaan myös osoittaa, mihin osaan tarjontaa tulisi puuttua.
Tällä tavoin ymmärrettävyys ei ole makuasia eikä näennäisen tarkka pisteytys. Organisaatio tunnistaa tärkeän vaikutuksen, tarkastelee sitä useista näkökulmista ja vertaa aiempaa tilaa myöhempään. Seuraava tarkastelu dokumentoidaan yhdessä päätöksen kanssa. Vastuullinen toimituskunta voi selittää, mikä on parantunut, mikä on edelleen epävarmaa ja miksi julkaistu versio on hyväksyttävä.