Arviointi alkaa suunnitellusta käytöstä ja täydellisestä tietovirrasta
Ennen tarjoajien vertailua on määriteltävä selkeästi aiottu tehtävä. Pitäisikö palvelun toimittaa alustavia käännösluonnoksia, kääntää tekstejä selkokielelle vai varoittaa editoijia vaikeasti ymmärrettävistä kohdista? Sisältötyypit, kielet, kuukausittaiset määrät ja virheiden mahdolliset seuraukset ovat yhtä tärkeitä. Yleisten tuotetekstien palvelun on täytettävä erilaiset vaatimukset kuin lääketieteellisten neuvojen tai oikeudellisesti sitovien suorituskykytietojen työkalun.
Kartoita tyypillisen sisällön polku omasta järjestelmästäsi lopulliseen tulokseen. Tämä sisältää syöttö-, lähetys-, mallinkäsittely-, tulostus-, tallennus-, lokikirjaus-, tuki- ja mahdolliset varmuuskopiot. Tilitiedot ja tekniset tunnisteet voivat kulkea eri reittiä kuin näkyvä teksti. Vain kokonaiskuva paljastaa, mitä tietoja palveluntarjoaja todellisuudessa vastaanottaa ja mitkä tahot osallistuvat niiden käsittelyyn.
Tarkastele myös erikoistoimintoja erikseen. Tiedoston tuonti, käyttöliittymä, korjaushistoria tai jaettu termiluettelo voivat tallentaa lisätietoja, vaikka yksinkertainen tekstinsyöttöikkuna säilyttääkin hyvin vähän tietoa. Siksi arvioinnissa tulisi määrittää konkreettinen tuotevariantti ja aktivoidut asetukset. Yleiset lausunnot alustasta eivät riitä, jos suunniteltu työnkulku käyttää muita komponentteja.
Asiakassisältöä ei saa käyttää uudelleen ilman käyttäjän tietämystä.
Selvennä yksiselitteisesti, käytetäänkö syötteitä, tuotoksia ja korjauksia mallien koulutukseen vai parantamiseen. Termit, kuten "palvelun parantaminen", voivat kattaa hyvin erilaisia käyttötarkoituksia. Kyse ei ole vain siitä, koulutetaanko perusmallia edelleen. Ihmisen tekemä arviointi, testidatan luominen tai pysyvä sisällyttäminen esimerkkikokoelmiin muuttavat myös lähetetyn sisällön tarkoitusta.
Vaihdettavissa oleva koulutuksen käyttövaihtoehto on luotettava vain, jos sen laajuus on kuvattu selkeästi. Koskeeko asetus kaikkia tilin työtiloja, käyttöliittymiä ja käyttäjiä? Sisältääkö se myös virheilmoitukset, tukipyynnöt ja vapaaehtoiset arvioinnit? Palveluntarjoajan tulee selittää, milloin asetus tulee voimaan ja voidaanko aiemmin lähetetty sisältö aiemmista parannuslistoista poistaa. Piilotettu kytkin kullekin käyttäjälle ei yleensä riitä keskitetyn organisaatiopäätöksen tekemiseen.
Myös sallituille käyttötavoille on asetettava rajoituksia. Palvelu saattaa vaatia teknisiä tietoja laskutusta tai väärinkäytösten estämiseksi, mutta tämä ei anna rajoittamatonta pääsyä luottamuksellisiin teksteihin. Sopimuksen, tietosuojakäytännön ja tuoteasetusten on oltava samat. Jos markkinointisivut lupaavat asiakkaalle yksinomaisen käsittelyn, kun taas sopimusehdot sallivat laajan sisäisen käytön, tämä ristiriita on selvitettävä ennen käyttöä.
Käsittelypaikat ja käyttöoikeudet on määriteltävä selkeästi kullekin avainkomponentille.
Lauseke "EU-hosting" ei kerro, missä kielipalvelu todellisuudessa suorittaa työnsä. Syötetiedot voidaan tallentaa yhteen alueeseen ja käsitellä toiseen. Lokit, varmuuskopiot, suodattimet ja tukijärjestelmät voivat noudattaa omia sijaintisääntöjään. Pyydä yleiskatsaus, jossa luetellaan erikseen tallennus, jatkuva mallinkäsittely, hallinta ja palautus. Tämä tekee selväksi, mikä sijaintisitoumus todella koskee valittua tuotetta.
Etäkäyttö lasketaan myös osaksi datapolkua. Työntekijät tai nimetyt tukitiimit voivat tarkastella sisältöä toisesta maasta, vaikka sinne ei siirrettäisi pysyvää kopiota. Palveluntarjoajan tulee selittää sallitut käyttöoikeudet, käyttöoikeuden syyt, käyttöoikeudet ja lokikirjausmenettelyt. Yleinen lausunto siitä, että tiedot eivät poistu datakeskuksesta, on epätäydellinen, jos ylläpito tai vianmääritys muilta alueilta on edelleen mahdollista.
Euroopan talousalueen ulkopuolelle tehtävien siirtojen osalta organisaatio tarvitsee sopivan oikeudellisen ja käytännön arvioinnin. Sopimukset voivat tarjota tärkeän perustan tälle, mutta ne eivät korvaa tietoa mukana olevista maista ja yrityksistä. Alueiden tai käyttöpolkujen muutoksista on ilmoitettava ajoissa. Vasta silloin tietosuoja, tietoturva ja asiaankuuluva osasto voivat arvioida, onko aiemmin sallittu käyttö edelleen perusteltua.
Lokit, säilytys ja poistaminen ovat keskeisiä kysymyksiä.
Monet palvelut tallentavat muutakin kuin vain näkyvän työn tuotoksen. Lokit voivat sisältää tekstikatkelmia, käyttäjätunnuksia, aikaleimoja, virheilmoituksia tai kokonaisia pyyntöjä. Kysy, mitä tietoja kerätään toiminnan, laskutuksen, tietoturvan ja tuen tarkoituksiin. Vastauksessa tulisi erottaa sisältötiedot ja puhtaasti tekniset mittarit. Ilman tätä erottelua riskiä tai asianmukaista säilytysaikaa ei voida arvioida luotettavasti.
Jokainen tietotyyppi vaatii selkeästi määritellyn säilytysajan tai selkeästi määritellyn tapahtuman sen poistamiseksi. Ilmaus, kuten "vain niin kauan kuin on tarpeen", jättää avoimeksi sen, pitäisikö sisältöä säilyttää tunteja, kuukausia vai vuosia. Tarkista aktiiviset järjestelmät, arkistot, tukitiedostot ja varmuuskopiot erikseen. Jos asiakkaat voivat valita lyhyempiä säilytysaikoja, on oltava selvää, mihin tallennuspaikkoihin ne liittyvät ja milloin muutos tulee voimaan.
Poiston on oltava todennettavissa jokapäiväisessä käytössä. Käyttäjien tulisi voida poistaa sisältöä ja työtiloja ilman, että tarvitsee tukea jokaisessa yksittäistapauksessa. Sopimuksen irtisanomiseen tai tietoturvapoikkeamiin tarvitaan luotettava prosessi, joka kattaa myös kopiot ja johdetut asiakastiedot. Lakisääteisesti vaaditut jäännöstiedot voivat jäädä, mutta ne tulee estää, rajoittaa ja ilmoittaa selkeästi niiden säilyttämisen syyn kera.
Alihankkijoiden ja tuotemuutosten ei pidä tulla yllätyksenä.
Ulkoiset tekoälypalvelut koostuvat usein useista yrityksistä. Tietokeskukset, mallintarjoajat, sisällönsuodattimet, analytiikkatyökalut ja tukikumppanit voivat kukin hoitaa osan käsittelystä. Hyödyllinen luettelo määrittelee kunkin merkittävän alihankkijan nimen, roolin ja käsittelypaikan. Pitkä kokoelma yritysten nimiä ilman määriteltyä toimintoa ei ole hyödyllinen, koska se ei paljasta, millä yrityksellä on pääsy asiakassisältöön tai teknisiin tietoihin.
Lista on pidettävä ajan tasalla ja linkitettävä luotettavaan muutoksenhallintaprosessiin. Asiakkaat tarvitsevat riittävästi aikaa uuden alihankkijan roolin ja sijainnin tarkistamiseen ennen heidän palkkaamistaan. Huomaamaton muutos verkkosivustolla ei riitä tähän tarkoitukseen. Ilmoitusten, vastalauseiden määräaikojen ja mahdollisten seurausten tulee olla riskiin nähden tarkoituksenmukaisia ja pääsopimuksen mukaisia.
Sama koskee merkittäviä tuotemuutoksia. Uusi malli, eri tallennusalue tai lisäanalytiikkatoiminto voi muuttaa olemassa olevaa arviointia. Toimittajan tulee tiedottaa, mikä muuttuu, milloin siirtyminen tapahtuu ja mitkä asetukset säilytetään. Seurauksellisten käyttöönottojen osalta asiakkaan on voitava tarkastella uudelleen tärkeitä esimerkkejä tai palata väliaikaisesti hyväksi havaittuun versioon.
Kielen laatu näkyy vain tosielämän sisällössä ja tehtävissä.
Vakuuttava demonstraatio ei vielä ole osoitus jokapäiväisestä työsuorituksesta. Testaa omaa tyypillistä ja haastavaa sisältöäsi, mukaan lukien tekniset termit, numerot, negaatiot, ehdot ja puutteelliset lähteet. Kaikkien ehdokkaiden tulisi saada samat esimerkit ja ohjeet. Säilytä aluksi joitakin vertailukelpoisia tekstejä osoittaaksesi, miten palvelu käsittelee uutta sisältöä, ei vain valmiiksi valmisteltua valikoimaa.
Johdonmukainen merkitys on tärkeämpää kuin viimeistelty tyyli. Arvioijien tulisi verrata suoraan tuotosta ja lopputulosta ja huomioida mahdolliset muutokset määräaikoihin, poikkeuksiin, vastuisiin tai lukuihin. Puutteet ja vapaasti lisätyt selitykset ovat yhtä tärkeitä. Selkokielen osalta parempi luettavuuspistemäärä ei riitä. Lukijoiden on kyettävä löytämään keskeiset tiedot, ymmärtämään ne oikein ja soveltamaan niitä omaan tehtäväänsä.
Mittaa lopulliseen versioon johtavaa prosessia. Tähän sisältyvät tekniset korjaukset, kieliopilliset tarkistukset, tietojen syöttö ja uudelleentarkastus. Sekunneissa ilmestyvä tulos voi olla kallis ja hidas piilotetun uudelleentyöstön vuoksi. Erota pienet tyylilliset mieltymykset ja vakavat merkitysvirheet. Tällaiset virheet ratkaisevat, sopiiko palvelu luonnokselle, kapeasti määritellylle sisällölle vai ei ollenkaan.
Tietoturvan ja tuen on oltava luotettavaa haastavissa tilanteissa.
Tutki, miten käyttöoikeudet on suojattu ja käyttöoikeudet myönnetty. Monivaiheisen todennuksen, erillisten roolien ja auditoitavien käyttöoikeuslokien tulisi olla käyttötarkoituksen mukaisia. Luottamuksellisen sisällön osalta on ratkaisevan tärkeää määrittää, onko tukihenkilöstöllä oletuskäyttöoikeudet vai onko käyttöoikeudet myönnettävä tapauskohtaisesti. Salaus on arvokasta, mutta se ei kerro, kenellä on valtuudet purkaa salaus ja muokata sisältöä käytön aikana.
Tietoturvahäiriö vaatii selkeät menettelytavat. Palveluntarjoajan tulee selittää, milloin asiakkaille ilmoitetaan, mitä tietoja he saavat ja miten lisäselvitykset toimitetaan. Yleinen tukiosoite voi olla liian hidas vakavassa häiriössä. Nimetyt yhteyshenkilöt, saatavuusajat ja koordinoitu eskalointiprosessi auttavat organisaatiota rajaamaan asianomaisen sisällön ja täyttämään omat velvoitteensa ajallaan.
Jopa rutiininomaiset toimintahäiriöt osoittavat palvelun kypsyyden. Tyhjän, katkaistun tai väärin luodun tulosteen on oltava tunnistettavissa. Käyttäjät tarvitsevat selkeän viestin ja luotettavan seuraavan vaiheen. Kysy myös, miten toistuvia laatuongelmia tutkitaan. Palveluntarjoajan tulee sisällyttää konkreettisia esimerkkejä, antaa vankkaa palautetta ja seurata osoitettavissa olevia parannuksia sen sijaan, että vain toistaisi yleisiä käyttöohjeita.
Sopimuksen ja dokumentaation on kuvattava sama palvelu.
Tuotekuvauksen, pääsopimuksen, tietojenkäsittelysopimuksen ja tietoturvadokumentaation tulee olla yhdenmukaisia. Kiinnitä erityistä huomiota sallittuun tiedon käyttöön, sijainteihin, tallennukseen, alihankkijoihin, saatavuuteen ja tukeen. Mainoslupauksella on vain vähän arvoa, jos sopimus jättää sen tulkinnanvaraiseksi tai rajoittaa sitä vakavasti. Olennaiset vaatimukset kuuluvat vankkaan dokumentaatioon, eivätkä vain esitykseen tai myyntitiimin henkilökohtaiseen sähköpostiin.
Todisteiden on katettava kyseinen palvelu ja asiaankuuluva ajanjakso. Sertifikaatit, auditointiraportit ja tekniset kuvaukset voivat olla arvokkaita, mutta niiden nimet yksinään eivät todista paljoakaan. Lue, mitkä järjestelmät, sijainnit ja yritykset on auditoitu ja mitä poikkeuksia sovelletaan. Tietoturvasertifikaatti ei vahvista äänenlaatua. Vastaavasti yleinen malliarviointi ei kerro mitään käyttöoikeuksien hallinnasta, tietojen poistamisesta tai sovitusta tuotekokoonpanosta.
Myös vastuut tarvitsevat selkeät rajat. Kuka ylläpitää terminologiaa, tarkistaa ongelmat, raportoi poikkeamat ja päättää uusista ominaisuuksista? Palveluntarjoajan ei pitäisi vain siirtää omia vastuitaan käyttäjälle. Toisaalta organisaatio on edelleen vastuussa asianmukaisesta käytöstä ja hyväksynnästä. Selkeästi määritellyt vastuut estävät tärkeiden tarkistusvaiheiden katoamisen hankinta-, IT-, tietosuoja- ja toimitusosastojen välillä.
Järjestetty poistuminen suojaa sisältöä ja toimintakykyä.
Jo ennen sopimuksen alkamista tulisi määrittää, mitkä tiedot voidaan viedä. Tämä voi sisältää sisällön, ongelmat, terminologialuettelot, hyväksytyt esimerkit, asetukset ja tarkistusmuistiinpanot. Vienti on hyödyllinen vain, jos sen muoto on luettava ja asianmukaisesti dokumentoitu. Tee pieni testi varmistaaksesi, että tärkeät työversiot voidaan todella tallentaa ja käyttää uudelleen toisessa työkalussa tai vakiotoimitusprosessissa.
Selvitä määräajat ja kustannukset sopimuksen päättymisen jälkeen. Kuinka kauan vienti on saatavilla, milloin tilit lukitaan ja mitä lisätukikustannuksia sovelletaan? Hyvin lyhyt siirtymäaika voi tehdä vaihdosta tarpeettoman riskialtista. Jos julkaisut ovat käynnissä, organisaatio tarvitsee myös varmuuskopioratkaisun kiireelliselle sisällölle. Siirrettävyys ei tarkoita kaikkien mallitoimintojen ottamista mukaan, vaan pikemminkin omien tietojen ja päätösten palauttamista käyttökelpoisessa muodossa.
Viennin vahvistamisen jälkeen tiedot poistetaan. Palveluntarjoajan tulee käsitellä aktiivista dataa, tukikopioita ja sitä seuraavaa varmuuskopioiden poistamista läpinäkyvästi. Tarkista myös, onko asiakaskohtaisia mukautuksia tai hakumuisteja säilytetty. Kirjallinen sopimus selkeyttää tietoja, mutta ei korvaa varhaista ja perusteellisesti testattua palautusta. Jokainen, joka huomaa vasta sopimuksen viimeisenä päivänä, että sanastoja ei voida viedä, on menettänyt tärkeimmän käytännön suojansa.
Rajoitettu kokeilu johtaa järkevään päätökseen.
Tiivistä vaatimukset yhteisarvioinnissa. Tiedonkulun on oltava linjassa sallitun sisällön kanssa, sopimusvelvoitteiden on oltava todennettavissa ja kirjallisen tuotoksen on tuettava tosielämän tehtäviä. Yksilölliset vahvuudet eivät saa peittää perustavanlaatuisia puutteita. Erinomainen teksti ei oikeuta epäselvää koulutuskäyttöä, eikä hyvä sertifikaatti kompensoi usein muuttuvia merkityksiä.
Aloita rajoitetulla käytännön sovelluksella, selkeästi määritellyillä käyttäjillä ja sisällöllä, jota ei julkaista hallitsemattomasti. Seuraa laatua, korjausaikaa, häiriöitä, tukea ja varsinaisia lokeja. Testaa myös tiedon vientiä ja poistopyyntöä. Tällä tavoin arvioit paitsi lupauksia myös prosesseja, joihin organisaatio luottaa myöhemmin normaalissa toiminnassa ja käytöstäpoiston aikana.
Päätöksen tulisi dokumentoida sallitut tehtävät, poissuljettu sisältö, tarvittavat auditoinnit ja seuraavan arvioinnin päivämäärä. Uudet alihankkijat, mallimuutokset, eri alueet tai toistuvat virheet voivat muuttaa aiempaa hyväksyntää. Selkeiden vastuiden ja muutaman edustavan testitapauksen avulla arviointi pysyy hallittavana. Palveluntarjoajaa ei sitten luokitella kategorisesti hyväksi tai huonoksi, vaan pikemminkin sopivaksi tiettyyn, vastuulliseen käyttötapaukseen.