Käyttöarvioissa

Käyttöarvioissa tarkoitetaan arviointia, jossa tarkastellaan, miten tuote, palvelu tai järjestelmä toimii ja miltä sen käyttö näyttää todellisissa käyttötilanteissa.

Tavoitteet: selvittää käyttökuorma, hyöty, käyttökatkokset sekä käyttäjien tarpeisiin vastaaminen; ymmärtää kontekstia; tukea kehittämistä ja päätöksentekoa.

Menetelmät: käyttöönoton jälkeinen tutkimus yhdistää laadullisia ja määrällisiä menetelmiä: kenttäobservaatiot, haastattelut, kyselyt, päiväkirjat, loki- ja analytiikkadata; joskus etnografiset tutkimukset; think-aloud -menetelmää voidaan käyttää.

Tulokset toimivat kehityksen, käyttökokemuksen optimoinnin ja päätöksenteon perusteena sekä auttavat ymmärtämään, missä kontekstissa hyöty on suurin ja missä pullonkaulat.

Suhteet muihin evaluointimuotoihin: Käyttöarvio eroaa usein laboratoriokeskeisestä käytettävyystestauksesta, ja painottuu todelliseen käyttöön sekä pitkäaikaiseen seurantaan; sitä voidaan käyttää osana sekä formative- että summatiivisia arvioita sekä vaikutusarvioita.

Eettiset näkökulmat ja luotettavuus: huomioidaan käyttäjien yksityisyyden suoja ja suostumus; kerätään monipuolisia lähteitä; käytetään triangulaatiota ja hallitaan kontekstisidonnaisuus.

Käyttöarvioita sovelletaan esimerkiksi ohjelmistokehityksessä, terveydenhuollossa, koulutuksessa ja julkisessa hallinnossa.

Haasteet: muuttuva konteksti, pitkän aikavälin seuranta, datan hallinta ja analyysin monitahoisuus.