kielimallitoiminnoissa

Kielimallitoiminnoissa tarkoitetaan tekoälyyn perustuvien kielimallien toimintojen ja käytäntöjen kokonaisuutta. Siihen kuuluu mallien kyky tuottaa ja ymmärtää tekstiä, vastata kysymyksiin, kääntää, tiivistää sekä hoitaa muita kielellisiä tehtäviä. Toiminnot voivat toteutua sekä paikallisissa järjestelmissä että pilvipalveluissa tarjottavien rajapintojen kautta, ja niihin liittyy sekä teknisiä että eettisiä näkökohtia.

Tekninen perusta koostuu suurista kielimalleista, jotka perustuvat transformer-arkkitehtuuriin ja oppivat massiivisista tekstidatoista. Kielimallit käsittelevät tekstiä tokenisoinnin kautta, huomioivat kontekstin ja käyttävät dekoodausmenetelmiä todennäköisyyksiin perustuvien vastauksien muodostamiseen. Mallit voivat olla ennalta koulutettuja ja/tai tarkennettuja (finetuning). Joissakin tapauksissa käytetään ihmisten palautteeseen perustuvaa vahvistettua oppimista (RLHF) laatutason ja turvallisuuden parantamiseen.

Kapabiliteetit kattavat muun muassa tekstin tuottamisen, kielen ymmärtämisen, käännökset, tiivistykset sekä kysymyksiin vastaamisen. Lisäksi ne voivat tukea luovaa kirjoittamista, tiedon hakua ja ohjelmointitehtäviä. Suomen kielen erityispiirteet, kuten taipuvat muodot ja rikkaat sanastot, vaikuttavat mallien suunnitteluun ja suomenkieliseen suorituskykyyn.

Rajat ja riskit liittyvät muun muassa hallusinaatioihin eli satunnaiseen virheellisen tiedon tuottamiseen, vinoumiin datan alkuperästä riippuen, sekä yksityisyyteen ja datan käyttöön. Energiankulutus ja laskentavaatimukset ovat huomioitavia tekijöitä. Turvallisuus- ja eettiset näkökulmat sekä säännöt voivat edellyttää valvontaa, kehityksen läpinäkyvyyttä ja käytön rajaamista.

Sovelluskohteita ovat esimerkiksi asiakaspalvelu, sisällöntuotanto, koulutus ja käännökset sekä ohjelmointituki. Käyttöönotossa huomioidaan tietosuoja, läpinäkyvyys, vastuunjaot sekä käyttäjän suostumus ja ohjeet. Tutkimus ja standardointi kehittävät mittareita, arviointia ja turvallisen, vastuullisen käyttökäytännön kehittämistä.