keeletöötlust

Keeletöötlus ehk loomuliku keele töötlus (NLP) on arvutiteaduse valdkond, mis tegeleb inimkeele mõistmise, tõlgendamise ja loomisega masinates. See hõlmab nii teksti kui kõne töötlemist ning eesmärk on pakkuda keeleteenuseid, mis on kasulikud inimestele ja teistele süsteemidele.

Peamised ülesanded hõlmavad morfoloogilist analüüsi, süntaktilist analüüsi, semantilist analüüsi ning nime entiteetide tuvastust (NER). Lisaks tegeletakse teksti klassifikatsiooni ja sentimentide analüüsi, masintõlke ning kõnetöötlusega, mis hõlmab kõnetuvastust ja kõne sünteesi.

Meetodid jagunevad reeglipõhiste süsteemide, statistiliste mudelite ja sügavõppe lahenduste vahel. Viimase kümnendi edu põhineb transformer-mudellidel ja suurte treeningandmete kasutamisel. Keele ressursid ja kõrgekvaliteetne märgendamine on kriitilised ning väiksematel keelidel, sealhulgas eesti keeles, on ressursid sageli piiratud.

Rakendused ulatuvad otsingumootoritest ja teabeteenustest virtuaalsete assistentideni, klienditeeninduse chatbotideni, masintõlkeplatvormideni ning dokumentide analüüsini ja sisuanalüüsini.

Väljakutsed hõlmavad konteksti mõistmise keerukust, mitmekeelsuse ja ressurside piiranguid, andmete privaatsust ning eetilisi küsimusi, nagu bias ja otsuste põhjendatavus. Eestis ning mujal kasutatakse NLP-d laialdaselt avalikes teenustes, ettevõtete toodetes ja teaduslikes rakendustes.