Eeltöötlemist

Eeltöötlemist ehk pre-processing on protsessi etapp, mille eesmärk on teha algandmed sobivaks edasi töötlemiseks või analüüsiks. See hõlmab andmete, piltide, teksti või teiste andmete ettevalmistamist ning aitab parandada täpsust, järjepidevust ja töökindlust.

Valdkondade lõikes on see laialt levinud nii andmete kui ka pilditehnoloogia ja tekstitöötluse valdkonnas. Andmete eeltöötlemine sisaldab puhastamist, vigade parandamist, puuduvate väärtuste käsitlemist, duplikaatide eemaldamist, andmete normaliseerimist ja standardiseerimist, teisenduste ning skaleerimise rakendamist. Teksti eeltöötlemus hõlmab tokeniseerimist, stop sõnade eemaldamist, lemmatiseerimist või stemmingut ning vahendustekstide puhastamist. Pilditöötluses hõlmab eeltöötlus resampleerimist, müralähedust või denoisingut, kontrasti ja värvide kohandamist ning suuruse või raami muutmist.

Kasutusalad hõlmavad andmepõhist otsustamist, masinõpet ja statistilist analüüsi ning on kriitiline ettevalmistus kvaliteetse mudeli või analüüsi jaoks. Tootmisvaldkonnas võib eeltöötlemine tähendada materjalide ettevalmistust, näiteks puhastust, kuivamist või esmaseid töötlemisoperatsioone, et vähendada kõrvalekaldeid ja parandada lõpptoodangu kvaliteeti.

Seaduslikud ja kvalitatiivsed aspektid nõuavad dokumenteerimist ning reprodutseeritavust, et tagada jälgitavus ja usaldus. Eeltöötlemine on sageli esmane ning määrav samm andmete ja süsteemide töökindluse ning tulemuste usaldusväärsuse suurendamisel.