normalizarea

Normalizarea este procesul de aducere a unor valori, măsurători sau entități la o scară comună, astfel încât acestea să poată fi comparate sau analizate în mod coerent. În sens general, normalizarea urmărește să elimine diferențele neesențiale și să asigure consistența datelor.

În matematică și fizică, normalizarea poate însemna împărțirea unei mărimi la norma sa pentru a obține o magnitudine de unitate. În probabilități, aceasta asigură ca suma de probabilități să fie 1; în mecanica cuantică, funcția de undă este normalizată astfel încât probabilitatea totală să fie 1.

În statistică și informatică, normalizarea poate însemna scalarea datelor la un interval fix (de exemplu [0,1]) sau standardizarea acestora (transformarea pentru a avea media 0 și deviația standard 1). Scopul este comparabilitatea datelor și stabilizarea proceselor de învățare automată.

În baze de date, normalizarea reprezintă organizarea datelor în tabele și definirea relațiilor pentru a reduce redundanța și anomaliile. Se folosesc forme normale (1NF, 2NF, 3NF, BCNF etc.). Nivelul de normalizare afectează integritatea datelor și performanța interogărilor.

În lingvistică computațională și procesarea textului, normalizarea textului poate include transformări la formă canonică: eliminarea diacriticelor sau a spațiilor inutile, trecerea la minuscule, corecția ortografică, precum lematizarea sau stemmingul, pentru facilitarea analizei și căutării.