Informatieinhoud

Informatieinhoud is een term die de hoeveelheid en de relevantie van informatie meet die een boodschap, document of dataset bevat. Het begrip verwijst naar wat voor de ontvanger werkelijk betekenisvol of bruikbaar is, en kan zowel kwantitatief als kwalitatief worden benaderd.

In de informatieleer wordt informatieinhoud vaak geoperationaliseerd via self-information: I(x) = -log2 p(x) bits, waarbij p(x) de kans is dat de uitkomst x optreedt. De verwachte informatie per boodschap wordt entropie genoemd: H(X) = E[I(X)]. Deze aanduideningen geven aan hoe onvoorspelbaar een bron is en hoeveel informatie gemiddeld per uitkomst kan worden gehaald.

In praktische toepassingen beïnvloedt de informatieinhoud de efficiëntie van communicatie en opslag. Berichten met hoge informatieinhoud zijn vaak minder voorspelbaar, wat ze informatief maakt, maar ze kunnen ook meer bandbreedte of opslag vereisen. Redundantie vermindert de netto informatie en kan juist nuttig zijn voor foutcorrectie en robuustheid.

Toepassingen omvatten datacompressie, informatiesystemen, linguïstische analyse en natuurlijke taalverwerking, evenals de evaluatie van documenten en informatiemiddelen. Het begrip onderscheidt zich van semantische inhoud: informatieinhoud gaat over de hoeveelheid en het potentieel aan informatie die feitelijk kan worden gemeten of gemaximaliseerd, vaak los van de betekenis zoals die voor een specifieke gebruiker geldt.