manklassifiserer

Manklassifisering er prosessen der mennesker manuelt klassifiserer innhold, data eller objekter i forhåndsdefinerte kategorier eller taxonomier. Dette står i kontrast til automatisert klassifisering som benytter algoritmer og maskinlæring. Begrepet brukes ofte i sammenhenger der presise og kontekstuelle vurderinger er viktige og der maskinlæringsmodeller trenger menneskelig veiledning.

Bruksområder for manklassifisering omfatter blant annet merking av treningsdata for overvåket læring, innholdsmoderering, tagging av metadata, arkiv- og bibliotekarbeid, samt lingvistisk annotering i språkteknologi. I praksis kan oppgaver være å merke bilder med objekter og scenarier, merke tekster etter følelsesfylte nyanser eller tilordne dokumenter til passende emneområder. Ofte brukes mannsklassifisering i kombinasjon med automatiske metoder i såkalt menneske-i-the-loop.

Prosessen innebærer vanligvis utvikling av en taksonomi og detaljerte annotasjonsretningslinjer, rekruttering og opplæring av annotatører, og gjennomføring av merkingsoppgaver. Kvalitetssikring skjer gjennom mål for intermerkingsavvik (for eksempel Cohen’s kappa eller Krippendorff’s alpha), kalibreringssesjoner og, ved behov, avgjørelse av meningstvister av eksperter. I crowdsourcing-sammenhenger kan oppgavene distribueres bredt med redundans for å sikre pålitelighet.

Fordeler med manklassifisering inkluderer evnen til nyanserte og kontekstuelle vurderinger, håndtering av sjeldne eller komplekse kategorier og muligheten til å tilpasse taksonomier til spesifikke domener. Ulemper er kostnader, tidsbruk, potensielle skjevheter og variabilitet mellom annotatører. Kvalitetsheving skjer ofte gjennom klare retningslinjer, trening og systematisk adjudikasjon.

Se også: dataetikett, annotasjon, inter-annotator agreement, menneske-i-the-loop.