samsvarsrate

Samsvarsrate är ett mått som beskriver hur stor andel av observationerna där två eller flera bedömare eller mätningar är överens med varandra. Det används ofta för att beskriva interbedömarreliabilitet eller kodningskonsekvens i kvalitativ forskning, klinisk diagnostik och andra sammanhang där människor eller system kategoriserar data.

Beräkning sker genom att skapa en korsflödesmatris (confusion matrix) för de aktuella bedömningarna. Antalet fall där bedömningarna överensstämmer räknas som diagonala celler i matrisen. Samsvarsrate = (antal överenskomna fall) delat med totalt antal fall, multiplicerat med 100 för att få procent. Till exempel, om två bedömare klassificerar 100 fall och överenskommer i 78 fall blir samsvarsrate 78%.

Samsvarsrate är enkelt att förstå, men har begränsningar. Den tar inte hänsyn till överenskommelse som uppstår av slumpen och kan vara missvisande när fördelningen av kategorier är skev (prevalensproblematik). Den ger ingen information om vilken typ av överenskommelse som råder eller hur mycket överenskommelsen överensstämmer med ett infalt alternativ.

För att justera för slumpmässig överenskommelse används andra mått som Cohen’s kappa för två bedömare eller Krippendorff’s alpha när fler bedömare eller olika mätnivåer ingår. Vid fler än två bedömare kan man också använda Fleiss’ kappa eller beräkna medelparvis samsvarsgrad. Samsvarsrate används ofta som ett snabburval eller som kompletterande information i rapportering av reliabilitet och kodningskvalitet.