Paper - Hogeschool Gent

Hoofdstuk 5. Resultaten 35
Beoordelingsparameters
De beoordeling van de uitgewerkte technologieën gebeurt aan de hand van enkele stan-
daardparameters. Deze zijn respectievelijk de precision (P), de recall (R), de F1 measure
(F1), de true positive rate (TPR) en de false positive rate (FPR). Om deze begrippen te ver-
duidelijken, wordt gebruikgemaakt van volgende terminologie, samengevat in onderstaande
tabel:
Beoordeling
Werkelijkheid
true false
true true positive (TP) false positive (FP)
false false negative (FN) true negative (TN)
Tabel 5.1: Een overzicht van de soorten beoordelingen.
False positives en false negatives worden ook wel type I en type II fouten genoemd.
De grootheden voor de beoordelingen worden nu als volgt gedefinieerd:
T P
T P +F P
De fractie van het aantal positief geklasseerde documenten die juist geklasseerd zijn.
precision =
T P
T P +F N
De fractie van het aantal positive documenten die gevonden zijn.
recall =
2×P ×R
P +R
Het gewogen gemiddelde van de precision en de recall.
F1 measure =
true positive rate =
T P
P
= T P
T P +F N
Dit komt overeen met de recall.
false positive rate =
F P
N
= F P
F P +T N
In de tests wordt gestreefd naar een algoritme die een zo goed mogelijke afweging maakt
tussen precision en recall. De F1 measure moet dus maximaal zijn. Er moet opgemerkt
worden dat alle concrete cijfergegevens afkomstig zijn uit eigen tests, geoptimaliseerd waar
mogelijk voor de eigen data.