Zusammenfassung - Otto-von-Guericke-Universität Magdeburg

ecall
1
0.8
0.6
0.4
0.2
precision, recall precision
0.52
0.5
threshold 1
0.48
0.46
0.44
0.42
0.4
0.38
0.36
0.36
8.3 Vorgehen bei der Evaluation
0.38 0.4 0.42 0.44 0.46 0.48 0.5 0.52 0.54
threshold 2
Abbildung 8.7: Exemplarische Precision- und Recallflächen bei der multialgorithmischen Fusion
zweier Systeme auf der Entscheidungsebene mittels Mengenvereinigung
zelsysteme. In Abbildung 8.7 sind exemplarisch die Resultate der Fusion zweier Einzelsysteme
mittels Vereinigungsmenge als dreidimensionales Diagramm dargestellt. Die Achsen
threshold1 und threshold2 stehen für die Ähnlichkeitschwellwerte der Einzelsysteme und die
durch Gitternetze dargestellten Flächen beschreiben die Precision und den Recall. Im Gegensatz
zu zweidimensionalen Diagrammen für die Darstellung der Abhängigkeit der Precision
und des Recall vom Ähnlichkeitsschwellwert eines einzelnen Retrievalsystems (vergleiche
etwa Abbildung 8.6), sind im vorliegenden dreidimensionalen Diagramm in Abbildung 8.7
die Funktionswerte der Schnittline beider Flächen nicht leicht erkennbar. Aus diesem Grund
wird im Folgenden für die grafische Darstellung der Evaluationsergebnisse einer multialgorithmischen
Fusion auf der Entscheidungsebene ein dreidimensionales Diagramm gewählt,
welches die F1-Werte als Fläche in Abhängigkeit der Ähnlichkeitsschwellwerten threshold1
und threshold2 abbildet. Abbildung 8.8 zeigt die F1-Fläche, welche sich aus den Werten in der
vorigen Abbildung ergibt. Diese Art der Darstellung scheitert jedoch bei der multialgorithmischen
Fusion auf der Entscheidungsebene von mehr als zwei Teilsystemen, da die Darstellbarkeit
mit zweidimensionalen Druckverfahren sowie das menschliche Vorstellungsvermögen
begrenzt sind.
Aufgrund der Abhängigkeit der Precision und des Recall von zwei Ähnlichkeitsschwellwerten
bei der Fusion zweier Systeme auf der Entscheidungsebene, ist es nicht möglich, eine
111