Entwicklung eines Kollaborationsnetzwerkes - Bergische Universität ...

Die Precision bezogen auf die Relevanzmenge stellt eine einfach zu ermittelnde Kennzahl dar, um
Aussagen über die Qualität der Ergebnismenge eines Such‐ beziehungsweise Reduktionsverfahrens
treffen zu können. Allerdings werden die Wertigkeiten der in der Ergebnismenge enthaltenen
Kandidaten nicht berücksichtigt. Ergebnismengen können sich aufgrund der Wertigkeiten ihrer
Kandidaten jedoch erheblich voneinander unterscheiden, obwohl sie die gleiche Precision besitzen.
Während der Analysephasen (siehe Abschnitt 6.6) wurde daher der Wertigkeitsindex () als weitere
Kennzahl entwickelt. Dieser ermöglicht eine differenziertere Qualitätsbetrachtung, da er die
Wertigkeiten der Kandidaten berücksichtigt. Folgende Bedingungen müssen durch den
Wertigkeitsindex berücksichtigt werden:
1. Die Mengenposition auf der Werteskala soll keine Auswirkung auf den Wertigkeitsindex haben
(siehe Abbildung 6‐9).
Sind bezogen auf den Anforderungskatalog nur minderwertige Kandidaten in der Gesamtmenge
enthalten, so sollen trotzdem diejenigen Kandidaten ermittelt werden, die die Anforderungen am
besten erfüllen. Es bietet sich demnach an, die Wertigkeit der Ergebnismenge in Bezug zur
Referenzmenge zu bestimmen, da die Referenzmenge das bestmöglich erzielbare Ergebnis
repräsentiert.
Abbildung 6‐9: Wertigkeitsindex bei Mengenverschiebung auf der Werteskala
2. Innerhalb der Ergebnismenge soll die Verteilung der Wertigkeiten berücksichtigt werden (siehe
Abbildung 6‐10).
Hierzu bietet sich die Verwendung der mittleren quadratischen Abweichung (MSD) an, mittels der
große Abstände stärker in die Bewertung einfließen als kleine.
109