Semantisches Clustering durch ein web-mining-basiertes Verfahren ...

5 Evaluation
Um die Qualität der Ergebnisse des Verfahrens zu Überprüfen wurde das semantische
Clustering und Card-Sorting-Experimente mit Versuchspersonen auf die gleichen
Begriffsmengen (Sets) angewandt. Die Ergebnisse beider Verfahren wurden
anschließend miteinander verglichen. Bei der Durchführung des semantischen Clusterings
wurden verschiedene Datengrundlagen und Assoziationsmaße verwendet, um
herauszufinden welche Kombination die besten Resultate lieferte.
5.1 Begriffsmengen (Sets)
Zur Evaluation wurden drei Sets mit Begriffen aus unterschiedlichen Bereichen
erstellt. Das erste Set beinhaltet ausgewählte Begriffe des täglichen Gebrauchs,
wie Früchte, Möbel oder Tiere. Das zweite Set enthält Menüpunkte einer grafischen
Benutzeroberfläche, wie beispielsweise Öffnen oder Speichern. Durch dieses
Set sollte festgestellt werden, in wieweit sich das semantische Clustering auch
auf Menüelemente anwenden lässt. Das dritte Set wurde zufällig generiert und
enthält Kategoriebezeichnungen eines Online-Auktionshauses. Durch die zufällige
Zusammenstellung dieses Sets konnte eine Beeinflussung auf die Ergebnisse der
Experimente ausgeschlossen werden.
Die Anzahl der zu bildenden Gruppen, ergab sich aus der Anzahl der Kategorien
aus denen die Begriffen stammten. Dem Verfahren und den Versuchspersonen
waren nur die Begriffe bekannt und nicht die Kategoriebezeichnungen.
Nachfolgend werden die Sets mit den Kategorien und den zugehörigen Begriffe
aufgelistet.
21