Zusammenfassung - Otto-von-Guericke-Universität Magdeburg

10.3 Ausblick
10.3 Ausblick
Neben diesen Verbesserungswünschen, die sich unmittelbar für die Handschriftsuche ergeben,
existieren etwa im Bereich der so genannten multimodalen Daten weitere Herausforderungen
und Problemstellungen. Analog zur Suche in Handschriftdaten gibt beispielsweise
Techniken zur Suche in akustischen Sprachdaten, die unter dem Begriff keyword spotting
zusammengefasst werden können. Für den Fall von synchronisierten Strömen von Schriftund
Sprachdaten, also beispielsweise solchen Daten, die mit dem Audio-Notebook-Gerät aus
[Sti97], den Smartpen-Geräten der Firma Livescribe [Liv07] oder dem Dynomite-System aus
[WSS97] (siehe Abschnitt 2.2.1) aufgezeichnet wurden, ergäbe sich aus Sicht des Benutzers
möglicherweise der Wunsch, sowohl in den Schrift-, als auch in den Sprachdaten zu suchen.
Eine gesprochene Suchanfrage nach einem bestimmten Wort sollte sowohl die entsprechenden
Vorkommen dieses Wortes in den Sprachdaten auffinden, als auch die Stellen in den Handschriftdokumenten,
die zu den selben Zeitpunkten geschrieben wurden. Gleiches möge für den
umgekehrten Fall einer handschriftlichen Suchanfrage gelten. Das generelle Konzept dieser
Idee wurde etwa in [SVVD04] beschrieben.
Sehr interessant für den Benutzer wäre in diesem Zusammenhang darüber hinaus eine medienübergreifende
Suche, die Suchanfragen in jedweder Modalität akzeptiert und automatisch
Dokumente unterschiedlicher Medientypen berücksichtigte. Das Ziel wäre also etwas,
das transmodales Retrieval genannte werden könnte. Hierbei könnte beispielsweise der Benutzer
seine Suchanfrage in Form eines handschriftlichen Wortes stellen und das System wäre
in der Lage, sowohl getippte wie auch handschriftliche Dokumente zu finden, die dieses
Wort enthalten, darüber hinaus aber auch Tondokumente, Bilder und weitere Medientypen,
die das Suchwort enthalten. Zu diesem Zweck wäre es vermutlich nötig, die entsprechenden
semantischen Informationen aus den verschiedenen Medientypen zu gewinnen und in einer
einheitlichen, universellen Form zu verarbeiten.
139