Messung maschineller¨Ubersetzbarkeit von ... - Parallele Systeme

5. Untersuchung der Textmerkmale auf Fehlerrelevanz
Untersuchungsergebnisse
Fehlerhäufigkeit Die Auswertung der Übersetzungen zeigte eine deutliche Fehlerabnahme
beim Verzicht auf Nominalklammern. Zwar waren die Sätze mit Nominalklammern
in der Regel geringfügig kürzer (insgesamt 2155 statt 2294 Wörter), wiesen aber insgesamt
eine deutlich höhere Fehlerzahl pro Wort auf, nämlich 0, 2183, was 941 Fehlern im
Textkorpus entspricht. Demgegenüber wurden im Textkorpus ohne Nominalklammern nur
815 Fehler entdeckt, was gleichbedeutend ist mit 0, 1776 Fehlern pro Wort. Es wurde also
eine Abnahme der absoluten Fehlerzahl um 13, 39 Prozent festgestellt und die eingangs
gestellte Hypothese damit bestätigt: Nominalklammern wirken sich deutlich negativ auf
die maschinelle Übersetzbarkeit eines Satzes aus (vgl. dazu auch Tabelle 5.8).
Satzart Wörter Fehler ∅ Fehler pro Wort 11
Mit Nominalklammer 2155 941 0,2183
Ohne Nominalklammer 2294 815 0,1776
Tabelle 5.8.: Nominalklammern und Fehlerhäufigkeit
Abbildung 5.8.: Absolute Veränderungen der Fehleranzahl ohne Nominalklammern für die
einzelnen Übersetzungsprogramme (Babel Fish grün, Personal Translator
2006 blau) und aufsummiert (rot, mit Werteangaben)
Veränderungen der Fehlerzahl Abbildung 5.8 zeigt die drei Kurven, die angeben, wie
sich die Fehlerzahl nach Bearbeitung der Originalsätze verändert hat, für Babel Fish
und Personal Translator sowie aggregiert. Durchschnittlich verlor ein Satz nach dem
Umschreiben 0, 63 Fehler.
Von den insgesamt 200 Übersetzungen der bearbeiteten Sätze wiesen nur 64 dieselbe
Anzahl Fehler auf wie die Originale. 97 Übersetzungen erzielten weniger Fehler, davon
11 Zur Berechnung der Fehlerzahlen siehe Abschnitt 4.4.1, letzten Absatz.
54