Messung maschineller¨Ubersetzbarkeit von ... - Parallele Systeme

5. Untersuchung der Textmerkmale auf Fehlerrelevanz
Abbildung 5.6.: Absolute Veränderungen der Fehleranzahl beim Ausfüllen von Ellipsen für
die einzelnen Übersetzungsprogramme (Babel Fish grün, Personal Translator
2006 blau) und aufsummiert (rot, mit Werteangaben)
überprüft, weil sie als besonders schwierig zu handhaben einzuschätzen war. Dabei wurde
gezählt, wie viele Fehler direkt auf diese Form von Auslassungen zurückzuführen waren,
wobei vorwiegend falsch gewählte Wörter berücksichtigt wurden, weil andere Fehler wie
beispielsweise eine Verfälschung der Wortstellung im übersetzen Satz auch auf andere
Änderungen am Ausgangssatz zurückzuführen sein könnten.
(Fehler verteilt auf 61 Sätze) Fehler vorher Fehler nachher Veränderung
Babel Fish 46 34 −12 ≡ −26, 09%
Personal Translator 2006 39 28 −11 ≡ −28, 21%
Gesamt 85 62 −23 ≡ −27, 06%
Tabelle 5.6.: Fehler vor und nach der Beseitigung abgetrennter Kompositionsglieder
Insgesamt traten in 61 der 100 Ausgangssätze derartige Ellipsen auf, die insgesamt 85
Übersetzungsfehler verursachten (siehe Tabelle 5.6). Nach der Bearbeitung wurden nur
noch 62 Fehler beobachtet, was einer Abnahme um 23 Fehler oder um 27, 06 Prozent
entspricht.
Allerdings ist die Auswirkung des Weglassens von abgetrennten Kompositionsgliedern
wesentlich geringer, wenn man berücksichtigt, dass die 61 Sätze, in denen diese Ellipsen
vorkamen, im ersten, unbearbeiteten Korpus insgesamt 532 Fehler aufwiesen. Dennoch
verbleibt eine spürbare Reduktion der Gesamtfehlerzahl um 23 · 100 = 4, 32%. Es scheint
532
also sehr sinnvoll zu sein, auf diese spezielle Form der Ellipsen zu verzichten, um Fehler
zu vermeiden.
Erklärungsversuche Insgesamt sind die Fehlerzahlen pro Wort in beiden übersetzten
Textkorpora relativ hoch. Und in der Tat werden durch Ellipsen erwartungsgemäß zahlreiche
Fehler verursacht (allein 85 durch abgetrennte Kompositionsglieder, wie bereits
48