Messung maschineller¨Ubersetzbarkeit von ... - Parallele Systeme

5. Untersuchung der Textmerkmale auf Fehlerrelevanz
relativ zur Länge des Gesamttextes deutlich ab. Statt 879 Fehler wie im ersten übersetzen
Textkorpus traten im von Mehrdeutigkeiten weitgehend befreiten zweiten Textkorpus nur
noch 776 Fehler auf, also 103 weniger. Die Fehlerzahl pro Wort sank von 0, 2104 auf 0, 1848.
Insgesamt scheint es sich also durchaus zu lohnen, beim Verfassen eines zu übersetzenden
Textes auf mehrdeutige Worte soweit möglich zu verzichten.
Satzart Wörter Fehler ∅ Fehler pro Wort 4
Mit vielen Mehrdeutigkeiten 2089 879 0,2104
Mit weniger Mehrdeutigkeiten 2099 776 0,1848
Tabelle 5.4.: Mehrdeutigkeiten und Fehlerhäufigkeit
Veränderungen der Fehlerzahl Abbildung 5.3 stellt die Verteilung der Veränderung
der Fehlerzahlen bei der Gegenüberstellung der Übersetzungen der Originalsätze und
der wesentlich weniger Mehrdeutigkeiten enthaltenden bearbeiteten Sätze für die beiden
MÜ-Programme sowie im Gesamten dar. Durchschnittlich verlor ein Satz durch seine
Bearbeitung 0, 52 Fehler.
Ein Großteil der 200 Übersetzungen der bearbeiteten Sätze, insgesamt 92, zeigte keinerlei
Verbesserung oder Verschlechterung. Nur 23 Übersetzungen wiesen mehr Fehler auf als
vorher, nämlich 16-mal einen Fehler mehr, sechsmal zwei Fehler mehr und einmal sogar
vier. Demgegenüber standen 85 Übersetzungen, die weniger Fehler lieferten, wovon 52
einen und 25 zwei Fehler weniger aufwiesen. Eine starke Abnahme der Fehlerzahl zeigte
sich bei je drei Übersetzungen mit drei und vier Fehlern weniger und bei zweien mit sogar
sechs Fehlern weniger.
Abbildung 5.3.: Absolute Veränderungen der Fehleranzahl bei Reduktion von Mehrdeutigkeiten
für die einzelnen Übersetzungsprogramme (Babel Fish grün, Personal
Translator 2006 blau) und aufsummiert (rot, mit Werteangaben)
4 Zur Berechnung der Fehlerzahlen siehe Abschnitt 4.4.1, letzten Absatz.
44