IT-Nachwuchsforschung in Österreich

OCG Förderpreis 2023
von Irina Scheitz
Software Engineering-Arbeit
ausgezeichnet
Die OCG vergibt jährlich den OCG Förderpreis
für ausgezeichnete Abschlussarbeiten
einer österreichischen Universität
im Bereich Informatik.
Lukas Stracke konnte die Fachjury mit
seiner hervorragenden Masterarbeit im
Bereich Software Engineering an der
Technischen Universität Graz überzeugen.
Betreut wurde die Arbeit von Franz
Wotawa, Professor für Software Engineering
an der TU Graz.
Lukas Stracke ist als Software Engineer in
Wien tätig.
OCG Präsident Thomas Mück, Lukas Stracke und Jury-Vorsitzende Gabriele Kotsis bei der Preisverleihung
(Foto: OCG).
Abstract der Arbeit „Test Suite Reduction with Checked Coverage“ von Lukas Stracke
Mit zunehmender Komplexität von Softwareprojekten wächst in der Regel auch die Anzahl an automatischen Software Testfällen,
welche in sogenannten Test Suites gruppiert werden. Die Zunahme an Testfällen und Suites führt oft zu längeren Laufzeiten
und höherer Ressourcenbelastung. Daher ist es wichtig, redundante Testfälle zu vermeiden, um die Effizienz des Testprozesses
zu erhöhen. Das Forschungsgebiet der Test Suite Reduction (TSR) zielt darauf ab, Test Suites zu optimieren, indem redundante
oder nicht benötigte Testfälle identifiziert und entfernt werden, gleichzeitig aber die Fehlererkennungsfähigkeiten der Test
Suites aufrechterhalten werden.
TSR verwendet häufig Code Coverage Metriken als Voraussetzungskriterium für die Auswahl der zu behaltenden Testfälle. Eine
neue und vielversprechende Metrik, die in dieser Arbeit untersucht wird, ist Checked Coverage. Im Gegensatz zu herkömmlichen
Metriken, wie Line Coverage, prüft Checked Coverage nicht nur, ob bestimmte Codeabschnitte ausgeführt wurden, sondern
auch, ob sie in den Testfällen tatsächlich überprüft wurden. In dieser Arbeit wurde die Eignung von Checked Coverage als
Voraussetzungskriterium für TSR untersucht. Dafür wurde ein Tool namens JSR (Java Test Suite Reduction Framework) entwickelt
und als Open Source Projekt veröffentlicht.
Dieses Tool ermöglicht die Reduktion von Test Suites anhand verschiedener Coverage Metriken, Reduktionsalgorithmen
und Konfigurationsoptionen. Die Ergebnisse der Evaluierung anhand von 10 Open-Source-Java-Projekten deuten darauf hin,
dass Checked Coverage-reduzierte Test Suites zwar vergleichbare Reduktionsgrade aufweisen, jedoch insgesamt eine etwas
schlechtere Fehlererkennung bieten als Line Coverage-reduzierte Suites. Des Weiteren stellte sich heraus, dass die Berechnung
von Checked Coverage zeitaufwendiger ist und zusätzliche Herausforderungen mit sich bringt. Neben diesen Ergebnissen stellt
das entwickelte Tool, JSR, eine solide Grundlage für TSR in der Forschung und in der Praxis dar. Es trägt dazu bei, eine Brücke
zwischen der TSR Forschung und fehlenden TSR Tools in der Praxis zu bauen, indem konkrete Anwendungsfälle für JSR identifiziert
wurden. Zusätzlich kann es durch seine Modularität zukünftige TSR Forschung unterstützen und beschleunigen. So
wurden zum Beispiel weitere Bachelorarbeiten basierend auf JSR verfasst. Die Ergebnisse und Werkzeuge sind als Open Source
verfügbar.
36 OCG Journal | 01 • 2024