Messung beruflicher Kompetenzen - Institut für Berufspädagogik

5 Ergebnisse des Pilotprojektes KOMET
Der Anspruch der Kompetenzdiagnostik ist es, berufliche Kompetenz und Kompetenzentwicklung
nicht nur evaluativ zu bewerten oder auf die Stichhaltigkeit der
berufspädagogischen Begründung zu achten, sondern mit psychometrischen Methoden
nachzuweisen, dass auf der Basis des Kompetenzmodells Testaufgaben entwickelt werden
können, mit denen Kompetenz und Kompetenzentwicklung gemessen werden kann. Dies gilt
ebenso für das Messen beruflicher Identität und beruflichen Engagements. Erst dies ist die
Voraussetzung für vergleichende Untersuchungen, die unabhängig von der subjektiven
Bewertung und den Prüfungstraditionen der jeweiligen Berufe von Lehrern und Ausbildern
vorgenommen werden kann. Dabei ist vor allem eine Schwierigkeit zu meistern, nämlich die
Bewertung der von den Testpersonen (hier: von Auszubildenden) vorgelegten Lösungen zu
den offenen Testaufgaben (Rating). Erst wenn die Bewertungen der Testergebnisse durch
die Rater hinreichend dicht beieinander liegen, wenn also ein entsprechend hoher Wert für
die Interraterreliabilität nachgewiesen werden kann, haben die Testaufgaben die Qualität
eines Messinstrumentes. Die im KOMET-Projekt erreichten Werte liegen über den in der
teststatistischen Literatur geforderten Werten. Schließlich lässt sich anhand eines multidimensionalen
Analyseverfahrens nachweisen, welche empirische Qualität das pädagogisch
begründete Kompetenzmodell mit seinen drei Kompetenzniveaus hat.
Die psychometrische Analyse hat ergeben, dass mit dem Kompetenzmodell eine gute
Grundlage zur differenzierten Erfassung beruflicher Kompetenz und Kompetenzentwicklung
gegeben ist. Zugleich ist die psychometrische Forschung herausgefordert, eine ganze Reihe
von grundlegenden Fragen zu untersuchen, die sich bei der Überführung des
Kompetenzmodells in ein Messmodell stellen (Martens/Rost 2008).
Das Testverfahren und die Testergebnisse müssen sich jedoch zuallererst als attraktiv und
unterstützend für die Gestaltung beruflicher Lernprozesse erweisen. Zu einer Fülle von
Fragen, die Lehrer/Ausbilder und Auszubildende bewegen, können umfangreiche Befunde
vorgelegt werden, so z. B. zu den Fragen:
- Wie attraktiv bewerten die Auszubildenden ihren Ausbildungsberuf?
- Welches Kompetenzprofil und -niveau erreichen die einzelnen Auszubildenden?
- Wie unterscheiden sich die Testleistungen von Testgruppen mit unterschiedlichen
Personenmerkmalen?
- Welche Ursachen sind für die Kompetenzunterschiede verantwortlich?
- Wie fällt der Kompetenzzuwachs zwischen den Ausbildungsjahren aus?
- Und vor allem: Mit welchen pädagogisch-didaktischen Maßnahmen können die
Kompetenzentwicklung und das berufliche Engagement der Auszubildenden gefördert
werden?
Die beteiligten Schüler erhalten als ein Feedback zu ihren Testergebnissen ein
Ergebnisblatt, dem sie entnehmen können, welches Kompetenzniveau sie erreicht haben
und wie sich die Punktwerte auf die Kompetenz verteilen (Abb. 12) Die Lehrer erhalten
Übersichten über die Testergebnisse, anhand derer sie Schlussfolgerungen über ihre
Unterrichtsgestaltung ziehen können (Abb. 13).
34