HANDBUCH - Bildungswerk der Hessischen Wirtschaft eV

Handbuch
� Mangelnde Trennschärfe der Beobachtungskategorien
� Schlechte Sicht/ungünstige Akustik: z. B. in zu kleinen/zu großen Räumen
� Reaktivität der Personen: untypisches Verhalten der Probanden in der Beobachtungssituation.
Um die Fehlerwahrscheinlichkeit in der Beobachtung zu minimieren, wird bei KomPo7 eine Reihe
von Maßnahmen ergriffen [vgl. BIBB 2007], z. B.:
� Einsatz ausschließlich von geschulten Beobachter/-innen
� mehrfache Wechsel in der Gruppenzusammensetzung der Beobachteten
� Rotations- und Mehraugenprinzip bei den Beobachter/-innen
� zeitliche Trennung von Beobachtung und Bewertung
� Bewertungen müssen an konkreten Beispielen aus dem Beobachtungsprotokoll belegt werden.
Das Berufsbildungswerk Waiblingen gGmbH hat im Rahmen der Entwicklung des Verfahrens
hamet2 Kriterien für den Beobachtungs- und Bewertungsprozess formuliert und im Akronym BAK-
QuER zusammengefasst, die im Rahmen von KomPo7 ebenfalls berücksichtigt werden:
Beobachten/Analysieren freie Beobachtung und Protokollierung
Kategorisieren Zuordnung zu Beobachtungskategorien im Anschluss an die Beobachtung
Qualifizieren Bewertung der Beobachtungen
Evaluation Überprüfung der Gültigkeit der Einzelbeobachtungen in einer Beobachterkonferenz
Response Abschluss einer Kompetenzfeststellung ist immer die individuelle
Rückmeldung der Ergebnisse an die Probanden
2.4. Verfahren zur Kompetenzfeststellung
Quelle: bbw Waiblingen gGmbH
Verfahren zur Kompetenzfeststellung müssen entsprechend der Testtheorie den Kriterien der Validität,
Reliabilität und Objektivität gerecht werden. Objektivität bezeichnet hierbei die Unabhängigkeit
des Verfahrens vom Messenden/Beobachter. Reliabilität gibt an, inwieweit unter gleichen Bedingungen
die gleichen Ergebnisse erreicht werden. Validität zeigt auf, wie genau ein Verfahren
den zu messenden Gegenstand erfasst.
Es hängt vom jeweiligen Verfahren und den zu bestimmenden Kompetenzkategorien ab, in welchem
Ausmaß diesen Kriterien entsprochen werden muss. Die Bandbreite reicht hierbei von
psychometrischen, psychologisch fundierten und statistisch abgesicherten Messverfahren bis hin
zu beobachtungsgestützten Verfahren.
Als mögliche Differenzierungskategorien für Verfahren zur Kompetenzfeststellung sind folgende
Punkte zu nennen:
� Standardisierungsgrad des Verfahrens
� Form der Kompetenzermittlung [bspw. papier- oder computergestützt]
9/21