Ausbilder und Prüfer: Wie die Kompetenz derer erhalten bleibt, die prüfen

Cercle de chaises vides dans une salle de formation à l'aube, blocs-notes abandonnés et paperboard vierge

Zwei Prüfer beobachten dieselbe Simulatorklasse: dieselbe Besatzung, derselbe Ausfall, dieselbe Kommunikation. Auf dem Bewertungsbogen stuft einer die Handhabung des Aktionsplans auf das Mindestniveau ein, der andere hält sie für komfortabel. Keiner der beiden handelt böswillig – es ist ihre Kalibrierung, die auseinandergegangen ist. Die gesamte Einrichtung zur Aufrechterhaltung der Kompetenz von Ausbildern und Prüfern zielt auf dieses spezifische Problem ab: nicht die Handlung, sondern das Urteil zu erhalten und es mit dem der anderen abzustimmen.

Das Paradoxon des Bewerters: ein Urteil, das sich lautlos abnutzt

Die Kompetenz eines Piloten erhält sich fast von selbst: jede Linienetappe konfrontiert ihn mit der Maschine, dem Wetter, den periodischen Kontrollen, und die Abweichung zeigt sich schnell. Die eines Ausbilders ist bereits stärker abgeschirmt – vermitteln, eine beginnende Fehlerdiagnose stellen, die Schwierigkeit eines Szenarios dosieren sind Handlungen, die niemand bei jeder Sitzung überprüft. Die eines Prüfers erhält schließlich praktisch kein natürliches Feedback: eine zu großzügige Note löst keinen Vorfall am selben Tag aus, eine zu harte Note löst keinen Alarm aus. Der abweichende Prüfer erstellt perfekt plausible Bewertungen.

Der regulatorische Rahmen nimmt dieses Problem ernst: das Urteil ist eine verfallende Kompetenz, und ihr Verfall ist für denjenigen, der ihn erleidet, unsichtbar. Ein Prüfer spürt nicht, wie er nachsichtiger wird; er sieht „global bessere Kandidaten als früher“. Ein Ausbilder spürt nicht, wie er seine Anforderungen senkt; er findet seine Schüler „auf dem richtigen Niveau“. Keine Einrichtung, die auf Selbstbewertung basiert, kann dies ausgleichen.

Jeder Prüfer wird mit der Zeit nachsichtiger oder strenger, ohne es zu merken. Das Problem ist, dass niemand ihm sagt, dass seine Bewertungen nicht mehr mit denen anderer übereinstimmen. Deshalb gibt es Systeme, um das zu überprüfen.

Die systemische Antwort ist strukturell: jede Stufe der Ausbildungspyramide wird von der darüberliegenden Stufe beobachtet. Die Besatzung wird vom Ausbilder ausgebildet, der Ausbilder wird vom Prüfer kontrolliert, der Prüfer wird von einem Senior-Prüfer oder Inspektor beobachtet, und die Behörde schließt die Schleife, indem sie zu allen Stufen durch die Standardisierung zurückkehrt. Der Wert einer Kontrolle – der Wert, den ein Rekrutierer, ein Versicherer oder eine ausländische Behörde einer Qualifikation beimisst – beruht vollständig auf der Integrität dieser Kette.

Überwachungskette der BewerterVier Kästchen, die von links nach rechts verbunden sind: die Behörde und der Senior-Prüfer beobachten den Prüfer, der den Ausbilder kontrolliert, der die Besatzung ausbildet. Ein gestrichelter Pfeil geht von der Behörde zum Ausbilder, unter dem Schema hindurch: die Standardisierungsschleife.Behörde,SeniorPrüferAusbilderBesatzungbeobachtetkontrolliertbildet ausStandardisierungsschleife
Die Kompetenz des Bewerters wird durch die darüberliegende Stufe aufrechterhalten. Jedes Glied wird vom nächsten beobachtet, und die Standardisierung kommt von der Behörde zurück: niemand kalibriert sich allein.

Drei Wege, ein Zyklus: die Mechanik der Revalidierung

Im europäischen System hat ein Ausbilderzertifikat typischerweise einen Zyklus von drei Jahren, und seine Revalidierung spielt sich nicht am Fälligkeitsdatum ab, sondern über die gesamte Dauer des Zyklus. Der Mechanismus basiert auf drei Wegen: ein nachgewiesenes Volumen an Ausbildungsaktivität, ein Auffrischungsseminar und eine Kompetenzbewertung, durchgeführt von einem zugelassenen Prüfer. Je nach Kategorie des Zertifikats reichen zwei dieser drei Wege aus – und das ist eine bewusste Gestaltung, keine Erleichterung.

Zwei Männer in einer Kontrollzentrale prüfen ein Tablet, das eine uniformierte Person zeigt, umgeben von Flugdaten- und Radarmonitoren.
Expertenüberwachung sichert Flugsicherheit durch Echtzeitüberwachung und Bewertung.

Ein Airbus A320-Pilot mit 10 Jahren Erfahrung absolviert eine Revalidierung. Sein Ausbilder hat sein Zertifikat durch 30 durchgeführte Trainings (Aktivität), ein Seminar im letzten Jahr (Auffrischung) und eine Kompetenzbewertung vor 2 Jahren (Bewertung) aufrechterhalten. Da zwei dieser drei Wege ausreichen, bleibt sein Zertifikat gültig.

Die Logik lohnt sich, genauer betrachtet. Der aktive Ausbilder beweist seine Aufrechterhaltung durch das, was er bereits tut: seine dokumentierte Aktivität und ein Seminar, das ihn neu kalibriert. Der wenig aktive Ausbilder kann sich nicht auf eine Praxis stützen, die er nicht hatte: die Kombinationen zwingen ihn mechanisch zur Bewertung in der Situation, d. h. zur direkten Beobachtung. Die Einrichtung lenkt jedes Profil zu der Kontrolle, die es tatsächlich benötigt. Und damit ein sehr aktiver Ausbilder nicht unendlich dem äußeren Blick entgeht, kehrt die Kompetenzbewertung periodisch von Rechts wegen zurück.

Revalidierungszyklus eines AusbilderzertifikatsZeitstrahl eines typischen 36-Monats-Zyklus. Eine durchgezogene Linie zeigt die über den gesamten Zyklus angesammelte Ausbildungs Erfahrung, ein kurzer Block zeigt das während des Zyklus besuchte Auffrischungsseminar, ein Punkt zeigt die vor dem Fälligkeitsdatum platzierte Kompetenzbewertung. Zwei dieser drei Wege reichen für die Revalidierung aus.Zwei von drei Wegen reichen ausFälligkeitsdatumErfahrungSeminarBewertung036 Monate
Die Revalidierung spielt sich über den gesamten Zyklus ab, nicht am Fälligkeitsdatum. Die Erfahrung sammelt sich kontinuierlich, das Seminar wird in den Zyklus eingebracht, die Bewertung wird vor dem Fälligkeitsdatum platziert: zwei Wege reichen aus, aber die Bewertung kehrt periodisch von Rechts wegen zurück.

Das Fälligkeitsdatum ändert jedoch die Art der Anforderung. Solange das Zertifikat gültig ist, ist die Verlängerung eine Frage des Nachweises: Aktivitätsprotokolle, Seminarbestätigung, Bewertungsbericht. Sobald das Fälligkeitsdatum überschritten ist, kehrt sich die Last um – die erneute Ausstellung erfolgt durch eine Auffrischung, deren Inhalt von einer Ausbildungsbehörde bestimmt wird, gefolgt von einer Bewertung, die nicht mehr optional ist. Dasselbe Privileg kostet ohne gemeinsamen Maßstab ungleich mehr, um es zurückzugewinnen, als es aufrechtzuerhalten.

Verlängerung oder erneute Ausstellung je nach FälligkeitsdatumFlussdiagramm: Wenn das Fälligkeitsdatum des Zertifikats nicht überschritten ist, wird die Verlängerung durch die Wege des Zyklus erreicht; wenn es überschritten ist, erfordert die erneute Ausstellung eine von einer Behörde definierte Auffrischung, gefolgt von einer Kompetenzbewertung.ZertifikatFälligkeitsdatumüberschritten?neinjaVerlängerungWege des Zyklus,einfach nachzuweisenerneute AusstellungAuffrischungdann Bewertungdas Fälligkeitsdatum ändert die Art der Anforderung
Das Fälligkeitsdatum ändert die Art der Anforderung. Vor ihm wird die Verlängerung durch die Wege des Zyklus nachgewiesen; nach ihm erfordert die erneute Ausstellung eine von einer Behörde definierte Auffrischung, gefolgt von einer Bewertung.

Der Prüfer fügt eine weitere Stufe hinzu: seine Genehmigung, die in den meisten Fällen auf einem vorausgesetzten Ausbilderzertifikat basiert, folgt ihrem eigenen Zeitplan. Seine Aufrechterhaltung kombiniert eine Mindestaktivität an durchgeführten Prüfungen, eine periodische Standardisierung bei der Behörde – oder von ihr anerkannt – und, als zentraler Punkt der Einrichtung, eine durchgeführte Prüfung unter direkter Beobachtung durch einen Inspektor oder einen Senior-Prüfer. Und die Genehmigung überlebt nicht die Titel, die sie tragen: Ein Prüfer, dessen zugrunde liegende Qualifikation erlischt, verliert im selben Zug das Recht zu prüfen.

Zwei Aufrechterhaltungsregime: Der Ausbilder erhält seine Praxis, der Prüfer erhält seine Kalibrierung
Aspekt Ausbilderzertifikat Prüfergenehmigung
Typischer Zyklus Drei Jahre Drei Jahre, mit eigenem Zeitplan
Wege der Aufrechterhaltung Zwei von drei Wegen: Ausbildungsvolumen, Auffrischungsseminar, Kompetenzbewertung Mindestaktivität an durchgeführten Prüfungen, Standardisierung bei der Behörde, durchgeführte Prüfung unter Beobachtung
Wer beobachtet Ein zugelassener Prüfer bei der Kompetenzbewertung Ein Inspektor der Behörde oder ein Senior-Prüfer
Nach dem Fälligkeitsdatum Von einer Behörde definierte Auffrischung, dann Bewertung Vollständige Neukalibrierung vor jeder neuen Prüfung
Was der Zyklus schützt Die Qualität der Weitergabe Die Konstanz und Vergleichbarkeit des Urteils

Die Falle: eine Prüfung mit einer abgelaufenen Genehmigung durchführen. Der Zeitplan des Prüfers ist von dem seiner Flugqualifikationen und seines Ausbilderzertifikats getrennt, und nichts blockiert materiell die Durchführung einer Kontrolle außerhalb der Gültigkeit. Die Prüfung ist dann wertlos: Der Kandidat glaubt, eine Verlängerung zu haben, die er nicht hat, die Entdeckung erfolgt Monate später im Rahmen einer Überprüfung, und die Regulierung betrifft Kandidaten, Betreiber und Behörde.

Der richtige Reflex: einen Zeitplan für die Bewerterfunktionen führen, getrennt von dem der Qualifikationen, und die Fenster früh nutzen. Seminar am Anfang des Fensters platziert, unter Beobachtung durchgeführte Prüfung ab dem Öffnen des letzten Zeitraums geplant, Aktivitätsprotokoll laufend geführt: Jedes früh genutzte Element verwandelt ein Fälligkeitsdatum in eine einfache Formalität.

Die Standardisierung: die Inter-Judge-Treue herstellen

Das Auffrischungsseminar ist das am wenigsten verstandene Element der Einrichtung. Aus der Ferne betrachtet, ist es ein Tag mit regulatorischen Auffrischungen; aus der Nähe betrachtet, ist es ein Kalibrierungsbock. Der Kern der Sitzung, in den Einrichtungen, die es ernst nehmen, sieht so aus: eine gefilmte oder nachgespielte Sitzung, individuell von jedem Teilnehmer auf dem aktuellen Bewertungsbogen bewertet, dann der Vergleich der Noten – und es ist die Abweichung zwischen den Prüfern, nicht die Leistung der beobachteten Besatzung, die zum Gegenstand der Arbeit wird.

Denn der Bewertungsbogen reicht nicht aus. Gut formulierte Verhaltensmarker reduzieren die Streuung, aber sie heben sie nicht auf: Zwei ehrliche Leser desselben Referenzrahmens vergeben unterschiedliche Noten, jeder verankert in seiner eigenen Geschichte, was eine „gute“ Besatzung ist. Die Inter-Judge-Treue – die Eigenschaft, die dafür sorgt, dass eine Note dieselbe Bedeutung hat, unabhängig vom Bewerter – wird nicht in einem Handbuch verfügt: Sie wird durch die wiederholte Konfrontation der Urteile über gemeinsame Fälle hergestellt.

Abweichung der Strenge zwischen zwei PrüfernZwei Glockenkurven auf einer Achse der vergebenen Noten: Die Verteilung des Prüfers A, durchgezogen, erreicht einen niedrigeren Punkt auf der Skala als die des Prüfers B, gestrichelt. Ein Doppelpfeil markiert die Abweichung der Strenge zwischen den beiden Spitzen bei gleicher beobachteter Leistung.Abweichung der StrengeA – durchgezogenB – gestricheltvergebene NoteHäufigkeit
Zwei ehrliche Prüfer bewerten nicht gleich. Bei gleicher Leistung ist die Verteilung der Noten des Prüfers A (durchgezogen) nach unten auf der Skala verschoben im Vergleich zu der von B (gestrichelt): Diese Abweichung der Strenge ist für jeden von ihnen unsichtbar, und sie ist es, auf die die Standardisierung abzielt.

Die daraus folgende Disziplin ist einfach zu formulieren: Eine Note wird durch beobachtbare Fakten gerechtfertigt – was gesagt, getan oder unterlassen wurde, und wann – niemals durch einen allgemeinen Eindruck. Ein standardisierter Bewerter kann für jede bewertete Kompetenz auf die Frage „Was haben Sie gesehen, das dieses Niveau rechtfertigt?“ antworten. Das ist auch das, was die Note verteidigbar macht: gegenüber dem widersprechenden Kandidaten, gegenüber der Behörde und gegebenenfalls gegenüber der Behörde.

Die Kreuzbeobachtung: die unter Beobachtung durchgeführte Prüfung

Der einzigartigste Mechanismus der Einrichtung bleibt die beobachtete Prüfung: periodisch führt ein Prüfer eine echte Kontrolle – echter Kandidat, echte Konsequenzen – durch, während ein Inspektor der Behörde oder ein Senior-Prüfer, der im Hintergrund sitzt, ihn bewertet. Der Beobachter bewertet nicht den Kandidaten; er bewertet die Durchführung der Prüfung: Vollständigkeit des Briefings, Konformität des Szenarios mit der Vorgabe, Neutralität während der Sitzung, Qualität der Rückmeldung, Solidität der Dokumentation.

Der am meisten geprüfte Moment ist der, der selten auftritt: die Handhabung einer unzureichenden Leistung. Ein Versagen entscheiden, es ankündigen, es durch Fakten begründen, es so dokumentieren, dass es hält – das ist der Teil des Berufs, der am meisten verschleißt und den man am wenigsten sieht. Ein Profil ohne jegliches Versagen ist übrigens ein Signal an sich, ebenso wie eine anormal hohe Versagensquote: Beide Extreme verraten eine persönliche Kalibrierung, die den Standard ersetzt hat.

Die Kreuzbeobachtung existiert auch in weniger feierlichen Formen innerhalb der Behörden: Ausbilder sitzt im hinteren Platz der Sitzung eines Kollegen, doppelte Auswertung der entscheidenden Sitzungen, Abstimmungsbesprechungen, in denen die Grenzdossiers von mehreren Personen neu gelesen werden. Und sie wird durch eine Regel der Unabhängigkeit ergänzt: Derjenige, der die Ausbildung eines Kandidaten für eine Prüfung durchgeführt hat, ist – außer in den vom Text vorgesehenen Fällen – nicht derjenige, der sie ihm abnimmt – und bestehende Verbindungen werden deklariert. Das Urteil schützt sich auch durch Distanz.

Was die Daten offenbaren: die Abweichung wird gemessen

Die auf Kompetenzen basierenden Ausbildungsprogramme haben der Einrichtung eine Stufe hinzugefügt, die die klassische Regulierung nicht kannte: die Messung. Sobald jede Sitzung strukturierte Noten – nach Kompetenz, Phase, Szenario – erzeugt, verfügt die Behörde über statistisches Material: Verteilung der Noten pro Bewerter, tatsächliche Nutzung der Skala, vergleichende Versagensquote, Korrelation jedes Bewerters mit dem Kollektiv bei vergleichbaren Sitzungen.

Diese Daten machen Abweichungen sichtbar, die keine Selbstreflexion erkennt. Die Nachsicht, die sich über zwei Jahre einstellt, liest sich in einem gleitenden Durchschnitt; der Halo-Effekt liest sich in ungewöhnlich korrelierten Noten zwischen eigentlich unabhängigen Kompetenzen; die zentrale Tendenz liest sich in einer Skala, deren Extreme nie genutzt werden. Jede dieser Signaturen hat ihr Gegenmittel, und genau das strukturiert die effektiven Standardisierungssitzungen.

Die Abweichungen der Bewertung, auf die die Standardisierung abzielt, und ihre Gegenmaßnahmen
Abweichung Manifestation Gegenmaßnahme
Nachsicht oder Strenge Die gesamte Verteilung verschoben nach oben oder unten auf der Skala Statistischer Vergleich mit Kollegen, gefilmte Fälle blind bewertet
Halo-Effekt Eine herausragende Kompetenz zieht alle anderen Noten nach oben Bewertung Kompetenz für Kompetenz, gestützt auf beobachtbare Fakten
Zentrale Tendenz Vermeidung der extremen Noten, alle „im Durchschnitt“ Niveaus verankert an beschriebenen Verhaltensweisen, Begründung der mittleren Noten
Erster Eindruck Das anfängliche Briefing kontaminiert die Bewertung der gesamten Sitzung Phasenweise Bewertung, Überprüfung vor der Rückmeldung
Zeitliche Abweichung Kalibrierung, die langsam zwischen zwei Seminaren gleitet Periodische Neukalibrierung, longitudinale Verfolgung der Noten pro Bewerter
Abweichung der Bewertung und periodische NeukalibrierungSägezahnkurve: Die durchschnittliche Note, die von einem Prüfer vergeben wird, entfernt sich allmählich von der gemeinsamen Referenz, dargestellt durch eine gestrichelte Linie, und wird bei jeder Standardisierungssitzung, markiert durch vertikale Striche, zurückgebracht.Standardisierungssitzungendurchschnittliche vergebene Notegemeinsame ReferenzSitzungenNote
Die Abweichung ist langsam, die Neukalibrierung ist deutlich. Gelassen sich selbst überlassen, entfernt sich die durchschnittliche Note von der gemeinsamen Referenz; jede Standardisierungssitzung bringt sie zum Standard zurück – das Intervall zwischen zwei Sitzungen begrenzt die mögliche Abweichung.

Ein Punkt der Doktrin verdient festgehalten zu werden: Das Datum bewertet nicht, es löst aus. Ein atypisches Bewertungsprofil ist kein Fehler – es ist der Einstieg in ein gezieltes Standardisierungsgespräch, eine zusätzliche Beobachtung, ein Kalibrierungsfall, der absichtlich gewählt wurde. Das schlimmste System ist das, das sammelt, ohne etwas zurückzugeben: Die Bewerter wissen, dass sie gemessen werden, sehen aber nie etwas zurückkommen, und die Messung wird zu einem Objekt des Misstrauens statt zu einem Berufswerkzeug.

Was Sie in Ihrem eigenen Dossier überprüfen sollten

Für denjenigen, der ein Ausbilderzertifikat besitzt – oder anstrebt – oder eine Prüfergenehmigung, übersetzt sich diese Mechanik in konkrete Überprüfungen. Zuerst die Zeitpläne: der des Zertifikats, der der Genehmigung, der der zugrunde liegenden Qualifikationen, die fast nie zusammenfallen. Dann die Fenster: Eine gut platzierte Kompetenzbewertung kann, in den vom Text vorgesehenen Fällen, mehrere Zwecke gleichzeitig erfüllen – es ist die Vorschrift, die die zulässigen Kombinationen definiert, nicht die lokale Praxis. Überprüfen Sie schließlich, wer für Ihre Bewertung zugelassen ist: Die erforderliche Seniorität des Prüfers hängt davon ab, was bewertet wird, und eine Bewertung, die von der falschen Ebene des Prüfers durchgeführt wird, ist wertlos.

Die Grauzone der Einrichtung verdient genannt zu werden: Der unabhängige Ausbilder, der außerhalb jeder Struktur tätig ist, profitiert von keiner internen Schleife – keine Abstimmungsbesprechungen, kein Kollege im hinteren Platz, keine Daten. Für ihn ist der regulatorische Zyklus nicht ein Boden unter anderen: Es ist seine einzige Kalibrierung. Der Text ist als Sicherheitsnetz, nicht als vollständiges Aufrechterhaltungsregime konzipiert; nichts verbietet, besser zu machen, indem man eine freiwillige Beobachtung anfordert oder sich den Standardisierungssitzungen einer Behörde anschließt.

Für denjenigen, der eine Ausbilderqualifikation vorbereitet oder eine Laufbahn zum Prüfungsamt aufbaut, schließlich sagt diese Einrichtung etwas Nützliches: Die Kompetenz, die kontrolliert wird, ist nicht nur die des Piloten, sondern die des zukünftigen Richters – und sie wird als solche gearbeitet, mit Bewertungsfällen als Unterstützung, bereits in der Vorbereitung der Qualifikation.

Ein letzter methodischer Hinweis: Dieser Artikel beschreibt Mechanismen, nicht Ihre Situation. Die Zyklen, Fenster und zulässigen Kombinationen variieren je nach Kategorie des Zertifikats und der ausstellenden Behörde; die anwendbare Vorschrift, die Entscheidungen Ihrer Behörde und die genehmigte Dokumentation Ihrer Behörde gelten in allen Fällen vor dem Vorhergehenden.

Commentaires

Schreibe einen Kommentar

Découvrez l’écosystème FL330

FL330, c’est toute l’aviation professionnelle — explorez nos autres espaces.