Parrillas de puntuación en la selección de tripulaciones: hacer la decisión defendible a posteriori

A panel of aviation evaluators in a control room reviewing a candidate's assessment grid, highlighting observable behaviors under dim lighting.

Seis meses después de la campaña, un candidato descartado pide los motivos de su rechazo. El jurado lo recuerda a grandes rasgos: no estaba a la altura en la gestión de prioridades. Queda demostrarlo. Si la parrilla solo produjo una nota global y tres adjetivos, no hay nada que aportar, y el expediente abandona el terreno técnico por el terreno probatorio, aquel en el que generalmente corresponde al operador demostrar que su decisión se basaba en elementos objetivos.

Una parrilla no es un instrumento de medida, es un dispositivo probatorio

Se espera que una parrilla objetive la evaluación. Eso le pide demasiado, y a la vez muy poco: no hace objetivo un juicio humano, lo hace reconstruible. Tres funciones coexisten en ella: estandarizar lo que observan los evaluadores, comparar candidatos que no pasaron la prueba el mismo día, y dejar un rastro que un tercero podrá releer sin haber asistido a la prueba.

Solo la tercera resiste la impugnación. Una nota es un resumen irreversible: de un tres sobre cinco no se puede remontar a nada. Lo que se defiende es la cadena completa: el enunciado del criterio tal como estaba redactado antes de la prueba, la escala y sus anclajes, el hecho observado, la puntuación de cada evaluador antes de cualquier intercambio, la regla de agregación fijada de antemano, la decisión y su motivo.

La prueba de solidez cabe en una frase: entregue el expediente a alguien que no estaba en la sala y pídale que reconstruya la decisión. Si lo consigue, la parrilla ha cumplido su función. Si tiene que llamarle por teléfono para entenderlo, lo que decidió no estaba en la parrilla.

Del juicio inferido al comportamiento observable

Liderazgo, madurez, motivación, resistencia al estrés: estas palabras designan rasgos, y un rasgo no se observa, se infiere. La inferencia es exactamente lo que un tercero puede discutir, porque se basa en un razonamiento que el evaluador no escribió. Un comportamiento, en cambio, ha tenido lugar o no lo ha tenido: anunció su intención antes de actuar sobre el piloto automático, hizo repetir una autorización ambigua, aplazó la lectura de una lista de verificación para pilotar primero.

De ahí una regla de redacción sencilla. Un criterio se formula con un verbo de acción, un objeto y la condición en la que se observa. No lleva ningún grado: el grado pertenece a la escala. «Comunica eficazmente» mezcla ambas cosas y deja que cada evaluador fije su propio listón sin decirlo.

Los marcos de competencias publicados para las tripulaciones ya proporcionan ese vocabulario. Reescribirlos desde cero hace perder la comparabilidad con la formación y el control, donde se puntúan las mismas competencias; en cambio, hay que instanciarlos sobre la prueba realmente organizada.

Queda el criterio que presupone experiencia. «Con la autoridad esperada de un comandante» no es alcanzable por un cadete: la selección se convierte en un filtro de experiencia no declarado. Si la experiencia es un requisito previo, debe tratarse en las condiciones de acceso.

El mismo criterio, dos redacciones: lo que se puntúa cambia con el enunciado
Competencia evaluada Enunciado inferencial Enunciado observable Lo que se consigna
Conciencia de la situación Buena conciencia de la situación Anuncia la desviación de trayectoria o de parámetro antes de que sea señalada por el otro asiento o por un sistema La desviación, el instante, quién la anunció primero
Comunicación Comunica eficazmente Formula su intención antes de actuar sobre un mando o un modo Las acciones anunciadas y las que no lo fueron
Gestión de la carga de trabajo Resiste bien al estrés Aplaza o delega una tarea no prioritaria cuando se presentan dos solicitudes simultáneas La tarea aplazada y el momento
Trabajo en equipo Buen espíritu de equipo Solicita la opinión del otro asiento antes de decidirse por una opción, y luego reformula la respuesta La solicitud y la reformulación

Una parrilla de puntuación no mide habilidades, sino que registra comportamientos concretos para que, más tarde, alguien pueda entender por qué se tomó una decisión. Si un candidato pregunta por qué fue rechazado, la parrilla debe permitir explicar la decisión con hechos observables, no con impresiones subjetivas.

Un candidato en una selección para piloto de línea es evaluado en un simulador. En lugar de anotar «muestra buena conciencia de la situación», los evaluadores registran: «A las 12:34, el candidato anunció una desviación de 5 grados en el rumbo antes de que el sistema de alerta lo hiciera». Este detalle concreto permite reconstruir la evaluación meses después.

La escala: peldaños, anclajes y los sesgos que canaliza

El número de peldaños es el primer arbitraje. Una escala impar ofrece un refugio central, donde se acomoda el evaluador con prisa; una escala par obliga a decidir, pero borra el matiz de lo conforme sin más. El debate es menos decisivo de lo que se cree: la calidad de una escala reside en su anclaje.

Anclar significa describir cada peldaño con un comportamiento, no con un adverbio. «Tres: satisfactorio» no dice nada a nadie; «tres: detectó la desviación y la anunció sin haber sido invitado a hacerlo» dice algo verificable. Redactar esos anclajes es el verdadero trabajo de diseño, y es la parte que un tercero releerá el día en que se cuestione la decisión.

El anclaje no elimina los sesgos, los hace visibles. El efecto halo hace que un rendimiento destacado tiña los demás criterios; la indulgencia y la severidad son constantes personales, no exigencias; la tendencia central estrecha todo en torno a la media; el efecto de orden penaliza a quien pasa después de un candidato brillante. Ninguno cede ante la buena voluntad: ceden ante la medida.

Notas atribuidas por dos evaluadores a la misma cohorteDos curvas de frecuencia en una escala de uno a cinco: la curva continua culmina en el peldáño tres y se extiende, la curva discontinua culmina en el peldáño cuatro y se mantiene más cerrada.12345nota atribuidacandidatosdesfase sistemáticoevaluador Aevaluador B
Dos evaluadores pueden coincidir en cada candidato y seguir siendo incomparables. En la misma cohorte, uno extiende sus notas en torno a la mitad de la escala, el otro las concentra más arriba: la clasificación puede coincidir, pero las notas no se transponen de un jurado a otro.

La medida está al alcance de la mano: compare la distribución de las notas de cada evaluador a lo largo de toda una campaña. Aquel cuya media se aparta de forma persistente de la de sus compañeros no es más exigente, puntúa con otra escala; y dos candidatos que pasaron ante jurados distintos dejan de ser comparables. El desfase se trata mediante la calibración, nunca mediante una corrección aplicada a posteriori: recalcular las notas destruye el rastro.

Medir la brecha entre evaluadores antes de resolverla

La doble puntuación solo vale si es independiente, y la palabra que importa es antes. Si el primero anuncia su nota, el segundo se alinea sin siquiera darse cuenta: el acuerdo observado se convierte en un artefacto de la conversación, y la segunda puntuación ya no demuestra nada.

Hay que consignar por tanto los dos valores y no borrar nunca el primero. Un expediente que muestra un desacuerdo y su tratamiento es más sólido que un expediente pulido: toda una campaña sin la menor discrepancia debe, ante todo, hacer dudar de la independencia real de las puntuaciones.

El umbral de activación se fija y se redacta antes de la campaña; por ejemplo, una discrepancia de dos peldaños obliga a una reconciliación. Esta consigna el hecho que hizo cambiar el criterio, no un compromiso aritmético. Una media entre dos y cuatro no significa nada: o el comportamiento tuvo lugar, o no lo tuvo, y uno de los dos evaluadores no lo vio.

Concordancia entre dos evaluadoresCada candidato es un punto: la nota del primer evaluador en abscisas, la del segundo en ordenadas. La banda oblicua a lo largo de la diagonal contiene las discrepancias de un peldáño; tres puntos quedan fuera.135135nota del evaluador Anota del evaluador Bdiscrepancia ≤ 1un candidatofuera de la banda:reconciliación
La discrepancia entre dos puntuaciones se lee en una matriz, no en una media. Cada punto es un candidato puntuado dos veces; la banda contiene las discrepancias de un peldáño, toleradas. Fuera de la banda, la regla escrita obliga a reabrir el expediente antes de cualquier decisión.

Aguas arriba, la calibración se trabaja sobre casos de referencia: grabaciones o escenarios escritos que todos los evaluadores puntúan por separado antes de contrastar resultados en conjunto. La fecha de la última sesión y las discrepancias observadas se consignan con el mismo rango que los expedientes de los candidatos.

El buen reflejo. Puntúe a ciegas y solo después abra la discusión: cada uno inscribe y valida su nota antes de conocer la del otro, y la reconciliación se escribe en un campo aparte, sin borrar los dos valores originales. Es ese par de números, y no su media, lo que hará legible la decisión dentro de seis meses.

De la nota a la decisión: compensación, umbral mínimo, eliminatorio

Una parrilla produce notas; la decisión, en cambio, procede de una regla de agregación, y es precisamente esa la que se olvida escribir. Coexisten tres regímenes, con consecuencias muy distintas.

Cuatro profesionales con traje de negocios revisan documentos bajo una lámpara, uno señalando una cuadrícula de calificación.
Las cuadrículas de calificación garantizan decisiones de selección de tripulación objetivas y defendibles.
Tres regímenes de agregación y lo que obligan a justificar
Régimen Regla aplicada Lo que permite Lo que hay que poder demostrar
Suma compensatoria Los puntos se acumulan; un criterio débil se compensa en otro Un perfil muy contrastado Que la competencia débil no es crítica para la función prevista
Umbral mínimo por competencia Se exige un mínimo en cada competencia, además del total El contraste, dentro de un límite anunciado El origen del umbral y su constancia del primero al último candidato
Criterio eliminatorio Un comportamiento observado detiene la selección, sea cual sea el resto Una decisión inmediata El hecho preciso, su fecha, y la regla escrita antes de la prueba

La compensación pura es el régimen más frágil en la selección de tripulaciones: un total halagüeño puede ocultar una competencia por debajo del mínimo, y habrá que explicar por qué esa se podía compensar en otro sitio. El umbral mínimo por competencia responde a la objeción, siempre que sea idéntico para todos.

Dos perfiles de competencias con el mismo totalCinco competencias en abscisas, la nota en ordenadas, una línea discontinua para el mínimo exigido. El perfil continuo se mantiene en el mínimo o por encima en todas partes; el perfil discontinuo lo supera en tres competencias y cae por debajo en dos, para un total idéntico.135notaumbral mínimoCom.Proced.DecisiónCargaEquipocandidato Acandidato B
Dos candidatos con el mismo total, una sola decisión posible. El perfil discontinuo domina en tres competencias y cae por debajo del umbral en otras dos: sin un mínimo por competencia, la suma lo clasifica por delante.

La misma lógica se aplica a la ponderación: si las competencias no pesan lo mismo, eso se decide y se escribe antes de la campaña. Ajustada sobre la marcha, no corrige una injusticia, destruye la prueba.

Por último, el umbral absoluto y el contingente no dicen lo mismo. Retener a los mejores para un número de plazas es una clasificación; declarar a un candidato por debajo del umbral es un juicio de aptitud. La carta de rechazo debe indicar cuál se aplicó, de lo contrario deja entender una inaptitud que no se podría demostrar.

Lo que hace impugnable una decisión

El punto débil de una buena parrilla es casi siempre el campo libre. Ahí es donde se escriben, en diez segundos y sin releer, las formulaciones que salen caras: alusiones a la edad, a la situación familiar, al aspecto, al acento, o el famoso «no encajará en el equipo». Estas frases forman parte del expediente y se leen años después.

La trampa. El comentario libre es la única parte de la parrilla que nadie relee antes de enviarla, y la primera que se saca a relucir en caso de impugnación. «Demasiado seguro de sí mismo», «perfil atípico», «no encajará en el grupo» no describen ningún comportamiento: describen la impresión del jurado, y esa impresión, por sí sola, no se defiende.

De ahí se desprende la regla de redacción: un campo libre solo consigna un hecho observado, fechado, vinculado a un criterio de la parrilla. Los elogios ajenos al criterio fragilizan tanto como un comentario despectivo: muestran que el jurado evaluaba otra cosa distinta de lo anunciado.

En el derecho laboral francés, además, dos obligaciones enmarcan el dispositivo: el candidato es informado, antes de su aplicación, de los métodos y técnicas de evaluación utilizados, y la información solicitada guarda una relación directa con el puesto ofrecido. Otros Estados conocen equivalentes, de alcance variable: un operador que contrata en varios países verifica la norma local en lugar de duplicar la suya. Una prueba cuyo propio principio se mantiene en secreto sigue siendo frágil en este terreno, sea cual sea la jurisdicción.

A esto se suma el régimen de datos personales: finalidad declarada, datos minimizados, plazo de conservación fijado y realmente aplicado, derecho de acceso del interesado. Escribir cada línea como si fuera a ser leída por el candidato —puede solicitarla— no es una precaución jurídica, es una disciplina de redacción: produce mecánicamente enunciados factuales.

Lo que conviene verificar en su propia organización

Incluso respaldada por una parrilla sólida, la decisión conserva zonas grises: la conversación informal que se mantiene al margen del dispositivo y se lleva la decisión sin dejar rastro, el evaluador único de las estructuras pequeñas, el instructor que formó al candidato y después lo puntúa, el comentario de pasillo formulado en una reunión y jamás consignado.

Seis comprobaciones bastan para situar el dispositivo, y ninguna requiere herramienta alguna: intentar la reconstrucción en frío sobre algunos expedientes ya cerrados; extraer la distribución de notas por evaluador de la última campaña; releer los campos libres con la mirada de un tercero; fechar la última sesión de calibración; verificar que el umbral de reconciliación existe por escrito; comprobar que el plazo de conservación anunciado es el que realmente se aplica.

Para quien se prepara, la consecuencia es directa: el referencial, los criterios y la escala no son secretos de fabricación, y es legítimo preguntar qué se observará antes de sentarse en el puesto. Prepararse consiste entonces en entrenarse para producir comportamientos anunciables —y en anunciarlos, ya que es lo que se puntuará. Los módulos de preparación a las selecciones parten de esta constatación.

Los textos aplicables, el referencial de competencias adoptado y la documentación aprobada del operador prevalecen sobre este artículo, que describe un mecanismo y no un procedimiento: en caso de discrepancia, prevalecen el manual de operaciones, la política de contratación de la empresa y el criterio de su asesoría jurídica.

Questions fréquentes

¿Hay que comunicar la parrilla a los candidatos antes de la prueba?

En el derecho laboral francés, el candidato es informado de los métodos y técnicas de evaluación antes de su aplicación, lo que cubre la naturaleza de las pruebas, las competencias observadas y el principio de la puntuación. Comunicar el referencial y la escala no degrada la selección: un candidato que sabe qué se observa produce comportamientos más legibles, y por tanto más fáciles de puntuar. Lo que no se difunde son los propios escenarios ni los anclajes detallados, para evitar el aprendizaje de memoria.

¿Cuatro o cinco peldaños en la escala?

Una escala impar deja un peldaño central que absorbe las dudas y empobrece la discriminación; una escala par obliga a decidir, pero suprime la posición neutra, útil sin embargo cuando la prestación es simplemente conforme. La elección importa menos que el anclaje: una escala corta cuyos peldaños están descritos por un comportamiento discrimina en general mejor que una escala larga cuyos peldaños solo llevan adverbios. Fije el número de peldaños de una vez por todas y concentre el esfuerzo en la redacción de los anclajes.

¿Qué hacer cuando dos evaluadores difieren en dos peldaños?

La regla se fija y se redacta antes de la campaña; un umbral habitual consiste en abrir una reconciliación en cuanto la discrepancia supera un peldaño. Consiste en volver al hecho observado —quién vio qué, en qué momento— y no en partir la diferencia, porque una media entre dos y cuatro no corresponde a ningún comportamiento. Las dos puntuaciones iniciales permanecen en el expediente, junto con la nota de lo que hizo cambiar uno de los criterios. Si la discrepancia persiste, se resuelve mediante un tercer evaluador o mediante la regla de escalado prevista, nunca por antigüedad.

¿Se puede descartar a un candidato por un único criterio?

Sí, con dos condiciones acumulativas. El carácter eliminatorio del criterio debe estar escrito antes de la prueba, no decidido a la vista del resultado, y el hecho que lo desencadena debe ser un comportamiento observado, fechado y consignado, no una impresión global. Un criterio eliminatorio no anunciado convierte una decisión legítima en una decisión arbitraria, incluso cuando el fondo está justificado.

¿Cuánto tiempo hay que conservar las parrillas cumplimentadas?

No existe un plazo universal: se deduce de la finalidad declarada, se fija antes de la campaña y se inscribe en el registro de tratamientos. El riesgo es simétrico: un expediente conservado sin plazo definido constituye un incumplimiento, un expediente destruido demasiado pronto priva al operador del medio para defender su decisión. El arbitraje se decide con el responsable de datos personales en el momento de diseñar el dispositivo, no tras recibir una reclamación.

¿Puede un instructor evaluar a un candidato al que ha formado?

Es el conflicto de intereses más frecuente en las estructuras pequeñas, y fragiliza la decisión en ambos sentidos: indulgencia hacia su propio trabajo de formación, o severidad compensatoria. Cuando la separación es imposible, se sustituye por salvaguardas consignadas: doble puntuación por un evaluador no implicado en la formación, declaración del vínculo en el expediente, arbitraje confiado a un tercero en caso de discrepancia. La transparencia sobre el vínculo vale más que su omisión, que siempre se descubre en el peor momento.

Commentaires

Deja una respuesta

Découvrez l’écosystème FL330

FL330, c’est toute l’aviation professionnelle — explorez nos autres espaces.