Indicadores de rendimiento en seguridad: salir del cuadro de mando decorativo

Salle d'analyse de la sécurité d'un exploitant, écrans muraux affichant des courbes et des cartes de chaleur

Muchos cuadros de mando de seguridad miden sobre todo la capacidad de su autor para rellenar una tabla. Muestran tasas que nunca activan nada, comparan trimestres sin tener en cuenta el ruido estadístico, y dejan que el comité de seguridad concluya que «la tendencia es buena». Un indicador útil tiene una propiedad sencilla: alguien sabe qué hará cuando el indicador cruce su umbral.

Lo que exige el marco normativo, exactamente

El sistema de gestión de la seguridad se apoya en cuatro componentes: política y objetivos, gestión del riesgo, aseguramiento de la seguridad, promoción. La medición pertenece al aseguramiento: sirve para verificar que los controles funcionan realmente, no para producir un informe. El marco europeo lo incluye en los requisitos de sistema de gestión aplicables a los operadores, y lo articula con el reglamento sobre notificación de sucesos, que impone la recopilación, el análisis y el seguimiento — y protege a quien notifica.

La consecuencia se olvida a menudo: un indicador de rendimiento en seguridad solo tiene sentido si va ligado a un objetivo y a un nivel de alerta definidos antes de la medición. Elegir el umbral después de ver los datos es describir el pasado.

Un buen indicador debe tener un umbral claro y acciones definidas antes de medir. Si solo sirve para hacer informes, no es útil.

Indicadores de resultado, indicadores precursores

Dos familias, dos usos
De resultado Precursor
Mide Lo que ha ocurrido Lo que hace más probable que ocurra
Ejemplos Salidas de pista, remontadas tardías, lesiones Aproximaciones no estabilizadas, desviaciones de configuración, retrasos en la ejecución de tareas
Frecuencia Baja — estadísticamente pobre Alta — utilizable
Riesgo de uso Concluir a partir del ruido Medir lo que es fácil de contar
Función Verificar el cumplimiento de los objetivos Pilotar el día a día

Un cuadro de mando compuesto solo por indicadores de resultado no pilota nada: los sucesos son demasiado raros para distinguir una mejora de una fluctuación. Un cuadro de mando compuesto solo por indicadores precursores deriva hacia lo que es cómodo de contar. Se necesitan ambos, y hay que explicitar el vínculo causal supuesto entre ellos — es ese vínculo el que justifica el indicador, no la disponibilidad del dato.

Un operador de un Airbus A320 en el aeropuerto de Madrid-Barajas mide las aproximaciones no estabilizadas (precursor) y las salidas de pista (resultado). Si aumenta el número de aproximaciones no estabilizadas, pero no hay más salidas de pista, el sistema detecta el riesgo antes de que ocurra un accidente.

Construir un indicador que se sostenga

Seis elementos, sin los cuales un indicador no es un indicador sino una cifra.

Dos trabajadores con chalecos reflectantes monitorean datos de seguridad en pantallas, con una pista de aeropuerto visible al exterior.
Los datos en tiempo real impulsan la gestión proactiva de la seguridad.
  1. La definición operativa. «Aproximación no estabilizada» debe traducirse en criterios medibles sobre los datos de vuelo: parámetros, puertas de altitud, tolerancias. Dos analistas deben llegar al mismo recuento.
  2. El denominador. Un número de sucesos no significa nada sin exposición: por cada mil etapas, por cada mil horas, por cada mil movimientos. Un cambio de denominador explica la mitad de las «tendencias» observadas.
  3. La ventana temporal. Una tasa móvil a doce meses amortigua la estacionalidad; una tasa mensual reacciona rápido pero oscila. Ambas se leen, nunca una en lugar de la otra.
  4. La referencia. Un período base, lo bastante largo para estimar la media y la dispersión.
  5. El nivel de alerta. Una práctica habitual consiste en situarlo a una, dos o tres desviaciones típicas por encima de la media de referencia, con una regla de activación — por ejemplo un punto más allá de tres desviaciones típicas, o dos puntos consecutivos más allá de dos.
  6. La acción asociada. Quién hace qué cuando se supera el umbral. Sin esta línea, el indicador es decorativo.

La prueba que elimina el 80 % de los indicadores inútiles. Formule la pregunta: «si este indicador se duplica el mes que viene, ¿quién decide qué?». Si la respuesta es «se hablará en el comité», el indicador no está listo. Si no hay respuesta, hay que retirarlo del cuadro de mando — un cuadro más corto y operativo vale más que uno exhaustivo e inerte.

Las trampas estadísticas más costosas

Concluir a partir de números pequeños

Pasar de 2 a 4 sucesos en un trimestre no es una duplicación del riesgo: es una variación compatible con el azar para un fenómeno raro. Tratar esa variación como una señal consume recursos y, peor aún, desacredita el dispositivo cuando la cifra vuelve a bajar por sí sola.

El denominador que se mueve

Una flota que retoma actividad ve caer mecánicamente sus tasas con un número constante de sucesos. Por eso hay que seguir también la exposición, y desconfiar de toda mejora que coincida con un aumento de la actividad.

El objetivo numérico que distorsiona la medición

Un objetivo de reducción del número de informes es el contraejemplo perfecto: se alcanza notificando menos. Cualquier objetivo aplicado a un indicador alimentado por notificación voluntaria crea presión hacia la subnotificación. Los objetivos deben referirse a tasas de sucesos indeseados medidas objetivamente, nunca al volumen de notificación.

La subnotificación es el principal modo de fallo de un sistema de gestión de la seguridad. Una caída de las notificaciones se lee como una mejora en un cuadro de mando; a menudo significa que la cultura justa se ha deteriorado. Dos salvaguardas: seguir la tasa de notificación como un indicador de salud del sistema y no de seguridad, y medir el plazo de respuesta al autor de la notificación, que predice mejor que cualquier discurso la voluntad de volver a notificar.

Un conjunto inicial de indicadores, defendible

Ejemplo de estructura para un operador de aviones de transporte
Indicador Familia Denominador Acción en el umbral
Aproximaciones no estabilizadas Precursor 1000 aproximaciones Análisis por aeródromo y por procedimiento; retroalimentación específica en formación
Remontadas tardías Resultado 1 000 approches Revisión de sucesos individuales con la tripulación, bajo cultura justa
Desviaciones de configuración en el despegue Amont 1000 salidas Revisión de los procedimientos de verificación y de las interrupciones de tarea
Aplazamientos de mantenimiento activos fuera de plazo Amont Por aeronave Arbitraje de planificación y piezas a nivel de dirección
Plazo de respuesta al notificante Salud del sistema Mediana, en días Refuerzo del equipo de análisis; revisión del proceso
Sucesos de alto potencial Aval 10 000 etapas Revisión de dirección, reexamen de los controles concernidos

El seguimiento de datos de vuelo alimenta varias de estas líneas; de hecho, es exigido por encima de cierto umbral de masa para los aviones de transporte, y su explotación debe seguir siendo no punitiva para producir algo. Es una condición tan técnica como ética: un programa de seguimiento de datos de vuelo utilizado con fines disciplinarios deja rápidamente de ser informativo, porque los comportamientos se adaptan a la medición.

Vincular cada indicador a un medio de control

Este es el paso que separa un cuadro de mando de un instrumento de pilotaje. Un análisis de riesgo describe, para un suceso temido, las barreras que impiden que ocurra y las que limitan sus consecuencias. Cada barrera importante debería tener un indicador que atestigüe que sigue funcionando — y ese indicador mide el estado de la barrera, no la ocurrencia del suceso.

Tomemos la salida de pista en el aterrizaje. Las barreras habituales son la estabilización en aproximación, la decisión de remontada, el cálculo de la distancia de aterrizaje en las condiciones del momento, la calidad de la información sobre el estado de la pista y la técnica de frenado. Un cuadro de mando que solo sigue el número de salidas de pista no mide ninguna de estas cinco barreras: espera a que fallen todas. Un cuadro de mando útil sigue la tasa de aproximaciones no estabilizadas, la proporción de remontadas decididas en el momento adecuado, la fracción de vuelos en los que el cálculo se rehizo con la información más reciente.

La regla de vinculación. Para cada indicador, escribir en una línea la barrera de la que da cuenta. Un indicador que no se vincula a ninguna barrera mide algo que nadie ha establecido que importe; una barrera sin indicador es una hipótesis que nada verifica. Ambas carencias se ven de un vistazo en una matriz barreras × indicadores — y esa matriz es el verdadero producto del aseguramiento de la seguridad.

Lo que debe ver una revisión de dirección, y nada más

Una revisión de dirección no tiene que repasar treinta curvas. Necesita cuatro cosas, y el dispositivo debe ser capaz de producirlas sin trabajo adicional:

El mínimo útil de una revisión de dirección
Lo que se presenta Lo que hace la dirección con ello
La exposición del período: etapas, horas, movimientos Leer todas las tasas sin equivocarse de denominador
Los rebasamientos del nivel de alerta, con la regla aplicada Constatar qué lo desencadenó, y qué debería haberlo hecho
El estado de las acciones abiertas: cuáles, desde cuándo, por quién Arbitrar los recursos; una acción no cerrada es un riesgo no tratado
Las barreras sin indicador, y los indicadores sin acción Decidir crear uno, o retirar el otro

La cuarta línea es la que se omite, y es la que hace progresar el dispositivo de una revisión a otra. Sin ella, el cuadro de mando se sedimenta: se añade, nunca se retira, y la lectura se convierte en un ritual.

Mantener vivo el dispositivo

Un conjunto de indicadores caduca. Tres hábitos lo mantienen vivo: revisar cada indicador una vez al año preguntándose si ha activado algo; retirar sin remordimiento los que no han activado nada en dos años; y documentar, para cada control mayor, el indicador que atestigüe que sigue funcionando. Este último hábito es el que vincula la medición con el análisis de riesgo, en lugar de convertirlos en dos ejercicios paralelos.

El texto reglamentario aplicable y el manual de gestión de su organización prevalecen sobre este artículo, que expone principios y no obligaciones propias de un operador.

Questions fréquentes

¿Cuántos indicadores de rendimiento en seguridad hacen falta?

Pocos, y todos con una acción asociada. Una estructura de seis a diez indicadores, cada uno con un umbral y un responsable de decisión, vale más que una treintena de líneas seguidas sin consecuencia. El buen criterio no es la cobertura, es la capacidad de activar una decisión.

¿Dónde situar un nivel de alerta cuando no se tiene historial?

Se empieza constituyendo un período de referencia — a menudo doce meses — publicando el indicador sin umbral, y después se fija la alerta a partir de la media y la dispersión observadas. Fijar un umbral arbitrario antes de conocer la dispersión produce alertas permanentes o ninguna en absoluto.

¿Es una buena noticia que baje el número de informes?

Casi nunca. El volumen de notificación mide la salud del sistema de informes, no el nivel de seguridad. Una caída debe desencadenar un examen de la cultura justa, del plazo de respuesta a los notificantes y de la facilidad para notificar, antes de cualquier interpretación favorable.

¿Se puede fijar un objetivo numérico de reducción de sucesos?

Sobre sucesos medidos objetivamente, sí. Sobre indicadores alimentados por notificación voluntaria, es contraproducente: el objetivo se alcanza notificando menos. La regla es no fijar nunca un objetivo sobre lo que se pide a las personas que declaren libremente.

¿Puede el seguimiento de datos de vuelo servir para identificar a una tripulación?

La explotación debe seguir siendo no punitiva y la desidentificación es la norma, con modalidades de acceso enmarcadas y acordadas. Más allá del requisito, es una condición de eficacia: un programa percibido como disciplinario pierde su valor informativo porque las prácticas se adaptan a la medición.

Commentaires

Deja una respuesta

Découvrez l’écosystème FL330

FL330, c’est toute l’aviation professionnelle — explorez nos autres espaces.