Indicateurs de performance de sécurité : sortir du tableau de bord décoratif

Salle d'analyse de la sécurité d'un exploitant, écrans muraux affichant des courbes et des cartes de chaleur

Beaucoup de tableaux de bord de sécurité mesurent surtout la capacité de leur auteur à remplir un tableau. Ils affichent des taux qui ne déclenchent jamais rien, comparent des trimestres sans tenir compte du bruit statistique, et laissent le comité de sécurité conclure que « la tendance est bonne ». Un indicateur utile a une propriété simple : quelqu’un sait ce qu’il fera lorsqu’il franchira son seuil.

Ce que le cadre demande, exactement

Le système de gestion de la sécurité repose sur quatre composantes : politique et objectifs, gestion du risque, assurance de la sécurité, promotion. La mesure appartient à l’assurance : elle sert à vérifier que les moyens de maîtrise fonctionnent réellement, et non à produire un rapport. Le cadre européen l’inscrit dans les exigences de système de gestion applicables aux exploitants, et l’articule avec le règlement sur le compte rendu d’événements, qui impose la collecte, l’analyse et le suivi — et protège celui qui signale.

La conséquence en est souvent oubliée : un indicateur de performance de sécurité n’a de sens qu’attaché à un objectif et à un niveau d’alerte définis avant la mesure. Choisir le seuil après avoir vu les données, c’est décrire le passé.

Indicateurs en aval, indicateurs en amont

Deux familles, deux usages
En aval (résultat) En amont (précurseur)
Mesure Ce qui est arrivé Ce qui rend l’arrivée plus probable
Exemples Sorties de piste, remises de gaz tardives, blessures Approches non stabilisées, écarts de configuration, retards d’exécution de tâche
Fréquence Faible — statistiquement pauvre Élevée — exploitable
Risque d’usage Conclure sur du bruit Mesurer ce qui est facile à compter
Rôle Vérifier l’atteinte des objectifs Piloter au quotidien

Un tableau de bord composé uniquement d’indicateurs en aval ne pilote rien : les événements sont trop rares pour distinguer une amélioration d’une fluctuation. Un tableau de bord composé uniquement d’indicateurs en amont dérive vers ce qui est commode à compter. Il faut les deux, et il faut expliciter le lien causal supposé entre eux — c’est ce lien qui justifie l’indicateur, pas la disponibilité de la donnée.

Les indicateurs de sécurité se divisent en deux types : ceux qui mesurent les accidents (trop rares pour être utiles) et ceux qui mesurent les situations à risque (plus fréquents et actionnables). Pour être efficace, un tableau de bord doit utiliser les deux, en expliquant comment les premiers découlent des seconds.

Un exploitant d’Airbus A320 sur l’aéroport de Paris-Charles de Gaulle pourrait suivre :
– En amont : 5 approches non stabilisées pour 1 000 approches (seuil à 7)
– En aval : 1 sortie de piste pour 10 000 atterrissages (seuil à 2)
Si le premier indicateur dépasse son seuil, l’exploitant renforce la formation des pilotes ; si le second dépasse, il réexamine les procédures de piste.

Construire un indicateur qui tient

Six éléments, sans lesquels un indicateur n’est pas un indicateur mais un chiffre.

Deux travailleurs en gilets fluorescents surveillent des données de sécurité sur des écrans, avec un tarmac d'aéroport visible à l'extérieur.
Les données en temps réel améliorent la gestion proactive de la sécurité.
  1. La définition opératoire. « Approche non stabilisée » doit se traduire en critères mesurables sur les données de vol : paramètres, portes d’altitude, tolérances. Deux analystes doivent obtenir le même comptage.
  2. Le dénominateur. Un nombre d’événements ne veut rien dire sans exposition : par mille étapes, par mille heures, par mille mouvements. Un changement de dénominateur explique la moitié des « tendances » observées.
  3. La fenêtre. Un taux glissant sur douze mois amortit la saisonnalité ; un taux mensuel réagit vite mais oscille. Les deux se lisent, jamais l’un pour l’autre.
  4. La référence. Une période de base, assez longue pour estimer la moyenne et la dispersion.
  5. Le niveau d’alerte. Une pratique répandue consiste à le placer à un, deux ou trois écarts types au-dessus de la moyenne de référence, avec une règle de déclenchement — par exemple un point au-delà de trois écarts types, ou deux points consécutifs au-delà de deux.
  6. L’action attachée. Qui fait quoi lorsque le seuil est franchi. Sans cette ligne, l’indicateur est décoratif.

Le test qui élimine 80 % des indicateurs inutiles. Posez la question : « si cet indicateur double le mois prochain, qui décide quoi ? » Si la réponse est « on en parlera au comité », l’indicateur n’est pas prêt. S’il n’y a pas de réponse, il faut le retirer du tableau de bord — un tableau plus court et opérationnel vaut mieux qu’un tableau exhaustif et inerte.

Les pièges statistiques les plus coûteux

Conclure sur de petits nombres

Passer de 2 à 4 événements sur un trimestre n’est pas un doublement du risque : c’est une variation compatible avec le hasard pour un phénomène rare. Traiter cette variation comme un signal consomme des ressources et, plus grave, décrédibilise le dispositif lorsque le chiffre revient tout seul.

Le dénominateur qui bouge

Une flotte qui reprend de l’activité voit ses taux baisser mécaniquement à nombre d’événements constant. Il faut donc suivre aussi l’exposition, et se méfier de toute amélioration concomitante d’une hausse d’activité.

La cible chiffrée qui déforme la mesure

Un objectif de réduction du nombre de comptes rendus est le contre-exemple parfait : il s’atteint en signalant moins. Toute cible portant sur un indicateur alimenté par le volontariat crée une pression à la sous-déclaration. Les cibles doivent porter sur des taux d’événements indésirables mesurés objectivement, jamais sur le volume de signalement.

La sous-déclaration est le mode de panne principal d’un système de gestion de la sécurité. Une baisse des signalements se lit comme une amélioration sur un tableau de bord ; elle signifie souvent que la culture juste s’est dégradée. Deux garde-fous : suivre le taux de signalement comme un indicateur de santé du système et non de sécurité, et mesurer le délai de retour à l’auteur du signalement, qui prédit mieux que tout discours la volonté de signaler à nouveau.

Un jeu d’indicateurs de départ, défendable

Exemple d’ossature pour un exploitant d’avions de transport
Indicateur Famille Dénominateur Action au seuil
Approches non stabilisées Amont 1 000 approches Analyse par terrain et par procédure ; retour ciblé en entraînement
Remises de gaz tardives Aval 1 000 approches Revue d’événements individuels avec l’équipage, sous culture juste
Écarts de configuration au décollage Amont 1 000 départs Revue des procédures de vérification et des interruptions de tâche
Reports d’entretien actifs hors délai Amont Par appareil Arbitrage planification et pièces au niveau direction
Délai de retour au déclarant Santé du système Médiane, en jours Renfort de l’équipe d’analyse ; revue du processus
Événements à potentiel élevé Aval 10 000 étapes Revue de direction, réexamen des moyens de maîtrise concernés

Le suivi des données de vol alimente plusieurs de ces lignes ; il est d’ailleurs exigé au-delà d’un certain seuil de masse pour les avions de transport, et son exploitation doit rester non punitive pour produire quelque chose. C’est une condition technique autant qu’éthique : un programme de suivi des données de vol utilisé à des fins disciplinaires cesse rapidement d’être informatif, parce que les comportements s’adaptent à la mesure.

Relier chaque indicateur à un moyen de maîtrise

C’est l’étape qui sépare un tableau de bord d’un instrument de pilotage. Une analyse de risque décrit, pour un événement redouté, les barrières qui empêchent son occurrence et celles qui en limitent les conséquences. Chaque barrière importante devrait avoir un indicateur qui atteste qu’elle fonctionne toujours — et cet indicateur mesure l’état de la barrière, pas la survenue de l’événement.

Prenons la sortie de piste à l’atterrissage. Les barrières usuelles sont la stabilisation en approche, la décision de remise de gaz, le calcul de distance d’atterrissage en conditions du moment, la qualité de l’information sur l’état de piste, et la technique de freinage. Un tableau de bord qui ne suit que le nombre de sorties de piste ne mesure aucune de ces cinq barrières : il attend que toutes cèdent. Un tableau de bord utile suit le taux d’approches non stabilisées, la proportion de remises de gaz décidées au bon moment, la fraction de vols où le calcul a été refait sur l’information la plus fraîche.

La règle de rattachement. Pour chaque indicateur, écrire en une ligne la barrière dont il rend compte. Un indicateur qui ne se rattache à aucune barrière mesure quelque chose dont personne n’a établi qu’il comptait ; une barrière sans indicateur est une hypothèse que rien ne vérifie. Les deux se voient d’un coup d’œil sur une matrice barrières × indicateurs — et cette matrice est le vrai livrable de l’assurance de la sécurité.

Ce que la revue de direction doit voir, et rien de plus

Une revue de direction n’a pas à parcourir trente courbes. Elle a besoin de quatre choses, et le dispositif doit être capable de les produire sans travail d’appoint :

Le minimum utile d’une revue de direction
Ce qui est présenté Ce que la direction en fait
L’exposition de la période : étapes, heures, mouvements Lire tous les taux sans se tromper de dénominateur
Les franchissements de niveau d’alerte, avec la règle appliquée Constater ce qui a déclenché, et ce qui aurait dû
L’état des actions ouvertes : lesquelles, depuis quand, par qui Arbitrer les moyens ; une action non close est un risque non traité
Les barrières sans indicateur, et les indicateurs sans action Décider d’en créer un, ou de retirer l’autre

La quatrième ligne est celle qu’on omet, et c’est celle qui fait progresser le dispositif d’une revue à l’autre. Sans elle, le tableau de bord se sédimente : on ajoute, on n’enlève jamais, et la lecture devient un rituel.

Faire vivre le dispositif

Un jeu d’indicateurs se périme. Trois habitudes le maintiennent vivant : revoir chaque indicateur une fois par an en se demandant s’il a déclenché quelque chose ; retirer sans regret ceux qui n’ont rien déclenché en deux ans ; et documenter, pour chaque moyen de maîtrise majeur, l’indicateur qui atteste qu’il fonctionne toujours. Cette dernière habitude est celle qui relie la mesure à l’analyse de risque, au lieu d’en faire deux exercices parallèles.

Le texte réglementaire applicable et le manuel de gestion de votre organisme prévalent sur cet article, qui expose des principes et non des obligations propres à un exploitant.

Questions fréquentes

Combien d'indicateurs de performance de sécurité faut-il ?

Peu, et tous armés d’une action. Une ossature de six à dix indicateurs dont chacun a un seuil et un décideur vaut mieux qu’une trentaine de lignes suivies sans conséquence. Le bon critère n’est pas la couverture, c’est la capacité à déclencher une décision.

Où placer un niveau d'alerte quand on n'a pas d'historique ?

On commence par constituer une période de référence — souvent douze mois — en publiant l’indicateur sans seuil, puis on fixe l’alerte à partir de la moyenne et de la dispersion observées. Fixer un seuil arbitraire avant d’avoir la dispersion produit soit des alertes permanentes, soit aucune.

Une baisse du nombre de comptes rendus est-elle une bonne nouvelle ?

Presque jamais. Le volume de signalement mesure la santé du système de compte rendu, pas le niveau de sécurité. Une baisse doit déclencher un examen de la culture juste, du délai de retour aux déclarants et de la facilité de signalement, avant toute interprétation favorable.

Peut-on fixer une cible chiffrée de réduction des événements ?

Sur des événements mesurés objectivement, oui. Sur des indicateurs alimentés par le volontariat, c’est contre-productif : la cible s’atteint en signalant moins. La règle est de ne jamais cibler ce que l’on demande aux gens de déclarer librement.

Le suivi des données de vol peut-il servir à identifier un équipage ?

L’exploitation doit rester non punitive et la désidentification est la règle, avec des modalités d’accès encadrées et convenues. Au-delà de l’exigence, c’est une condition d’efficacité : un programme perçu comme disciplinaire perd sa valeur informative parce que les pratiques s’adaptent à la mesure.

Commentaires

Laisser un commentaire

Découvrez l’écosystème FL330

FL330, c’est toute l’aviation professionnelle — explorez nos autres espaces.