Audit interne avant une visite de l’autorité : cibler ce qui sera réellement regardé

Faisceau de lampe balayant les circuits hydrauliques dans un logement de train d'atterrissage sombre

La lettre annonce la visite pour dans trois mois. La surveillance de la conformité lance un audit complet : six domaines, une quarantaine de dossiers, rapport final sans aucun écart. Le jour venu, l’inspecteur ouvre quatre constats en deux jours, dont deux dans des domaines que cet audit venait de couvrir. Rien n’a changé entre-temps : l’échantillon avait été tiré là où il n’y avait rien à trouver, et le rapport vide est devenu la première pièce du dossier.

Le premier document demandé n’est pas le manuel d’exploitation

Un inspecteur qui arrive pour une visite programmée commence rarement par le manuel. Il demande le programme d’audit interne, le registre des constats, les dates réalisées face aux dates prévues, les délais de clôture. En une heure, il sait ce que l’organisation ne regarde pas.

C’est le déplacement de fond de la surveillance moderne. Faute de pouvoir vérifier le produit dossier par dossier, l’autorité vérifie la fonction qui, à l’intérieur, est censée le faire : cette composante du système de gestion, indépendante de l’activité qu’elle contrôle, dotée d’un programme couvrant tous les domaines sur un cycle défini. Côté américain, le vocabulaire diffère et la logique est identique : la surveillance s’organise autour d’éléments de système et de leurs attributs — responsabilité, autorité, procédures, contrôles, mesures de processus, interfaces.

La question de fond est la même des deux côtés : cette organisation trouve-t-elle ses propres écarts avant qu’un tiers ne les trouve pour elle ? D’où une conséquence peu intuitive : un registre nourri d’écarts de fond et de clôtures documentées rassure, un registre vide inquiète — un dispositif de détection qui ne détecte rien est, statistiquement, en panne.

Les inspecteurs ne vérifient plus chaque dossier, mais comment votre organisation vérifie elle-même ses dossiers. Un registre d’écarts bien géré prouve que vous contrôlez vos risques, un registre vide montre que vous ne cherchez pas les problèmes.

Un audit qui ne trouve rien mesure d’abord sa propre puissance

Le calcul est élémentaire et presque jamais fait. Si une proportion des dossiers porte l’écart, la probabilité d’en attraper au moins un dans un tirage au hasard vaut un moins la probabilité de tous les manquer. Avec deux dossiers non conformes sur cent, dix dossiers examinés donnent moins d’une chance sur cinq, trente un peu moins d’une chance sur deux. L’audit qui a passé quarante dossiers en revue sans rien trouver n’a pas démontré que la population est saine : il a démontré qu’il n’avait pas la puissance de le savoir.

La question de l’inspecteur découle de là, redoutable parce que simple : comment avez-vous constitué votre échantillon ? La réponse « au hasard, dans les dossiers de l’exercice » est le vrai constat : l’audit a été dimensionné pour être fait, pas pour trouver.

Il y a pire que la faible puissance : le mauvais ciblage. Les écarts ne se répartissent pas uniformément, ils se concentrent dans les zones qui échappent à la routine. Tirer à plat dans la masse cumule les deux défauts.

Probabilité de trouver au moins un écart selon la taille de l’échantillonGraphique. En abscisse, le nombre de dossiers examinés, de zéro à soixante. En ordonnée, la probabilité de tomber sur au moins un dossier non conforme, de zéro à cent pour cent. La courbe pleine correspond à une population contenant deux pour cent de dossiers non conformes : elle monte lentement et n’atteint pas la moitié à trente dossiers. La courbe tiretée correspond à dix pour cent de non-conformes : elle dépasse les trois quarts avant quinze dossiers puis sature. Un point marque trente dossiers sur la courbe pleine.0204060dossiers examinés0255075100probabilité de trouver un écart (%)10 % de non-conformes2 % de non-conformesmoins d’une chance sur deux
Sur une population presque saine, un petit échantillon ne prouve rien. À deux pour cent de non-conformes, il faut des dizaines de dossiers pour une chance sur deux de croiser l’écart ; à dix pour cent, quinze suffisent.

Le piège : l’audit à blanc lancé trois semaines avant la visite. Il laisse des constats ouverts sans analyse de cause ni échéance tenue. Un écart ouvert depuis quatre mois, avec un plan d’action daté et une première mesure d’efficacité, est un point fort ; le même écart ouvert la veille est un aveu.

Un opérateur examine 30 dossiers de maintenance sur 1000, avec 2% de non-conformes attendus. Selon le graphique, il a moins d’une chance sur deux de trouver un écart. S’il avait ciblé les 100 dossiers les plus récents (où les erreurs sont plus fréquentes), il aurait eu 90% de chances de détecter un problème.

La géographie des écarts

Quatre familles de situations reviennent le plus souvent dans ce qu’une visite met au jour, et toutes tombent hors du champ d’un audit organisé domaine par domaine.

  • Les interfaces. Entre l’exploitant et l’organisme de gestion du maintien de la navigabilité, entre celui-ci et l’atelier, entre l’exploitant et l’assistant en escale. Chacun audite son côté du pont, personne n’audite le tablier : c’est là que se perdent comptes rendus matériels, transmissions de charge et mises à jour de qualification.
  • Les exceptions. L’article reporté au titre de la liste minimale d’équipements, reconduit une fois puis deux ; le vol non régulier, le convoyage après entretien ; la dérogation accordée un soir par téléphone. La procédure normale est écrite, apprise, contrôlée ; l’exception ne l’est pas, et c’est ce qu’un inspecteur demande à voir.
  • Les intérims. Une personne désignée absente, un suppléant qui exerce sans que la suppléance ait été formalisée. Les délégations orales ne laissent pas de trace, et une signature apposée sans l’autorité correspondante contamine tous les actes de la période.
  • Les transitions. Nouvelle version du manuel, nouvel outil de préparation des vols, nouveau type sur le certificat. Une transition ouvre une fenêtre où deux versions coexistent. Elle se referme ; les dossiers produits pendant qu’elle était ouverte restent.
Où l’audit interne s’installe, où la surveillance échantillonneMatrice à quatre cases. En abscisse, la fréquence de l’activité, du courant vers le rare. En ordonnée, la densité des traces, du bien tracé en bas au peu tracé en haut. En bas à gauche, courant et bien tracé : vols réguliers depuis la base principale, là où l’audit interne s’installe. En bas à droite, rare mais tracé : convoyages et vols d’essai. En haut à gauche, courant mais peu tracé : briefings et consignes orales. En haut à droite, case grisée : intérims, dérogations, articles reportés, sous-traitance, escales isolées — la zone d’ombre, celle que la surveillance échantillonne en premier.densité des tracespeu tracébien tracécourantfréquence de l’activitérare, exceptionnelzone d’ombreintérim, dérogation, reportsous-traitance, escale isoléebriefings et consignes oralespratiques non écritesvols réguliers, base principalel’audit interne s’y installeconvoyages, vols d’essairares mais tracés
L’audit de routine et la surveillance ne visent pas la même case. Le confort d’un audit est en bas à gauche ; les écarts se logent en haut à droite. Toute campagne devrait savoir combien de ses tirages sont tombés dans la case grisée.

Échantillonner comme l’inspecteur : partir des données, pas du calendrier

Le programme doit couvrir tous les domaines sur un cycle défini : c’est une exigence. Mais couvrir n’oblige pas à répartir l’effort également. Le cycle donne la couverture minimale ; les données de l’organisation disent où mettre le reste.

Deux hommes examinent des données financières à l'ordinateur, en préparation d'une visite réglementaire.
Des auditeurs vérifient les données financières pour anticiper les contrôles réglementaires.

Ces données existent déjà et servent rarement à cela : comptes rendus d’événements, retards techniques, constats des inspections au sol à l’étranger, écarts signalés par les assistants en escale, résultats des contrôles en ligne, cas limites en temps de vol et de repos, reports d’échéance d’entretien. Chaque flux désigne une strate. On sur-échantillonne les strates chaudes et on garde un tirage léger sur le reste : à effort constant, la probabilité de croiser un écart réel s’en trouve fortement relevée, puisque l’effort se déplace vers les zones où la proportion de non-conformes est la plus élevée.

Reste la technique qui produit le plus, et que les inspecteurs pratiquent couramment : le traçage transversal. Au lieu d’examiner cinquante dossiers de même nature, on prend un vol réel — de préférence une nuit ou une escale déportée — et on remonte toute sa chaîne : équipage qualifié, à jour de ses contrôles, formé sur la version du manuel en vigueur ce jour-là ; liste minimale d’équipements appliquée et délai correctement décompté ; dossier de vol, carburant, centrage et météorologie cohérents avec ce qui a été fait. Un seul vol traverse tous les domaines et met les interfaces en tension.

Encore faut-il admettre que la carte des strates chaudes n’est pas la même d’une exploitation à l’autre. Un opérateur régulier sur un réseau dense concentre ses risques dans la répétition : dérive lente d’une pratique, tolérance devenue norme locale sur une escale, écart qui se propage parce que tout le monde fait pareil. Un opérateur à la demande vit au contraire presque entièrement dans l’exception — destination jamais desservie, équipage recomposé la veille, assistance inconnue, décision prise hors des heures ouvrées ; chez lui, la zone d’ombre est le régime courant, et c’est le tirage à plat qui perd tout sens. Une flotte récemment élargie, ou un manuel en cours de refonte, rajoute la strate des transitions ; une exploitation largement sous-traitée, celle des interfaces contractuelles. Un plan d’échantillonnage défendable se résume en une phrase : ce qui varie le plus dans cette exploitation, et pourquoi c’est là que porte l’effort.

Le bon réflexe : la règle des trois fils. Avant chaque campagne, choisir trois vols réels dans trois strates — une exception, une interface, une transition — et remonter chacun jusqu’à l’enregistrement archivé. Ce qu’on en retire ne s’obtient autrement.

Deux façons de constituer un échantillon, à effort comparable
Critère Tirage à plat Tirage orienté par les données
Point de départ le calendrier du programme les signaux internes récents
Population visée tous les dossiers du domaine les strates désignées chaudes
Unité examinée le document, isolé le vol ou l’échéance, de bout en bout
Ce qu’il trouve des erreurs fréquentes et bénignes des ruptures d’interface
Ce qu’il manque l’exception, l’intérim, la sous-traitance la dérive lente du régime courant
Effet sur la visite l’inspecteur refait le travail l’inspecteur vérifie le vôtre

Ce qui n’est pas tracé n’est pas conforme

Un inspecteur ne constate pas ce qui est vrai, il constate ce qui est démontrable. « On le fait, ce n’est simplement pas écrit » ne se cote pas comme conforme : une pratique non tracée ne survit ni au départ de celui qui la porte, ni à une contestation.

Deux objets que la documentation confond méritent d’être séparés. La procédure dit ce qui doit être fait : c’est l’obligation. L’enregistrement atteste qu’un acte précis a été accompli, par une personne identifiée, à une date connue, sur la base d’une version identifiée du texte.

Un enregistrement utile est attribuable — on sait qui, quand, selon quelle version —, lisible sans son auteur, et retrouvable en un temps compatible avec son usage. Migration d’un système informatique, passage à la signature électronique et sous-traitance de l’archivage font disparaître silencieusement des années d’enregistrements.

Une question mérite d’être posée à froid parce qu’elle sera posée à chaud : sur quelle version de la procédure cette personne a-t-elle été formée, et où est la preuve qu’elle a reçu l’amendement suivant ? Beaucoup de systèmes de diffusion conservent la preuve de l’envoi ; la prise de connaissance effective et l’indice de révision exact auquel elle se rapporte sont bien plus rarement conservés.

Le bon réflexe : le test des dix minutes. Choisir trois enregistrements de nature différente — dossier de formation, compte rendu matériel, preuve de diffusion d’amendement — et demander à quelqu’un d’autre que leur détenteur habituel de les produire. Ce qui ne sort pas ne sortira pas devant l’inspecteur.

Le constat interne : ce qui le rend crédible

Ouvrir un constat ne coûte rien ; le fermer proprement est un métier. Trois notions se confondent en permanence, et la surveillance les sépare systématiquement.

Trois réponses possibles à un constat, et ce que chacune démontre
Réponse Ce qu’elle fait Ce qu’elle démontre Ce qu’elle ne démontre pas
Correction remet le cas conforme que l’écart a été traité qu’il ne se reproduira pas
Action corrective agit sur la cause : procédure, interface, charge que la cause a été attaquée que le comportement a changé
Vérification d’efficacité rééchantillonne la même strate après un délai que le résultat a changé que les autres strates sont saines

La cause racine est le point où la plupart des dossiers se perdent. « Erreur de l’agent » n’est pas une cause, c’est la description de l’écart. La cause est ce qui a permis que l’erreur passe : une procédure impraticable telle qu’écrite, une charge qui rend la vérification théorique, une interface où chacun croit que l’autre contrôle.

L’échéance ensuite. Une échéance longue et tenue vaut mieux qu’une courte repoussée deux fois : le report mesure l’écart entre ce que l’organisation s’engage à faire et ce qu’elle peut faire.

La vérification d’efficacité enfin, et c’est là que la boucle se rompt presque partout. Amender la procédure et diffuser une note ne sont pas des preuves d’efficacité, ce sont des actes. L’efficacité se démontre en retournant, après un délai, échantillonner la même strate. Un constat rouvert après clôture coûte plus cher qu’un constat resté ouvert : la boucle ne ferme pas.

Le trajet d’un constat interne et l’endroit où la boucle se romptEnchaînement. Un constat ouvert mène à une question : la cause racine est-elle identifiée ? Si oui, action corrective, puis vérification d’efficacité par ré-échantillonnage ; la clôture n’intervient que si le nouvel échantillon ne montre plus l’écart. Si non, une simple correction sans effet durable, et une flèche tiretée ramène au constat : l’écart revient. Une mention signale que la plupart des systèmes s’arrêtent avant la vérification.constat ouvertcause racineidentifiée ?action correctivevérificationpar ré-échantillonnageclôturecorrection sans effet durableouinonécart absentl’écart revientla plupart s’arrêtent ici
La branche du bas n’est pas une erreur de méthode, c’est le trajet par défaut. Sans identification de la cause, l’écart réapparaît sous un autre habillage. Le trait plein est le seul chemin qui autorise une clôture opposable.

Le piège : la clôture par le document. « Procédure amendée, note diffusée, constat clos » prouve qu’un texte a changé, pas qu’un comportement a changé. L’inspecteur ira vérifier lui-même, sur le terrain, ce que l’organisation n’a pas vérifié.

Les deux jours : ce qui se joue en salle

La préparation matérielle pèse plus qu’on ne croit. Un point d’accès unique aux enregistrements, un référent par domaine qui sait où chercher plutôt qu’un dirigeant qui sait répondre : cela évite les attentes pendant lesquelles un inspecteur désœuvré élargit son échantillon.

Une règle ne souffre aucune exception : ne jamais produire un enregistrement créé pour l’occasion. Les métadonnées d’un fichier, l’encre d’une signature, l’homogénéité d’une reliure racontent leur histoire. Un enregistrement reconstitué après coup ne pose plus une question de conformité mais une question d’intégrité — qui ne se cote pas au même niveau, ni ne se répare avec un plan d’action.

Répondre à la question posée est la deuxième règle : produire trois documents quand un seul est demandé ouvre une piste de plus. Les personnes désignées, elles, sont testées sur un point précis : connaissent-elles leur propre documentation ? La question la plus productive n’est pas « que faites-vous dans ce cas » mais « montrez-moi où c’est écrit ». Sur les activités sous-traitées, la responsabilité ne se délègue pas : l’inspecteur demandera le contrat et ce qu’il prévoit du droit d’accès de l’autorité aux données du prestataire, le dernier audit de celui-ci et le sort de ses constats.

Ce qu’il faut aller vérifier dans sa propre documentation

Six questions se vérifient dans la soirée. Les dates d’audit réalisées coïncident-elles avec les dates prévues du cycle annoncé ? La fonction d’audit est-elle indépendante de ce qu’elle audite ? Combien de constats internes de fond sur douze mois, et dans quels domaines — un domaine sans aucun constat désigne l’angle mort, pas l’excellence ? Quel délai médian de clôture, combien d’échéances reportées ? Combien de clôtures appuyées sur une vérification d’efficacité ? Les constats venus de l’extérieur alimentent-ils le même registre que les internes ?

Une zone grise subsiste, et mieux vaut l’aborder que la découvrir en séance : l’indépendance dans une petite structure. Le cumul de fonctions y est généralement admis, l’auto-audit ne l’est pas, et la frontière entre les deux n’est écrite nulle part avec précision. Elle se démontre par le recours à un auditeur extérieur là où le cumul est inévitable.

Pour qui prépare une prise de fonction de personne désignée ou de responsable de la conformité, le point à travailler n’est pas la récitation du manuel, mais la capacité à expliquer comment les échantillons sont choisis et pourquoi ce choix-là.

Cet article décrit des mécanismes ; il ne fixe aucune obligation. Le règlement applicable, les moyens de conformité publiés par l’autorité et la documentation approuvée ou acceptée de l’exploitant prévalent en toutes circonstances sur ce qui est écrit ici.

Questions fréquentes

Faut-il auditer tous les domaines chaque année ?

Le programme doit couvrir l’ensemble des domaines sur un cycle défini par l’exploitant et connu de l’autorité ; la couverture est une obligation, la répartition de l’effort à l’intérieur du cycle ne l’est pas. Rien n’interdit un tirage minimal sur les domaines stables et une profondeur concentrée sur les strates que les données désignent. Ce qui se vérifie en visite, c’est que le cycle annoncé a été tenu et que les écarts entre dates prévues et dates réalisées sont expliqués.

Un domaine sans aucun constat depuis deux ans est-il un problème ?

Pas en soi, mais c’est une anomalie qui appelle une explication. Sur une activité réelle, un échantillon suffisamment large finit par produire des écarts mineurs ; leur absence prolongée signale plus souvent un tirage trop petit ou mal ciblé qu’une perfection opérationnelle. La réponse attendue est le détail du plan d’échantillonnage, pas une affirmation de conformité.

Que vaut un audit à blanc confié à un intervenant extérieur juste avant la visite ?

Il a de la valeur s’il est réalisé assez tôt pour que ses constats soient analysés, traités et vérifiés avant la visite. Lancé trois semaines avant, il produit surtout des constats ouverts sans analyse de cause, que l’inspecteur trouvera et lira comme un aveu. L’intervenant extérieur est surtout utile là où l’indépendance interne est difficile à démontrer, notamment dans les petites structures.

Un constat interne ouvert peut-il aggraver la situation de l'exploitant devant l'autorité ?

Un constat correctement analysé, traité dans le délai qu’on s’est fixé et vérifié par ré-échantillonnage joue en faveur de l’organisation, parce qu’il démontre que la fonction de détection fonctionne. Ce qui aggrave, c’est le constat ouvert sans échéance, l’échéance repoussée plusieurs fois, ou la clôture sans preuve d’efficacité. Ce qui aggrave davantage encore, c’est l’écart que l’autorité relève alors qu’il figurait déjà, non traité, dans le registre interne.

Comment vérifier l'efficacité d'une action corrective sans attendre des mois ?

En définissant dès l’ouverture du constat la strate à rééchantillonner, la taille de l’échantillon et la date du contrôle. Sur une activité fréquente, quelques semaines suffisent à reconstituer une population exploitable ; sur une activité rare, il faut assumer une échéance longue et l’écrire, plutôt que clore par un amendement documentaire. Écrire la vérification au moment de l’ouverture est aussi ce qui empêche la clôture déclarative.

Que peut demander l'inspecteur au sujet d'une activité sous-traitée ?

La responsabilité restant chez l’exploitant, il peut demander le contrat et ce qu’il prévoit du droit d’accès de l’autorité aux locaux et aux données du prestataire, le programme et les rapports d’audit de ce prestataire, ainsi que le traitement des constats qui en sont issus. Les dispositions applicables prévoient en général qu’il puisse aussi se rendre lui-même chez le prestataire. Une activité sous-traitée sans audit propre est un écart de système, indépendamment de la qualité du service rendu.

Commentaires

Laisser un commentaire

Découvrez l’écosystème FL330

FL330, c’est toute l’aviation professionnelle — explorez nos autres espaces.