Auditoría interna antes de una visita de la autoridad: apuntar a lo que realmente se va a revisar

Faisceau de lampe balayant les circuits hydrauliques dans un logement de train d'atterrissage sombre

La carta anuncia la visita para dentro de tres meses. La vigilancia del cumplimiento pone en marcha una auditoría completa: seis áreas, una cuarentena de expedientes, informe final sin ningún hallazgo. El día de la visita, el inspector abre cuatro hallazgos en dos días, dos de ellos en áreas que esa auditoría acababa de cubrir. Nada ha cambiado entretanto: la muestra se había extraído allí donde no había nada que encontrar, y el informe vacío se convirtió en la primera pieza del expediente.

El primer documento solicitado no es el manual de operaciones

Un inspector que llega para una visita programada rara vez empieza por el manual. Pide el programa de auditoría interna, el registro de hallazgos, las fechas realizadas frente a las fechas previstas, los plazos de cierre. En una hora sabe qué es lo que la organización no está mirando.

Es el cambio de fondo de la vigilancia moderna. Al no poder verificar el producto expediente por expediente, la autoridad verifica la función que, internamente, se supone que debe hacerlo: ese componente del sistema de gestión, independiente de la actividad que controla, dotado de un programa que cubre todas las áreas en un ciclo definido. En el lado estadounidense el vocabulario difiere y la lógica es idéntica: la vigilancia se organiza en torno a elementos del sistema y sus atributos — responsabilidad, autoridad, procedimientos, controles, medición de procesos, interfaces.

La pregunta de fondo es la misma en ambos casos: ¿encuentra esta organización sus propias no conformidades antes de que un tercero las encuentre por ella? De ahí una consecuencia poco intuitiva: un registro nutrido de no conformidades de fondo y cierres documentados tranquiliza, un registro vacío inquieta — un sistema de detección que no detecta nada está, estadísticamente, averiado.

Una auditoría que no encuentra nada mide, ante todo, su propia potencia

El cálculo es elemental y casi nunca se hace. Si una determinada proporción de expedientes presenta la no conformidad, la probabilidad de detectar al menos uno en un muestreo aleatorio equivale a uno menos la probabilidad de no detectar ninguno. Con dos expedientes no conformes de cada cien, examinar diez expedientes da menos de una posibilidad entre cinco, treinta da algo menos de una posibilidad entre dos. La auditoría que revisó cuarenta expedientes sin encontrar nada no ha demostrado que la población sea sana: ha demostrado que carecía de la potencia necesaria para saberlo.

De ahí se deriva la pregunta del inspector, temible por su sencillez: ¿cómo constituyó su muestra? La respuesta «al azar, entre los expedientes del año» es en sí misma el verdadero hallazgo: la auditoría se dimensionó para quedar hecha, no para encontrar.

Hay algo peor que la baja potencia: el mal enfoque. Las no conformidades no se reparten de manera uniforme, se concentran en las zonas que escapan a la rutina. Muestrear de forma plana sobre el conjunto acumula ambos defectos.

Probabilidad de encontrar al menos una no conformidad según el tamaño de la muestraGráfico. En el eje horizontal, el número de expedientes examinados, de cero a sesenta. En el eje vertical, la probabilidad de dar con al menos un expediente no conforme, de cero a cien por ciento. La curva continua corresponde a una población que contiene un dos por ciento de expedientes no conformes: sube lentamente y no alcanza la mitad a los treinta expedientes. La curva discontinua corresponde a un diez por ciento de no conformes: supera las tres cuartas partes antes de los quince expedientes y luego se satura. Un punto marca los treinta expedientes sobre la curva continua.0204060expedientes examinados0255075100probabilidad de encontrar una no conformidad (%)10 % no conformes2 % no conformesmenos de una posibilidad entre dos
Sobre una población casi sana, una muestra pequeña no demuestra nada. Con un dos por ciento de no conformes, hacen falta decenas de expedientes para tener una posibilidad entre dos de dar con la no conformidad; con un diez por ciento, quince bastan.

Si una auditoría no encuentra problemas, no significa que todo esté bien. Solo demuestra que la auditoría no era lo suficientemente grande o no miraba en los lugares correctos. Las no conformidades suelen concentrarse en áreas específicas, no están repartidas al azar.

Un operador audita 30 expedientes de mantenimiento de un Airbus A320, con un 2% de no conformidades esperadas. Según el gráfico, solo tiene un 50% de probabilidades de encontrar al menos un problema. Si en cambio audita 15 expedientes de vuelos de traslado (con un 10% de no conformidades), tiene un 75% de probabilidades de detectar un problema.

La trampa: la auditoría en blanco lanzada tres semanas antes de la visita. Deja hallazgos abiertos sin análisis de causa ni plazo cumplido. Una no conformidad abierta desde hace cuatro meses, con un plan de acción fechado y una primera medición de eficacia, es un punto fuerte; la misma no conformidad abierta la víspera es una confesión.

La geografía de las no conformidades

Cuatro familias de situaciones aparecen con más frecuencia en lo que una visita saca a la luz, y todas quedan fuera del alcance de una auditoría organizada área por área.

Las interfaces. Entre el operador y el organismo de gestión del mantenimiento de la aeronavegabilidad, entre este y el taller, entre el operador y el agente de asistencia en escala. Cada cual audita su propio lado del puente, nadie audita el tablero: ahí es donde se pierden los partes técnicos, las transmisiones de carga y las actualizaciones de cualificación.

Las excepciones. El artículo diferido conforme a la lista mínima de equipos, prorrogado una vez y luego otra; el vuelo no regular, el vuelo de traslado tras el mantenimiento; la excepción concedida una noche por teléfono. El procedimiento normal está escrito, aprendido, controlado; la excepción no lo está, y eso es precisamente lo que un inspector pide ver.

Las suplencias. Una persona designada ausente, un suplente que ejerce sin que la suplencia se haya formalizado. Las delegaciones verbales no dejan rastro, y una firma estampada sin la autoridad correspondiente contamina todos los actos del período.

Las transiciones. Nueva versión del manual, nueva herramienta de preparación de vuelos, nuevo tipo añadido al certificado. Una transición abre una ventana en la que coexisten dos versiones. Se cierra; los expedientes producidos mientras estaba abierta permanecen.

Dónde se instala la auditoría interna, dónde muestrea la vigilanciaMatriz de cuatro casillas. En el eje horizontal, la frecuencia de la actividad, de lo habitual a lo raro. En el eje vertical, la densidad de rastros documentales, de bien documentado abajo a poco documentado arriba. Abajo a la izquierda, habitual y bien documentado: vuelos regulares desde la base principal, donde se instala la auditoría interna. Abajo a la derecha, raro pero documentado: vuelos de traslado y vuelos de prueba. Arriba a la izquierda, habitual pero poco documentado: briefings e instrucciones verbales. Arriba a la derecha, casilla sombreada: suplencias, excepciones, artículos diferidos, subcontratación, escalas aisladas — la zona de sombra, la que la vigilancia muestrea en primer lugar.densidad de rastrospoco documentadobien documentadohabitualfrecuencia de la actividadraro, excepcionalzona de sombrasuplencia, excepción, aplazamientosubcontratación, escala aisladabriefings e instrucciones verbalesprácticas no escritasvuelos regulares, base principalaquí se instala la auditoría internavuelos de traslado, vuelos de pruebararos pero documentados
La auditoría de rutina y la vigilancia no apuntan a la misma casilla. La comodidad de una auditoría está abajo a la izquierda; las no conformidades se instalan arriba a la derecha. Toda campaña debería saber cuántas de sus muestras cayeron en la casilla sombreada.

Muestrear como el inspector: partir de los datos, no del calendario

El programa debe cubrir todas las áreas en un ciclo definido: eso es una exigencia. Pero cubrirlo todo no obliga a repartir el esfuerzo por igual. El ciclo da la cobertura mínima; los datos de la organización dicen dónde poner el resto.

Dos hombres analizan información financiera en una computadora, preparándose para una inspección regulatoria.
Auditores revisan datos financieros para garantizar el cumplimiento antes de la visita regulatoria.

Estos datos ya existen y rara vez se usan para esto: partes de sucesos, retrasos técnicos, hallazgos de inspecciones en rampa en el extranjero, no conformidades señaladas por los agentes de asistencia en escala, resultados de los controles en línea, casos límite de tiempo de vuelo y de descanso, aplazamientos de vencimientos de mantenimiento. Cada flujo señala un estrato. Se sobremuestrean los estratos calientes y se mantiene un muestreo ligero sobre el resto: a esfuerzo constante, la probabilidad de dar con una no conformidad real se eleva considerablemente, ya que el esfuerzo se desplaza hacia las zonas donde la proporción de no conformes es más alta.

Queda la técnica que más produce, y que los inspectores practican habitualmente: el trazado transversal. En lugar de examinar cincuenta expedientes de la misma naturaleza, se toma un vuelo real —preferiblemente uno nocturno o una escala desviada— y se remonta toda su cadena: tripulación cualificada, al día en sus controles, formada en la versión del manual vigente ese día; lista mínima de equipos aplicada y el plazo correctamente contabilizado; expediente de vuelo, combustible, centrado y meteorología coherentes con lo que realmente se hizo. Un solo vuelo atraviesa todas las áreas y pone las interfaces bajo tensión.

Aun así hay que admitir que el mapa de los estratos calientes no es el mismo de una operación a otra. Un operador regular sobre una red densa concentra sus riesgos en la repetición: deriva lenta de una práctica, tolerancia convertida en norma local en una escala, no conformidad que se propaga porque todo el mundo hace lo mismo. Un operador a demanda vive, en cambio, casi enteramente en la excepción — destino nunca operado antes, tripulación recompuesta la víspera, asistencia desconocida, decisión tomada fuera del horario laboral; en su caso, la zona de sombra es el régimen habitual, y es el muestreo plano el que pierde todo sentido. Una flota ampliada recientemente, o un manual en pleno proceso de revisión, añade el estrato de las transiciones; una operación ampliamente subcontratada, el de las interfaces contractuales. Un plan de muestreo defendible se resume en una frase: qué es lo que más varía en esta operación, y por qué es ahí donde debe concentrarse el esfuerzo.

El reflejo correcto: la regla de los tres hilos. Antes de cada campaña, elegir tres vuelos reales en tres estratos —una excepción, una interfaz, una transición— y remontar cada uno hasta el registro archivado. Lo que se obtiene de ahí no se consigue de otro modo.

Dos formas de constituir una muestra, con un esfuerzo comparable
Criterio Muestreo plano Muestreo orientado por los datos
Punto de partida el calendario del programa las señales internas recientes
Población objetivo todos los expedientes del área los estratos designados como calientes
Unidad examinada el documento, aislado el vuelo o el vencimiento, de principio a fin
Lo que encuentra errores frecuentes y leves rupturas de interfaz
Lo que se le escapa la excepción, la suplencia, la subcontratación la deriva lenta del régimen habitual
Efecto en la visita el inspector rehace el trabajo el inspector verifica el suyo

Lo que no está registrado no es conforme

Un inspector no constata lo que es cierto, constata lo que es demostrable. «Lo hacemos, simplemente no está escrito» no se puntúa como conforme: una práctica no registrada no sobrevive ni a la marcha de quien la lleva a cabo, ni a una impugnación.

Dos elementos que la documentación confunde merecen separarse. El procedimiento dice lo que debe hacerse: es la obligación. El registro certifica que un acto concreto se ha llevado a cabo, por una persona identificada, en una fecha conocida, sobre la base de una versión identificada del texto.

Un registro útil es atribuible —se sabe quién, cuándo, en qué versión—, legible sin necesidad de su autor, y localizable en un plazo compatible con su uso. La migración de un sistema informático, el paso a la firma electrónica y la subcontratación del archivo hacen desaparecer silenciosamente años de registros.

Una pregunta merece plantearse en frío, porque se planteará en caliente: ¿en qué versión del procedimiento se formó a esta persona, y dónde está la prueba de que recibió la enmienda siguiente? Muchos sistemas de difusión conservan la prueba del envío; el conocimiento efectivo y el índice de revisión exacto al que se refiere se conservan con mucha menos frecuencia.

El reflejo correcto: la prueba de los diez minutos. Elegir tres registros de naturaleza distinta —expediente de formación, parte técnico, prueba de difusión de una enmienda— y pedir a alguien distinto de su custodio habitual que los aporte. Lo que no sale no saldrá tampoco ante el inspector.

El hallazgo interno: qué lo hace creíble

Abrir un hallazgo no cuesta nada; cerrarlo correctamente es un oficio. Tres nociones se confunden permanentemente, y la vigilancia las separa sistemáticamente.

Tres respuestas posibles a un hallazgo, y lo que demuestra cada una
Respuesta Qué hace Qué demuestra Qué no demuestra
Corrección devuelve el caso a la conformidad que la no conformidad fue tratada que no se repetirá
Acción correctiva actúa sobre la causa: procedimiento, interfaz, carga de trabajo que se abordó la causa que el comportamiento ha cambiado
Verificación de eficacia vuelve a muestrear el mismo estrato tras un plazo que el resultado ha cambiado que los demás estratos son sanos

La causa raíz es el punto en el que se pierde la mayoría de los expedientes. «Error del agente» no es una causa, es la descripción de la no conformidad. La causa es lo que permitió que el error pasara: un procedimiento poco practicable tal como está escrito, una carga de trabajo que convierte la verificación en algo teórico, una interfaz en la que cada parte cree que la otra controla.

Después el plazo. Un plazo largo y cumplido vale más que uno corto aplazado dos veces: el aplazamiento mide la diferencia entre lo que la organización se compromete a hacer y lo que realmente puede hacer.

Por último la verificación de eficacia, y ahí es donde el círculo se rompe casi en todas partes. Enmendar el procedimiento y difundir una nota no son pruebas de eficacia, son actos. La eficacia se demuestra volviendo, tras un plazo, a muestrear el mismo estrato. Un hallazgo reabierto tras su cierre cuesta más caro que un hallazgo que permaneció abierto: el círculo no se cierra.

El recorrido de un hallazgo interno y el punto donde se rompe el círculoDiagrama de flujo. Un hallazgo abierto conduce a una pregunta: ¿está identificada la causa raíz? Si es así, acción correctiva, luego verificación de eficacia mediante nuevo muestreo; el cierre solo se produce si la nueva muestra ya no muestra la no conformidad. Si no, una simple corrección sin efecto duradero, y una flecha discontinua vuelve al hallazgo: la no conformidad regresa. Una nota señala que la mayoría de los sistemas se detienen antes de la verificación.hallazgo abiertocausa raíz¿identificada?acción correctivaverificaciónmediante nuevo muestreocierrecorrección sin efecto duraderosínono conformidad ausentela no conformidad regresala mayoría se detiene aquí
La rama inferior no es un error de método, es el recorrido por defecto. Sin identificación de la causa, la no conformidad reaparece con otro disfraz. La línea continua es el único camino que permite un cierre oponible.

La trampa: el cierre por documento. «Procedimiento enmendado, nota difundida, hallazgo cerrado» demuestra que un texto ha cambiado, no que un comportamiento haya cambiado. El inspector irá a verificar él mismo, sobre el terreno, lo que la organización no verificó.

Los dos días: lo que se juega en la sala

La preparación material pesa más de lo que se cree. Un único punto de acceso a los registros, un referente por área que sabe dónde buscar en lugar de un directivo que sabe responder: eso evita las esperas durante las cuales un inspector desocupado amplía su muestra.

Una regla no admite ninguna excepción: nunca presentar un registro creado para la ocasión. Los metadatos de un archivo, la tinta de una firma, la homogeneidad de una encuadernación cuentan su propia historia. Un registro reconstruido a posteriori ya no plantea una cuestión de conformidad sino una cuestión de integridad —que no se puntúa al mismo nivel, ni se subsana con un plan de acción.

Responder a la pregunta planteada es la segunda regla: presentar tres documentos cuando solo se pidió uno abre una vía más. Las personas designadas, por su parte, son puestas a prueba en un punto concreto: ¿conocen su propia documentación? La pregunta más productiva no es «¿qué hacen ustedes en ese caso?» sino «muéstreme dónde está escrito». En las actividades subcontratadas, la responsabilidad no se delega: el inspector pedirá el contrato y lo que este prevé sobre el derecho de acceso de la autoridad a los datos del proveedor, la última auditoría de este y el destino de sus hallazgos.

Qué hay que ir a comprobar en la propia documentación

Seis preguntas pueden verificarse en una tarde. ¿Coinciden las fechas de auditoría realizadas con las fechas previstas del ciclo anunciado? ¿Es la función de auditoría independiente de lo que audita? ¿Cuántos hallazgos internos de fondo en doce meses, y en qué áreas —un área sin ningún hallazgo señala un punto ciego, no la excelencia? ¿Cuál es el plazo medio de cierre, cuántos vencimientos se han aplazado? ¿Cuántos cierres se apoyan en una verificación de eficacia? ¿Alimentan los hallazgos procedentes del exterior el mismo registro que los internos?

Subsiste una zona gris, y más vale abordarla que descubrirla en la sesión: la independencia en una estructura pequeña. La acumulación de funciones suele admitirse ahí, la autoauditoría no, y la frontera entre ambas no está escrita en ningún sitio con precisión. Se demuestra recurriendo a un auditor externo allí donde la acumulación resulta inevitable.

Para quien se prepara para asumir un puesto de persona designada o de responsable de cumplimiento, el punto a trabajar no es la recitación del manual, sino la capacidad de explicar cómo se eligen las muestras y por qué esa elección concreta.

Este artículo describe mecanismos; no establece ninguna obligación. El reglamento aplicable, los medios de cumplimiento publicados por la autoridad y la documentación aprobada o aceptada del operador prevalecen en todas las circunstancias sobre lo aquí escrito.

Questions fréquentes

¿Hay que auditar todas las áreas cada año?

El programa debe cubrir el conjunto de áreas en un ciclo definido por el operador y conocido por la autoridad; la cobertura es una obligación, el reparto del esfuerzo dentro del ciclo no lo es. Nada impide un muestreo mínimo en las áreas estables y una profundidad concentrada en los estratos que señalan los datos. Lo que se verifica en la visita es que el ciclo anunciado se ha cumplido y que las diferencias entre fechas previstas y fechas realizadas están explicadas.

¿Es un problema que un área no tenga ningún hallazgo desde hace dos años?

No en sí mismo, pero es una anomalía que requiere una explicación. Sobre una actividad real, una muestra suficientemente amplia acaba produciendo no conformidades menores; su ausencia prolongada suele señalar más un muestreo demasiado pequeño o mal orientado que una perfección operativa. La respuesta esperada es el detalle del plan de muestreo, no una afirmación de conformidad.

¿Qué vale una auditoría en blanco encargada a un tercero justo antes de la visita?

Tiene valor si se realiza con suficiente antelación para que sus hallazgos se analicen, se traten y se verifiquen antes de la visita. Lanzada tres semanas antes, produce sobre todo hallazgos abiertos sin análisis de causa, que el inspector encontrará y leerá como una confesión. El tercero externo resulta especialmente útil allí donde la independencia interna es difícil de demostrar, sobre todo en estructuras pequeñas.

¿Puede un hallazgo interno abierto agravar la situación del operador ante la autoridad?

Un hallazgo correctamente analizado, tratado dentro del plazo que uno mismo se ha fijado y verificado mediante nuevo muestreo juega a favor de la organización, porque demuestra que la función de detección funciona. Lo que agrava la situación es el hallazgo abierto sin plazo, el plazo aplazado varias veces, o el cierre sin prueba de eficacia. Lo que la agrava aún más es la no conformidad que la autoridad detecta cuando esta ya figuraba, sin tratar, en el registro interno.

¿Cómo verificar la eficacia de una acción correctiva sin esperar meses?

Definiendo, desde el momento en que se abre el hallazgo, el estrato que se volverá a muestrear, el tamaño de la muestra y la fecha del control. En una actividad frecuente, unas semanas bastan para reconstituir una población explotable; en una actividad rara, hay que asumir un plazo largo y dejarlo por escrito, en lugar de cerrar mediante una enmienda documental. Escribir la verificación en el momento de la apertura es también lo que impide un cierre meramente declarativo.

¿Qué puede pedir el inspector sobre una actividad subcontratada?

Como la responsabilidad sigue siendo del operador, puede pedir el contrato y lo que este prevé sobre el derecho de acceso de la autoridad a las instalaciones y a los datos del proveedor, el programa y los informes de auditoría de ese proveedor, así como el tratamiento de los hallazgos que de ellos se deriven. Las disposiciones aplicables generalmente prevén también que pueda personarse él mismo en las instalaciones del proveedor. Una actividad subcontratada sin auditoría propia es una no conformidad de sistema, independientemente de la calidad del servicio prestado.

Commentaires

Deja una respuesta

Découvrez l’écosystème FL330

FL330, c’est toute l’aviation professionnelle — explorez nos autres espaces.