ARTÍCULO / 01
Herramientas de Auditoría

Herramientas de auditoría en la entrega de software: cómo revisar un pase a producción

Cómo el auditor relaciona planificación, código, pipelines, artefactos, aprobaciones y registros de producción para comprobar los controles de una versión de software.

Publicado
Tiempo de lectura
9 min de lectura
Autora
Angélica Rosario Maisonet
↓

Cuando una versión llega a producción, el equipo suele verificar que la aplicación funcione y que no hayan surgido errores. En una auditoría de TI, yo también revisaría qué código se desplegó, quién lo revisó y cómo se aprobó el pase. Para contestar esas preguntas, probablemente habría que buscar información en varios sistemas.

El requerimiento puede estar en Jira; la revisión de código, en GitLab; la compilación y las pruebas, en Jenkins; el paquete, en Nexus; y la aprobación del cambio, en ServiceNow. La revisión consiste en relacionar esos registros con el despliegue. Una aprobación en ServiceNow aporta evidencia, pero tiene que corresponder a la versión que realmente llegó a producción.

Las herramientas de auditoría ayudan a organizar y comparar esa información. Algunas plataformas apoyan el trabajo de desarrollo y guardan registros de los controles ejecutados. Otras, como SQL, las hojas de cálculo y las herramientas de análisis de auditoría, permiten examinar esos registros. El COBIT for DevOps Audit Program de ISACA cubre aspectos de planificación, despliegue, monitoreo y gestión. Las Normas Globales de Auditoría Interna del IIA establecen el requisito de evidencia: la información que respalda una conclusión debe ser relevante, confiable y suficiente.

Qué aporta cada herramienta

Las herramientas disponibles dependen de la organización. Las plataformas de integración y entrega continuas (CI/CD), como Jenkins, pueden aportar registros de compilación y pruebas. Para revisar la entrega de software, las agruparía según la información que hace falta:

Área Ejemplos Información que se revisa
Requerimiento y aprobación Jira, ServiceNow Motivo del cambio, riesgos, planes de prueba, aprobaciones y excepciones autorizadas.
Código, controles y paquete GitLab o GitHub, Jenkins, Veracode, Nexus Commit revisado, resultados de compilación, pruebas y análisis de seguridad requeridos, y paquete guardado para el despliegue.
Actividad en producción Registros de despliegue, monitoreo de la aplicación y eventos pertinentes de AWS CloudTrail Versión desplegada, persona o cuenta que hizo el cambio y resultado del pase.
Análisis de auditoría SQL, scripts, hojas de cálculo, Caseware IDEA Registros que coinciden entre sistemas, duplicados, información faltante y diferencias que necesitan investigación.

Caseware IDEA, por ejemplo, permite relacionar conjuntos de datos y detectar duplicados o registros faltantes. Con SQL se pueden hacer comparaciones similares. Para relacionar los datos hacen falta identificadores, como el número del cambio, el identificador del commit o el número de compilación. Si cada archivo exportado usa un nombre distinto para la misma versión, primero hay que entender esa diferencia antes de tratar un registro sin coincidencia como un problema.

Cómo revisar un pase

Pensemos en una actualización de un portal para clientes. El equipo registra un requerimiento en Jira y revisa un merge request en GitLab. Jenkins ejecuta las pruebas y genera un paquete ZIP que se guarda en Nexus. Luego se obtiene la aprobación en ServiceNow y se despliega el paquete. En la auditoría hay que confirmar que cada registro corresponda al pase que se está revisando.

Yo comenzaría con una lista de los despliegues a producción obtenida de una fuente distinta a los tickets de cambio. Si se parte solo de tickets aprobados, un pase que nunca tuvo ticket podría quedar fuera. La lista también debe incluir los cambios de emergencia, los despliegues manuales y las aplicaciones que siguen otro proceso dentro del alcance de la auditoría.

Para cada pase seleccionado, se puede revisar el ticket y su historial de aprobaciones, y luego buscar el merge request y el SHA del commit, que identifica esa revisión del código. El registro de compilación debe indicar qué commit se utilizó. Los resultados de las pruebas y los análisis de seguridad tienen que corresponder a esa compilación. Si un control requerido falló o se omitió, debe existir una explicación y la aprobación que exija la política. El paquete guardado y el registro de despliegue completan la comparación.

Una etiqueta como 2.4.1 ayuda a identificar la versión, aunque puede volver a usarse. Un digest criptográfico, o hash, permite comparar con mayor precisión el contenido de los paquetes. Si el digest del paquete desplegado es distinto al del aprobado, hay que investigar. Puede que el equipo lo haya generado nuevamente por una razón válida y no haya actualizado la documentación. También puede que el contenido haya cambiado después de la aprobación. Los registros deben permitir aclarar qué ocurrió.

Las fechas de aprobación requieren otra revisión. Una aprobación registrada después del despliegue puede señalar un problema, pero primero hay que verificar si el cambio siguió un proceso de emergencia autorizado. También se revisa el resultado del pase: si hubo algún incidente, si fue necesario hacer una reversión o rollback y si se completó el seguimiento requerido antes de cerrar el cambio.

Conviene hacer la comparación en el otro sentido. Un ticket aprobado que aparece como completado debe tener un registro de implementación relacionado. De lo contrario, podría describir un trabajo que nunca llegó a producción.

Revisar los accesos y la evidencia de seguridad

La confiabilidad de los registros depende, en parte, de quién puede modificarlos. Una persona con acceso para aprobar código, cambiar la configuración del pipeline, reemplazar un paquete y desplegarlo podría saltarse varios controles. Por eso se revisan las protecciones de las ramas, los permisos de aprobación, las cuentas de servicio y el acceso a los registros. Cuatro cuentas distintas ofrecen poca separación de funciones si una sola persona controla las cuatro.

Los registros de auditoría del repositorio pueden ayudar a identificar cambios de acceso y configuración. Su utilidad depende de los eventos que se registren y del tiempo que se conserven. En AWS, CloudTrail puede aportar información adicional sobre actividad pertinente en la cuenta. Su cobertura depende de los servicios y tipos de eventos recopilados, así que hay que compararlo con el sistema de despliegue. CloudTrail no registra automáticamente cada versión de la aplicación ni el digest de su paquete.

También hay que revisar qué cubren los reportes de seguridad. El análisis estático de seguridad de aplicaciones (SAST) busca determinadas debilidades en el código. El análisis de composición de software (SCA) revisa problemas conocidos en las dependencias. El análisis de infraestructura como código puede aplicar cuando el pase incluye definiciones de infraestructura versionadas. Para cada control requerido se confirma qué repositorio y versión se analizaron, si hubo exclusiones y cómo se manejaron los hallazgos pendientes.

Un pipeline en verde necesita ese contexto. Su estado refleja las tareas y las reglas configuradas para esa ejecución. Si se omitió un análisis de seguridad, se permitió que fallara o se ejecutó sobre otra versión, el resultado general puede dar una idea incompleta. Hay que revisar esos detalles e identificar quién podía aprobar una excepción.

Algunos equipos también conservan una lista de componentes de software (SBOM), digests de los paquetes o registros firmados sobre su procedencia. Cada uno aporta información distinta: el SBOM identifica componentes, el digest permite comparar el contenido de los paquetes y la procedencia verificada ayuda a establecer cómo se hizo la compilación. Su relevancia depende de la tecnología, el riesgo y el proceso de la organización. Todavía hace falta comprobar que el pase estaba autorizado y que se ejecutaron los controles requeridos.

Comparar los pases de un periodo

Para revisar un periodo, se pueden exportar los despliegues, los tickets y los resultados del pipeline, y compararlos con SQL, una hoja de cálculo o una herramienta de análisis de auditoría. Entre las verificaciones útiles están los pases sin ticket, las aprobaciones posteriores a la implementación, las excepciones repetidas a los controles y las compilaciones que no se pueden relacionar con un cambio.

Antes de calcular los resultados, hay que comprobar que la lista de despliegues esté completa. Informar que el 98 % tenía aprobación puede dar una impresión equivocada si el total excluye los pases manuales. Los papeles de trabajo deben identificar de dónde salió ese total y qué limitaciones tiene la información.

Cada diferencia seleccionada para seguimiento se coteja con los registros originales y la política vigente en ese momento. La persona responsable del control puede aclarar un estado poco conocido o una excepción aprobada. Las capturas de pantalla pueden apoyar la revisión, pero los registros originales, cuando están disponibles, permiten examinar los detalles de lo ocurrido.

Es posible que el equipo de desarrollo ya monitoree las compilaciones y los despliegues a diario. Auditoría interna puede usar esa información para hacer pruebas con más frecuencia y mantener su evaluación independiente. La guía del IIA sobre auditoría y monitoreo continuos explica la diferencia entre el monitoreo de la gerencia y el trabajo de auditoría interna.

Para mí, el valor de estas herramientas está en poder explicar un pase con evidencia: qué se solicitó, qué se revisó, qué se aprobó y qué llegó a producción. Si los registros no coinciden, hay un asunto concreto que investigar y discutir con el equipo responsable.

Referencias

  1. The Institute of Internal Auditors (IIA). Global Internal Audit Standards, Standard 14.1: Gathering Information for Analyses and Evaluation.
  2. ISACA. COBIT for DevOps Audit Program.
  3. The IIA. Continuous Auditing and Monitoring.
  4. Caseware. Introduction to IDEA Data Analysis.
  5. GitHub. Reviewing the Audit Log for Your Organization; GitLab. Audit Events.
  6. AWS. Understanding CloudTrail Events y Logging Data Events.
  7. NIST. Secure Software Development Framework, SP 800-218.
  8. SLSA. Verifying Artifacts and Build Provenance.