# Ingestión de Datos: Sistema de Catalogación y Archivado
> Aprende sobre el diseño y desarrollo técnico de sistemas de ingestión de datos: catalogación, archivado y monitorización de ficheros de calibración.

Tags: ingestion-de-datos, base-de-datos, big-data, catalogacion, monitorizacion, arquitectura-software, tecnologia
## Sistema de Ingestión de Datos y Archivos
*   **Visión General**: Sistema diseñado para la creación automática de bases de datos de calibración y la gestión continua de ficheros.
*   **Estructura del Entorno**: Generación automática mediante archivos de configuración, esquemas XSD y definición de telemetría.
*   **Catalogación**: Seguimiento detallado de metadatos incluyendo ID único, tamaño, fechas de creación/ingestión y estados del proceso.

## Herramientas y Flujo de Trabajo
*   **Proceso de Ingestión**: Detección periódica, validación contra XSD, extracción de datos, catalogación y archivado en repositorio.
*   **Tareas Post-Ingestión**: Soporta scripts internos, ejecución de binarios externos y secuencias SQL automáticas.
*   **Gestión de Almacenamiento**: Monitorización de espacio con borrado automático mediante políticas FIFO al superar umbrales configurables.

## Interfaz y Servicios
*   **Consola Web (HMI)**: Monitorización de servicios (IngestDaemon, FileScannerService), gestión de almacenamiento y visualización de productos.
*   **Servicios SOAP**: APIs externas para descarga de ficheros por nombre/ID, consulta de metadatos y operaciones de borrado.
*   **Entregables**: Código fuente, documento de diseño arquitectónico, manual de usuario y plan de pruebas.
---
This presentation was created with [Bobr AI](https://bobr.ai) — an AI presentation generator.