Entrega automática de 20 flujos de datos GIS
Automaticé la entrega de 20 flujos de datos GIS y procesos ETL de
datos de aplicaciones, simplificando la automatización de la
infraestructura y la elaboración de informes.
2022 – 2024

Situación. La plataforma dependía de numerosos flujos de datos GIS y
procesos ETL de datos de aplicaciones que se entregaban y vigilaban
manualmente. La ejecución manual crea cuellos de botella y
divergencias y, lo peor de todo, mantiene un riesgo bajo pero
constante de que un flujo falle sin que nadie lo advierta hasta
encontrar datos incorrectos en los sistemas posteriores.

Tarea. La tarea consistía en automatizar la entrega de los flujos y
procesos ETL para que los datos circularan de forma fiable y
previsible sin acompañamiento manual.

Acción. Veinte flujos GIS y los procesos ETL de aplicaciones pasaron
a entregarse automáticamente de principio a fin. Se normalizaron la
programación, los registros y el tratamiento de fallos, de manera
que todos se comportaran igual y, sobre todo, que fuera visible
cualquier diferencia: un fallo solo es silencioso si nada lo vigila.
También se integraron con la automatización de infraestructura y los
informes existentes, formando un sistema coherente en vez de una
colección de scripts cuya ejecución había que recordar.

Resultado. Los veinte flujos y sus procesos ETL funcionaron de forma
automática y previsible, y se ordenó el conjunto de automatización e
informes de infraestructura. El negocio recibió datos fiables y
actuales sin intervención manual y sin el riesgo permanente de
fallos inadvertidos.

Categorías:
1Ingeniería de datos	/es/categories/data-engineering/	data.engineer.company	70
1Flujos de datos (ETL/ELT)	/es/categories/data-pipelines/	data.engineer.company	70
1DevOps	/es/categories/devops/	data.engineer.company	70
1Automatización y CI/CD	/es/categories/automation/	data.engineer.company	70
1Fiabilidad y copias de seguridad	/es/categories/reliability/	data.engineer.company	70
1Monitorización y observabilidad	/es/categories/observability/	data.engineer.company	70
1GIS / Información geoespacial	/es/categories/gis/	data.engineer.company	70

Servicios:
1Soluciones GIS y geoespaciales	/es/services/gis-geospatial/	data.engineer.company	70
1Desarrollo de flujos de datos (ETL/ELT)	/es/services/data-pipeline-development/	data.engineer.company	70
1DevOps y automatización CI/CD	/es/services/devops-cicd/	data.engineer.company	70

hEsta página en la web	URL:https://data.engineer.company/es/portfolio/automated-delivery-of-20-gis-data-pipelines/	data.engineer.company	70
