Traitement automatisé : Python et PL/pgSQL
Automatisé les traitements de données avec des scripts Shell,
PL/pgSQL, Python et Transact‑SQL pour accroître la productivité et
l'efficacité.
2015 – 2022

Situation. Une charge régulière de traitements de données récurrents
était exécutée à la main. Le traitement manuel des données pose deux
problèmes simultanés : il consomme du temps et manque de cohérence —
à force de répéter une tâche manuellement, elle finit par être
réalisée légèrement différemment, et certaines de ces différences
sont des erreurs.

Tâche. L'objectif était d'automatiser ces tâches, à la fois pour
récupérer du temps et pour les fiabiliser.

Action. Le traitement des données a été automatisé dans les bases et
systèmes concernés, avec les moyens adaptés à chaque tâche — des
scripts Shell pour faire le lien, PL/pgSQL et Transact‑SQL dans les
bases de données, Python lorsque les besoins dépassaient ce que SQL
pouvait offrir. Les étapes manuelles ont été remplacées par des
tâches s'exécutant toujours de la même manière, ce qui est
précisément l'intérêt : un script ne s'ennuie pas, ne saute pas
d'étape et ne change pas de méthode le vendredi après‑midi.

Résultat. La productivité et l'efficacité ont toutes deux augmenté,
le travail manuel a cessé de peser sur les personnes et le
traitement des données est devenu cohérent et fiable, au lieu de
générer de petites erreurs récurrentes.

Catégories:
1Bases de données	/fr/categories/databases/	data.engineer.company	70
1PostgreSQL	/fr/categories/postgresql/	data.engineer.company	70
1SQL	/fr/categories/sql/	data.engineer.company	70
1Ingénierie des données	/fr/categories/data-engineering/	data.engineer.company	70
1Pipelines de données (ETL/ELT)	/fr/categories/data-pipelines/	data.engineer.company	70
1Automatisation et CI/CD	/fr/categories/automation/	data.engineer.company	70
1Python	/fr/categories/python/	data.engineer.company	70

Prestations:
1Administration de bases de données (DBA)	/fr/services/database-administration/	data.engineer.company	70
1Développement de pipelines de données (ETL/ELT)	/fr/services/data-pipeline-development/	data.engineer.company	70
1DevOps et automatisation CI/CD	/fr/services/devops-cicd/	data.engineer.company	70

hCette page sur le Web	URL:https://data.engineer.company/fr/portfolio/automated-data-processing-in-python-and-pl-pgsql/	data.engineer.company	70
