# Datenarbeit mit Python und PL/pgSQL automatisiert

Datenverarbeitungsaufgaben mit Shell‑Skripten, PL/pgSQL, Python und Transact‑SQL automatisiert und Produktivität sowie Effizienz gesteigert.

2015 – 2022

Situation. Wiederkehrende Datenverarbeitung wurde in erheblichem Umfang von Hand erledigt. Manuelle Datenarbeit hat zwei Probleme zugleich: Sie verbraucht Zeit und ist uneinheitlich. Wird dieselbe Aufgabe oft genug manuell ausgeführt, entstehen kleine Unterschiede — und einige davon sind Fehler.

Aufgabe. Diese Aufgaben sollten automatisiert werden, um Zeit zurückzugewinnen und die Verarbeitung verlässlich zu machen.

Massnahmen. Die Datenverarbeitung wurde über alle betroffenen Datenbanken und Systeme hinweg automatisiert. Je nach Aufgabe kamen Shell‑Skripte als verbindende Ebene, PL/pgSQL und Transact‑SQL innerhalb der Datenbanken und Python für Anforderungen jenseits der SQL‑Möglichkeiten zum Einsatz. Manuelle Schritte wurden durch gleich ablaufende Jobs ersetzt. Genau darin liegt der Nutzen: Ein Skript langweilt sich nicht, überspringt keinen Schritt und arbeitet am Freitagnachmittag nicht anders.

Ergebnis. Produktivität und Effizienz stiegen, die manuelle Arbeit entfiel, und die Datenverarbeitung wurde einheitlich und verlässlich, statt fortlaufend kleine Fehler zu erzeugen.

Rolle: Dateningenieurin
=> /de/categories/databases/ Kategorien: Datenbanken
=> /de/categories/postgresql/ Kategorien: PostgreSQL
=> /de/categories/sql/ Kategorien: SQL
=> /de/categories/data-engineering/ Kategorien: Data Engineering
=> /de/categories/data-pipelines/ Kategorien: Datenpipelines (ETL/ELT)
=> /de/categories/automation/ Kategorien: Automatisierung und CI/CD
=> /de/categories/python/ Kategorien: Python
=> /de/services/database-administration/ Leistungen: Datenbankadministration (DBA)
=> /de/services/data-pipeline-development/ Leistungen: Entwicklung von Datenpipelines (ETL/ELT)
=> /de/services/devops-cicd/ Leistungen: DevOps- und CI/CD‑Automatisierung

=> https://data.engineer.company/de/portfolio/automated-data-processing-in-python-and-pl-pgsql/ Diese Seite im Web
