Automatisierung und CI/CD
22 Leistungen
Diese Arbeit gehört zu unserem Angebot im Bereich Data Governance und Datenqualität, Entwicklung von Datenpipelines (ETL/ELT), DevOps- und CI/CD‑Automatisierung, Datenanalyse und BI‑Dashboards, Datenbankadministration (DBA), Backend- und API‑Entwicklung, Sicherheits- und Zugriffsverwaltung und Site Reliability und Monitoring.

Foto: jarmoluk / Pixabay 
Foto: MaximilianHemon / Pixabay
Die Teile Ihres Systems verbinden
Die unter „Automatisierung und CI/CD“ gesammelten Arbeiten zeigen einen Teil eines funktionierenden Systems. Wir können helfen, diesen Teil mit dem Rest Ihres Betriebs zu verbinden. Zahlen kommen termingerecht dort an, wo sie gebraucht werden, ohne dass am Monatsende jemand eine Tabelle kopieren muss.
Eine vergleichbare Herausforderung finden
Folgen Sie einem Beispiel, das Ihrer Situation ähnelt. Die Rückschau beschreibt die Entscheidungen hinter dem Ergebnis und geht über die bloße Technologiebezeichnung hinaus. Ein Infrastrukturplan für 14 Abteilungen — 14 Forschungsabteilungen mit einem gemeinsamen Infrastrukturplan
-
30 Tage Stromdaten in 180 ms
Varianten zur stündlichen Aggregation des Stromverbrauchs in Python, SQL und Bash + Jq entwickelt; der Python‑Benchmark verarbeitete einen 30‑Tage‑JSONL‑Datensatz in 180 ms.
-
1.000 Fehler in geografischen Daten behoben
1.000 Probleme in geografischen Daten und Zeitreihendaten mit GDAL, ArcGIS, PostGIS, Mapbox, QGIS, SQL (PL/pgSQL, Transact‑SQL) und Bash behoben und eine hochwertige Big‑Data‑Verarbeitung sichergestellt.
-
6 ETL/ELT‑Pipelines entworfen und betrieben
6 ETL/ELT‑Pipelines mit Google BigQuery, MSSQL, PostgreSQL, Shell‑Skripten, PL/pgSQL und Transact‑SQL entworfen, umgesetzt und administriert sowie Daten für eine effiziente Verarbeitung durch die Python‑API integriert.
-
Das erste Observability‑Dashboard aufgebaut
Das erste Observability‑Dashboard des Unternehmens entwickelt und eingeführt, das Systemperformance und Datenvisualisierungen in Echtzeit auf dem großen Bürofernseher anzeigt.
-
10 PostgreSQL-/MS‑SQL‑Server auf Ubuntu
10 PostgreSQL- und MS‑SQL‑Server auf Ubuntu‑Linux‑VPS entworfen, bereitgestellt und gewartet und dabei Serverperformance und Zuverlässigkeit sichergestellt.
-
1.000 RBAC‑Regeln für sichere Linux‑Server
Die Datensicherheit durch 1.000 RBAC‑Regeln für Entwickler, Anwendungsinstanzen, PostgreSQL, MS SQL und weitere Linux‑Server erhöht, unberechtigte Zugriffe verhindert und die Regeln mit Ansible‑Automatisierung dokumentiert.
-
GIS‑SaaS‑Deployments mit GitHub automatisiert
Bereitstellung, Datenverarbeitung und Berichtswesen einer GIS‑SaaS‑Anwendung mit GitHub Actions CI/CD, Python, Bash und SQL automatisiert.
-
20 GIS‑Datenpipelines automatisiert ausgeliefert
Die Bereitstellung von 20 GIS‑Datenpipelines und ETL‑Prozessen für Anwendungsdaten automatisiert und dadurch Infrastrukturautomatisierung und Berichterstattung vereinfacht.
-
100 wichtige Sicherungen mit Barman automatisiert
100 geschäftskritische Datensicherungen mit Barman, Google Cloud, Bash und Python automatisiert und die Datenintegrität über die Datenbanken hinweg abgesichert.
-
4.000 Stunden durch GitHub-/GitLab‑CI/CD gespart
Datenanalyse und Softwareentwicklung durch CI/CD‑Praktiken mit GitHub, GitLab, Bash und Python verbessert und 4.000 Stunden eingespart.
-
Ein Datenanalyse‑Berichtssystem entwickelt
Ein Berichtssystem für Datenanalysen entwickelt und den quartalsweisen Softwareumsatz durch Python‑basierte PDF‑Berichte um 400 % erhöht.
-
Datenarbeit mit Python und PL/pgSQL automatisiert
Datenverarbeitungsaufgaben mit Shell‑Skripten, PL/pgSQL, Python und Transact‑SQL automatisiert und Produktivität sowie Effizienz gesteigert.
-
600 PL/pgSQL‑ETL/ELT‑Pipelines entwickelt
600 PL/pgSQL‑basierte ETL/ELT‑Pipelines für effizientere komplexe Datenverarbeitung in mehreren PostgreSQL‑Entwicklungs- und Produktivumgebungen entwickelt.
-
Zeitmanagement- und Berichtssystem entworfen
Ein Zeitmanagement- und Berichtssystem entworfen, das über Jahre ohne wesentliche Änderungen im Produktivbetrieb blieb.
-
Langsame Aufgaben in River‑Jobqueue verlagert
Langsame Verarbeitung aus dem Anfragepfad in eine River‑Jobqueue verlagert — 15 Worker‑Module, 8 geplante Aufgaben und 20 pg_cron‑Jobs — sodass Anfragen zurückkehren, während die zugehörige Arbeit weiterläuft.
-
Zuständigkeit nach Geheimnisleck klar geregelt
Eine Regel zum Zuständigkeitsumfang im Repository festgeschrieben, nachdem eine Umstrukturierung Inventar, Firewallfreigaben und Texte eines anderen Unternehmens hineingetragen hatte; die isolierten Rückstände weiterhin auf Geheimnisse prüfen lassen, statt sie auszuschließen.
-
963 Metadatenblöcke durch einen Graphen ersetzt
963 anonyme Blöcke strukturierter Daten, die das Unternehmen 1.671‑mal erneut beschrieben, durch einen verknüpften Graphen mit 16 Typen aus stabilen Identifikatoren auf Basis des eigenen Web‑Ursprungs ersetzt.
-
Datenbankgestützten Lebenslaufgenerator aufgebaut
Einen datenbankgestützten Generator für Lebenslauf, Referenzen, Portfolio und Anschreiben in Python entwickelt — 41 Module, 10.580 Zeilen — der sechs Ausgabeformate aus einer SQLite‑Quelle mit 23 Tabellen erzeugt, aufgebaut durch eine idempotente Pipeline mit 19 Schritten.
-
Die Prüfwerkzeuge selbst mit Tests geprüft
Tests für die Prüfwerkzeuge selbst geschrieben, nachdem klar war, dass ein nur mit fehlerfreien Eingaben getestetes Werkzeug irgendwann auch nach dem Lesen von nichts Erfolg meldet — einen Tippfehler eingebaut, um die Rechtschreibprüfung zu prüfen, und einen ID‑Bereich aus der Datenbank statt einer Testkonstante übernommen.
-
Sprachübergreifende Zahlenprüfung aufgebaut
Eine sprachübergreifende Inhaltsprüfung entwickelt, die bei fehlenden Zahlen gegenüber dem Englischen und bei sprachfremder Notation fehlschlägt — dabei zwei dänische Beschreibungen ohne eine Kennzahl und sechzehn ukrainische Textstellen mit englischen Anführungszeichen gefunden.
-
Die Lizenz aller ausgelieferten Komponenten kennen
644 Rust‑Crates bei jedem Build auf Lizenzverträglichkeit geprüft und die Wirksamkeit durch das Ändern einer Crate‑Lizenz sowie das Verschieben der festgelegten Kernrevision ohne Neuerzeugung nachgewiesen.
-
13 Adressen ohne Tracking gemessen
Dreizehn Adressen ausschließlich anhand des eigenen Webserver‑Zugriffsprotokolls gemessen — ohne Cookie, Tracker oder Drittanbieterdienst — das Clientnetz beim Schreiben jeder Zeile maskiert und das Ergebnis dauerhaft mit 21 täglichen Zählwerten und 20 monatlichen Facetten archiviert.
Sie entwickeln etwas, das dies benötigt? Kontakt aufnehmen.

