Datenarbeit mit Python und PL/pgSQL automatisiert
Datenverarbeitungsaufgaben mit Shell‑Skripten, PL/pgSQL, Python und
Transact‑SQL automatisiert und Produktivität sowie Effizienz
gesteigert.
2015 – 2022

Situation. Wiederkehrende Datenverarbeitung wurde in erheblichem
Umfang von Hand erledigt. Manuelle Datenarbeit hat zwei Probleme
zugleich: Sie verbraucht Zeit und ist uneinheitlich. Wird dieselbe
Aufgabe oft genug manuell ausgeführt, entstehen kleine Unterschiede
— und einige davon sind Fehler.

Aufgabe. Diese Aufgaben sollten automatisiert werden, um Zeit
zurückzugewinnen und die Verarbeitung verlässlich zu machen.

Massnahmen. Die Datenverarbeitung wurde über alle betroffenen
Datenbanken und Systeme hinweg automatisiert. Je nach Aufgabe kamen
Shell‑Skripte als verbindende Ebene, PL/pgSQL und Transact‑SQL
innerhalb der Datenbanken und Python für Anforderungen jenseits der
SQL‑Möglichkeiten zum Einsatz. Manuelle Schritte wurden durch gleich
ablaufende Jobs ersetzt. Genau darin liegt der Nutzen: Ein Skript
langweilt sich nicht, überspringt keinen Schritt und arbeitet am
Freitagnachmittag nicht anders.

Ergebnis. Produktivität und Effizienz stiegen, die manuelle Arbeit
entfiel, und die Datenverarbeitung wurde einheitlich und
verlässlich, statt fortlaufend kleine Fehler zu erzeugen.

Kategorien:
1Datenbanken	/de/categories/databases/	engineer.company	70
1PostgreSQL	/de/categories/postgresql/	engineer.company	70
1SQL	/de/categories/sql/	engineer.company	70
1Data Engineering	/de/categories/data-engineering/	engineer.company	70
1Datenpipelines (ETL/ELT)	/de/categories/data-pipelines/	engineer.company	70
1Automatisierung und CI/CD	/de/categories/automation/	engineer.company	70
1Python	/de/categories/python/	engineer.company	70

Leistungen:
1Datenbankadministration (DBA)	/de/services/database-administration/	engineer.company	70
1Entwicklung von Datenpipelines (ETL/ELT)	/de/services/data-pipeline-development/	engineer.company	70
1DevOps- und CI/CD‑Automatisierung	/de/services/devops-cicd/	engineer.company	70

hDiese Seite im Web	URL:https://engineer.company/de/portfolio/automated-data-processing-in-python-and-pl-pgsql/	engineer.company	70
