Data Engineer / Cloud & Infrastruktur Spezialist (m/w/d)
In diese Aufgaben steckst du deine Energie:
-
Als (Senior) Data Engineer / Cloud & Infrastruktur Spezialist (m/w/d) bist du verantwortlich für die technische Umsetzung und den Betrieb einer modernen, skalierbaren und sicheren Cloud-Datenplattform. Du bringst tiefgehendes technisches Wissen mit und sorgst für die nahtlose Integration von Daten, Systemen und Technologien im Data Engineering-Umfeld in einer komplexen IT-Landschaft.
-
Du konzipierst, entwickelst und optimierst leistungsstarke Datenarchitekturen sowie ETL/ELT-Strecken auf Basis moderner Cloud-Technologien, insbesondere Azure Databricks und dem Azure-Ökosystem, einschließlich Azure Data Factory und idealerweise auch Microsoft Fabric. Auch übernimmst du die Verantwortung für die technische Infrastruktur der Datenplattform und stellst sicher, dass sie hochverfügbar, performant und sicher ist. Dabei nutzt du Infrastructure-as-Code (Terraform), um Cloud-Ressourcen für die Datenverarbeitung effizient bereitzustellen und zu konfigurieren.
-
Auch entwickelst robuste CI/CD-Pipelines zur Automatisierung von Deployments und zur Gewährleistung eines reibungslosen Betriebs und stellst sicher, dass Security- und Compliance-Anforderungen in der gesamten Data Engineering-Landschaft eingehalten werden, insbesondere durch Identity & Access Management (IAM), Netzwerk-Sicherheit, Verschlüsselung und Governance.
-
Zudem analysierst und optimierst du Datenverarbeitungsprozesse hinsichtlich Skalierbarkeit, Performance und Kosten.
-
Weiterhin unterstützt du Data Engineers, Data Scientists und Analysten durch technische Beratung und Engagement bei der Nutzung und Weiterentwicklung der Plattform.
Das bringst du mit:
- Dein erfolgreich abgeschlossenes Studium (Master) der (Wirtschafts-) Informatik oder eine vergleichbare Ausbildung bildet die theoretische Basis.
- Du hast tiefgehende Erfahrung im Bereich Cloud-Architekturen, insbesondere Azure Databricks und dem Azure-Ökosystem, einschließlich Azure Data Factory und idealerweise auch Microsoft Fabric.
- Fundierte Kenntnisse in Infrastructure-as-Code (Terraform) sowie in DevOps- und CI/CD-Praktiken (Azure DevOps) sowie gute Kenntnisse in Python (PySpark) und SQL für die Entwicklung von Datenpipelines und Transformationen setzen wir ebenfalls voraus.
- Auch bringst du Verständnis für Netzwerkarchitekturen, Security-Konzepte (IAM, RBAC, Firewalling) und Verschlüsselungstechniken im Cloud-Umfeld mit.
- Eine analytische Denkweise, Eigeninitiative sowie die Fähigkeit, komplexe technische Sachverhalte verständlich zu kommunizieren, erwarten wir außerdem.
Düsseldorf, DE, 40233