Databricks Data Engineer (m/w/d) 1x die Woche vor Ort in Köln - rest REMOTE
Pont Connects e.K.
Ansprechpartner: Alena Arnold
REMOTE 1x die Woche vor ORT in KÖLN, Deutschland
Beschreibung
Für meinen langjährigen Kunden bin ich auf der Suche nach einem Databricks Data Engineer (m/w/d)
WICHTIG:
Langfristige Beauftragung
1x die Woche MONTAGS vor Ort-Einsatz in Köln // Rest REMOTE
Auslastung: 100%
Aufgabe:
Als Databricks Data Engineer arbeitest du eng mit Fachbereichen und anderen Data Engineers zusammen und lieferst robuste, skalierbare Datenlösungen --- iterativ, kundenorientiert und im Scrum-Setup.
Auf dem Weg zu Azure-/Databricks-Zielarchitektur überführst du das bestehende Oracle-/Informatica-DWH in eine moderne Azure-Lakehouse-Architektur. Du migrierst ETL-Prozesse in performante Databricks-Pipelines, stellst Datenqualität und Governance sicher und begleitest Tests, Parallelbetrieb sowie den Cutover.
Skills:
•Databricks & Lakehouse Erfahrung –
o fundierte Praxis in der Umsetzung von Lakehouse Architekturen sowie im Aufbau und Betrieb von Databricks.
o tiefe Kenntnisse in Delta Lake, Unity Catalog, DLT/SDP, Berechtigungsmodellen und Governance Mechanismen.
•Programmier- & Datenkompetenz –
o fundierte Erfahrung in Python, PySpark und SQL sowie in der Performance-Optimierung großer Datenmengen.
o AI-basierte Unterstützung wird souverän zur Effizienzsteigerung eingesetzt.
•Migrationsexpertise – idealerweise Erfahrung in der Ablösung klassischer ETL-Strecken und Überführung nach Databricks.
•Datenmodellierung & DWH-Expertise – fundierte Erfahrung im klassischen Business Intelligence Umfeld: Datenhaltung, Datenmodellierung, Datentransport, Historisierung nach SCD2.
•Agile Arbeitsweise – Erfahrung als Entwickler innerhalb eines SCRUM Teams.
Bei Interesse freue ich mich über deinen CV an: Alena.Arnold AT pont-connects.de