Senior Databricks Data Engineer (m/w/d) | Köln / Remote

QualiStack GmbH
Ansprechpartner: Nadine Karberg
Köln,  remote,  Deutschland
60% RemoteFreiberuflichab sofortDauer 3 Monate100% Auslastung
TelekommunikationDelta LakeData ArchitectureData GovernanceETLData MigrationDatenqualitätData WarehousingDatenbankentwicklungPythonSQLDatenbank-EnginesDatenbank-MigrationPySparkDatabricks

Beschreibung

Für ein langfristiges Transformationsprojekt bei einem führenden Unternehmen der Telekommunikationsbranche suchen wir einen erfahrenen Senior Databricks Data Engineer (m/w/d). Im Fokus steht die Migration einer bestehenden Oracle-/Informatica-DWH-Landschaft in eine moderne Azure-Lakehouse-Architektur.
Sie arbeiten eng mit Fachbereichen sowie anderen Data Engineers zusammen und entwickeln skalierbare Datenlösungen auf Basis von Azure und Databricks. Neben der technischen Umsetzung begleiten Sie die Migration bestehender ETL-Prozesse, stellen Datenqualität und Governance sicher und unterstützen die Projektteams bei Tests und Produktivsetzungen.

Rahmenbedingungen
  • Start: ASAP
  • Laufzeit: bis 31.12.2026
  • Verlängerungsoption: Ja, langfristige Zusammenarbeit vorgesehen
  • Auslastung: Vollzeit
  • Einsatzort: Köln / Remote
  • Remote-Anteil: 60 %
  • Vor-Ort-Anteil: 40 %
  • Erfahrungslevel: Senior
  • Wohnort idealerweise im Umkreis von 100 km um Köln
Aufgaben
  • Entwicklung und Betrieb von Data-Engineering-Lösungen auf Azure und Databricks
  • Umsetzung und Optimierung von Databricks-Pipelines
  • Migration bestehender ETL-Prozesse in eine moderne Lakehouse-Architektur
  • Sicherstellung von Datenqualität, Governance und Berechtigungskonzepten
  • Performance-Optimierung großer Datenmengen
  • Unterstützung von Test-, Parallelbetriebs- und Cutover-Phasen
  • Zusammenarbeit mit Fachbereichen und Entwicklungsteams im Scrum-Umfeld
Must-have Anforderungen
  • Umfangreiche Erfahrung mit Databricks
  • Praxiserfahrung im Aufbau und Betrieb von Lakehouse-Architekturen
  • Sehr gute Kenntnisse in Delta Lake, Unity Catalog und DLT/SDP
  • Sehr gute Kenntnisse in Python, PySpark und SQL
  • Erfahrung mit Data Warehousing und Datenmodellierung
  • Erfahrung mit Historisierungskonzepten (SCD2)
  • Erfahrung in der Migration klassischer ETL-Lösungen
  • Scrum-Erfahrung
  • Sehr gute Deutschkenntnisse
Nice-to-have Anforderungen
  • Erfahrung in Azure Data Platform Projekten
  • Erfahrung mit Oracle- oder Informatica-Migrationen
  • Erfahrung mit Data Governance Frameworks
  • Kenntnisse im Telekommunikationsumfeld
Bewerbung
Bitte bewerben Sie sich mit Ihrem aktuellen CV unter Angabe Ihres Stundensatzes direkt über die FreelancerMap-Plattform.

Bewerben