Beschreibung
Für einen meiner größten Kunde bin ich auf der Suche nach Spezialist_innen im Bereich Data Engineering:Folgende Aufgaben erwarten dich:
- Koordination der Data Integration mit externen Partnern (Spediteure / Carrier, Lager, etc.)
- Identifikation der richtigen Ansprechpartner
- Überprüfung der Datenformate mit Abgleich der Austauschmöglichkeiten der Daten
- Anbindung der Daten an das Data Warehouse (Big Query)
- Transformation der Daten in das interne Standartformat
- Implementierung der DataFlow-Pipelines für die Verarbeitung (Realtime)
Das bringst Du mit:
- Starke Erfahrungswerte im Data Engineering / Data Warehousing
- Einschlägige Erfahrung in Cloud-Technologien (AWS, GCP, etc.) und Workflow-Tools wie Airflow oder DataBeam
- Sehr gute Kenntnisse in ETL-Prozessen
- Know-How ni der Modellierung von Datenstrukturen (SQL & NoSQL)
- Kenntnisse in Java oder Python
Wenn das Projekt spannend für dich klingt, freue ich mich von dir zu hören!
Viele Grüße
Joshua