Data Engineering (Fokus Daten) (m/w/d)

remote  ‐ Vor Ort
Dieses Projekt ist archiviert und leider nicht (mehr) aktiv.
Sie finden vakante Projekte hier in unserer Projektbörse.

Schlagworte

Python SQL Automobilindustrie Microsoft Azure Information Engineering ETL Datenmodell Apache Spark Graphql APIs Data Analysis Big Data Beratung Projektauftrag Power Bi System Design Daten- / Datensatzprotokollierung Backend Pytest Data Lake Pyspark Datenlieferung

Beschreibung

Für eines unserer Projekte im Automotive Bereich sind wir auf der Suche nach externer Beratung. Im Wesentlichen geht es um operative Beratungsaufgaben in Anlehnung der Rolle des Data Backend Engineers (Fokus Data).

Projektaufgaben:
- Sicherstellung zuverlässiger Datenlieferung von Azure Synapse zu PowerBI
- Erstellung verschiedener ETL-Pipelines zur Erfassung von Daten aus verschiedenen lokalen Datenquellen und Abfrage-Endpunkten (REST-APIs und GraphQL-Abfragen)
- Erstellung von Python-Skripten zur Integration unter Verwendung verschiedener Client-Typen
- SQL-Fähigkeiten zur Transformation von Daten aus verschiedenen DBs in Berichte

Skill-Anforderungen:
- Starke Programmierkenntnisse in Python und SQL
- Fähigkeit, ETL-Prozesse einzurichten und die Entwicklung und Aufrechterhaltung von Datenpipelines durchzuführen
- Kenntnisse in Big-Data-Technologien, hauptsächlich Apache Spark
- Kenntnisse in Datenmodellierung und Best Practices für Datenmodellierung
- Optional: IT-Architektur: Lösungs- und Systemdesign zur Abstimmung mit der aktuellen vorhandenen Lösung
- PowerBI-Kenntnisse sind optional (nicht zwingend erforderlich) für Data Engineering-Rollen
- Benötigte Fähigkeiten in den folgenden Technologien: Azure Services, SQL-Datenbank, Synapse Analytics, Azure Datalake-Dienste und Blob-Speicher, SQL Serverless Pool, Python, Apache Spark / PySpark, Pytest, graphql-python/gql, DBT
- Projektkenntnisse aus dem Automotive Bereich
- Fließende Deutsch- und Englischkenntnisse

Rahmendaten:
- Laufzeit: asap - mind. Jahresende
- Verlängerungsoption: gegeben
- Auslastung: 100 %
- Arbeitsort: Remote

Wenn Du an dem Projekt interessiert bist, freue ich mich auf Dein aktuelles Profil inklusive eines Remote-Stundensatzes unter Bewerbungen über Freelancermap werden nicht berücksichtigt.

Im Gespräch gebe ich Dir gern weitere Einblicke in das Projektumfeld.

Auf Deine Antwort freue ich mich.

Mit freundlichen Grüßen
Thing Wong
Start
ab sofort
Auslastung
100% (5 Tage pro Woche)
Dauer
4 Monate
(Verlängerung möglich)
Von
diconium GmbH
Eingestellt
14.08.2024
Ansprechpartner:
Sook-Thing Wong
Projekt-ID:
2784905
Branche
Automobilindustrie
Vertragsart
Freiberuflich
Um sich auf dieses Projekt zu bewerben müssen Sie sich einloggen.
Registrieren