Beschreibung
Für unseren Kunden in Bayern suchen wir ab 15.03.2018 einen Data Engineer (m/w).
Ihre Aufgaben:
- Entwurf und Implementierung von Komponenten zur Datenintegration aus strukturierten Datenquellen
- Aufbereitung und Harmonisierung der Daten für Machine Learning Modelle
- Entwicklung von Workflows zur automatisierten Verarbeitung der Daten
- Test und Qualitätssicherung der entwickelten Komponenten
Ihre Qualifikation:
- Sehr gute Programmierkenntnisse in Scala
- Sehr gute SQL-Kenntnisse
- Fundierte Erfahrungen in der Entwicklung von ETL-Prozessen auf Big Data Infrastrukturen
- Erfahrungen mit Apache Spark
- Erfahrungen mit Linux Betriebssystemen
- Programmierkenntnisse in Python von Vorteil, insbesondere PySpark
- Gute Kenntnisse in der Einrichtung, Konfiguration und Arbeit mit Hadoop-Komponenten (z.B. HDFS, Hive, Hue) wünschenswert
Sie fühlen sich angesprochen und sind interessiert? - Dann freuen wir uns auf Ihre aussagekräftige Kontaktaufnahme!