Beschreibung
Sehr geehrte Damen und Herren,aktuell bin ich auf der Suche nach einem BIg Data Engineer (m/w)
Ort: München
Start: 03.09.2018
Laufzeit: Ende 2018 ++ (Option auf Verlängerung bis Ende 2019)
Auslastung: Fulltime, flexibel
Bei diesem Projekt geht es um die Weiterentwicklung einer Big Data Analytics Web-Applikation.
Aufgaben:
- Anbindung und Datenimport von SQL, NoSQL, external APIs zum Hadoop System, Automatisierung, Performance Optimization, Data Organization, Lifecycle Management
- Erstellen von Analytics Queries für Spark und Hive Datenbanken mit Scala
- Unterstützung bei Management und Monitoring von Hadoop Clustern, Datenbanken und der Server Applikation
- Unterstützung bei Tuning, Tracing, Performance-Optimierung der Hadoop Cluster
Anforderungen:
- Gute Hadoop, Spark und Scala Kenntnisse
- Sehr gute Data Ingestion und Data Integration Erfahrung mit Flume, Sqoop, Kafka, NFS
- Sichere Umgang mit Scheduling tools wie Oozie und Pig skript
- Erstellen von Shell Scripts nach Anforderungen der Projekte
- Gute Linux Ubuntu Kenntnisse
- Erfahrung mit der Administration von Hadoop-Clustern und Cloudera Manager
- Erfahrung mit Monitoring, Tuning, Tracing, Performance-Optimierung von Clustern wünschenswert
- Grundlegende Kenntnisse über Java
- Scrum
Haben Sie eventuell Interesse oder kennen jemanden, für den das Projekt interessant sein könnte? Ich freue mich auf ein Feedback von Ihnen.
Freundliche Grüße aus Heidelberg,
Ersin Burak Arslan
_________________________________________________________
Senior Partner Manager
iSAX Consulting GmbH
Bergheimer Straße 109
69115 Heidelberg
Tel
Fax
Mail:
Web: http://www.isax.com