Beschreibung
Für unseren Kunden am Standort München suchen wir zum nächstmöglichen Zeitpunkt einen qualifizierten, freiberuflichen:Big Data Engineer für die Weiterentwicklung einer Big Data Analytics Web-Applikation (m/w)
(CP-)
Hauptaufgaben/Projektdetails:
Weiterentwicklung einer Big Data Analytics Web-Applikation
Anbindung und Datenimport von SQL, NoSQL, external APIs zum Hadoop System, Automatisierung, Performance Optimization, Data Organization, Lifecycle Management
Erstellen von Analytics Queries für Spark und Hive Datenbanken mit Scala
Unterstützung bei Management und Monitoring von Hadoop Clustern, Datenbanken und der Server Applikation
Unterstützung bei Tuning, Tracing, Performance-Optimierung der Hadoop Cluster
Einsatzort: München
Einsatzzeitraum: asap bis 31.12.2018 (Verlängerung möglich)
Einsatzvolumen: 5 Tage pro Woche
Ihre fachlichen Voraussetzungen:
Gute Hadoop, Spark und Scala Kenntnisse
Sehr gute Data Ingestion und Data Integration Erfahrung mit Flume, Sqoop, Kafka, NFS
Sichere Umgang mit Scheduling tools wie Oozie und Pig skript
Erstellen von Shell Scripts nach Anforderungen der Projekte
Gute Linux Ubuntu Kenntnisse
Erfahrung mit der Administration von Hadoop-Clustern und Cloudera Manager
Erfahrung mit Monitoring, Tuning, Tracing, Performance-Optimierung von Clustern wünschenswert
Grundlegende Kenntnisse über Java
Scrum
Ihr Ansprechpartner:
Steffen Hahn
auteega GmbH
Kaiserring 14-16
68161 Mannheim
Tel.:
Fax:
Mobil:
E-Mail: