Beschreibung
Für unseren Kunden in Hamburg suchen wir einen Hadoop Entwickler (m/w)Tätigkeiten:
- Weiterentwicklung des unternehmensinternen BI DataHubs auf Basis von Clickstream-, Kundenstamm- und Transaktionsdaten
- Entwicklung von Datenanalysen und -transformationen mit HiveQL / Spark / Map-Reduce
- Bereitstellung von Datenaggregaten für die Nutzung durch Data Scientists
- Unterstützung bei darüber hinausgehenden Entwicklungen im Kontext von u.a. Hadoop, Spark, Scala, Akka, Docker, etc. / z.B. in eine Eigenentwicklung (Framework)
- Stabilisierung und kontinuierliche Verbesserung der Entwicklungen sowie dem Betrieb unserer Datenplattform
- Hohe Anforderungen an Verfügbarkeit und Performance der Datenbereitstellung sowie des Automatisierungsgrads in der Bereitstellung
- Zunehmende Realtime-Anforderungen, in der Datenverarbeitung, so dass bestehende Architektur mit Kafka und Flink ergänzt wird
Erforderliche Kenntnisse:
- Fundierte Kenntnisse in der Verarbeitung großer, heterogener Datenmengen mit Hadoop/Hive sowie sicherer Umgang mit relationalen Datenbanken wie PostgreSQL/mySQL, Oracle oder EXASolution
- Erfahrungen mit BI / Data Warehousing / Datenmodellierung
- Starke und bewährte Entwickler-Skills, bevorzugt in Java/Scala und SQL
- Sicherer Umgang mit Linux Umgebungen
Wünschenswert:
- Scala
- Jenkins
- Docker
- GIT
- Python
- Apache Flink
- Incinga/Graphite
Bei Interesse freuen wir uns auf Ihr aktuelles Profil im Word-Format (bitte kein PDF)! Reference :J Duration :5 Monate + Option Location : Hamburg Languages : Deutsch, Englisch emagine GmbH Cankaya, Banu T : F :