Beschreibung
Für unseren Kunden in Hamburg suchen wir einen Hadoop-Entwickler (m/w)Projektbeschreibung:
Für das System Konzernmanagement-Datenbank (KMDB) ist ein Nachfolger zu erstellen. Ziel des Projekts ist die Entwicklung eines Prototyps, mit dem die Nutzung von umfangreichen anonymisierten gruppenübergreifenden Daten (CRM-, Transaktions- und Web-Bewegungsdaten) zur Optimierung des
Werbemittel-Scorings und die Umstellung des Scorings auf automatisierte Machine Learning Modelle getestet wird. Das Projekt wird agil umgesetzt (Scrum). Unser Kunde stellt den Product Owner und den Scrum Master. Die externen Mitarbeiter sind Teil des Scrum Teams.
Aufgaben:
Entwicklung von Datenanalysen und -transformationen mit HiveQL / Map-Reduce
Bereitstellung von Datenaggregaten für die Nutzung durch Data Scientists
Arbeiten im Kontext von u.a. Hadoop, Scala, etc.
Unterstützung des BI User Profiling Scrum-Teams bei der Entwicklung eines Predictive Analytics-Projekts
Erforderliche Kenntnisse:
Fundierte Kenntnisse in der Verarbeitung großer, heterogener Datenmengen mit Hadoop und Hive oder Impala sowie sicherer Umgang mit relationalen Datenbanken wie PostgreSQL/mySQL, Oracle oder EXASolution
Entwickler-Skills, bevorzugt in Java/J2EE Scala und SQL
Scrum
Architekt
SQL
Unix / Linux
Wünschenswert:
Scala
Deployment – Jenkins
Docker
Stash/GIT
ETL / Talend
Python
Apache Flink
Virtualisierung/ Cloud
Bei Interesse freuen wir uns auf Ihr aktuelles Profil im Word-Format (bitte kein PDF)! Reference :J Duration :2 Monate + Option Location : Hamburg Languages : Deutsch emagine GmbH Cankaya, Banu T : F :