Beschreibung
- Entwicklung von Datenanalysen und -transformationen mit HiveQL / Map-Reduce- Entwicklung und Automatisierung von Datenverarbeitungsstrecken
- Bereitstellung von Datenaggregaten für die Nutzung in predictive analytics Modellen
- Architekturentwicklung
- Arbeiten im Kontext von u.a. Hadoop, Scala, Java, Spark etc.
- Selbständiges, kreatives Arbeiten und Fähigkeit zur eigenständigen Konzeption und Entwicklung von Lösungsansätzen in agilen Umfeld
- Verstärkung des BI User Profiling Scrum-Teams bei der Entwicklung und Lieferung tw. auf predictive analytics basierten Merkmalen einzelner
Profile für den Kunden und deren Konzern-Marketing-Datenbank 2.0
Projektziel:
- Überarbeitung der Datenverarbeitungsstrecken für die Ermittlung von Profilmerkmalen des Kunden mit dem Ziel der Steigerung der
Zuverlässigkeit und Geschwindigkeit der Datenverarbeitungsstrecken im OG BI Cluster
- Integration neuer Daten aus dem Konzern sowie aus externen Datenquellen
- Architektur für ein neu zu erstellendes Data Warehouse zur predictive Analytics gestützten Ermittlung von Katalogempfängern (KMDB 2.0) sowie
Mitentwicklung eines MVP für das System mit Fokus auf der Datenversorgung der Modelle
- Das Team arbeitet agil (Scrum). Der Kunde stellt den Product Owner, den Scrum Master und die Data Scientists. Die externen Mitarbeiter
arbeiten als eng eingebundener Teil des Scrum Teams vor Ort
Anforderung:
Apache Hadoop ++++ (excellent), > 4 yrs.
Java JEE ++++ (excellent), > 4 yrs.
SQL ++++ (excellent), > 4 yrs.
Python ++ (trained), 0-2 yrs.
Hive / Impala ++++ (excellent), > 4 yrs.
Jenkins ++ (trained), 0-2 yrs.
GIT ++ (trained), 0-2 yrs.
SCRUM ++ (trained), 0-2 yrs.
ETL - Extract/Transform/Load ++ (trained), 0-2 yrs.
- Fundierte Kenntnisse in der Verarbeitung großer, heterogener Datenmengen mit Hadoop, Hive; sicherer Umgang mit relationalen Datenbanken wie
PostgreSQL/mySQL oder Oracle
- Starke und bewährte Entwickler-Skills, bevorzugt in Java/Scala und SQL
- Ausgeprägte Erfahrungen mit der Entwicklung von Architekturen
Sprachen:
- Deutsch (fließend)
- Englisch (fortgeschritten)
Soft Skills:
- Analytisches Denkvermögen
- Fähigkeit zur Übersicht
- Kreativität
- Kommunikationsfähigkeit
- Kooperationsfähigkeit
Projektstart: ASAP
Projektende: 30.04.2017 + Option
Auslastung: Fulltime
Leistungsort: Hamburg