Beschreibung
Sehr geehrter Businesspartner,gerne möchte ich Ihnen ein spannendes Projekt vorstellen.
Gesucht wird ein Data Engineer (m/w) als Unterstützung in einem Projekt zur Weiterentwicklung eines Verfahrens für Targeted Advertising.
Das Projekt hat auf einem Horton Works Stack begonnen und wurde bereits in ersten Teilen für die Kollegen des Data Science Teams freigegeben, sodass es in den nächsten Monaten fertig gestellt werden sollte.
Standort: Köln
Auslastung : Vollzeit , Remote nach Absprache
Start ab sofort für 6 Monate, mit Option auf Verlängerung
Ihre Aufgaben:
- Betreuung und Weiterentwicklung unserer Big Data-Plattform und Tracking-Lösung auf Basis von Hadoop
- Implementierung von skalierbaren Big Data-Lösungen im Bereich Data Driven Decisions sowie Data Science Projekten
- Entwicklung von APIs und Schnittstellen für interne und externe Informationssysteme
- Design und Realisierung skalierbarer (auch schemafreier) Datenstrukturen im NoSQL Umfeld mit den Schwerpunkten Column- und Document-Stores
- Umsetzung automatisierter Prozesse für Data Ingestion und Data Integration
- Etablieren und Gewährleisten von Standards, Qualität und Stabilität entlang der gesamten Prozesskette
Anforderung:
Programmierung C# , SQL, Java
- Erfahrung in der Entwicklung mit den Technologien Hadoop, HDFS, Spark, Hive, HBase und MapReduce
- Idealerweise weitere Kenntnisse mit Technologien wie ElasticSearch und MongoDB
- Praktische Erfahrungen in einer oder mehreren Programmier- und Skriptsprachen (z.B. Java, SQL, Python, Scala, C# ...)
- Umfassende Kenntnisse über eine oder mehrere ETL-Technologien
- Kenntnisse in Tools zur Verarbeitung von Datenströmen wie Apache Kafka, NiFi
Über Ihre positive Rückmeldung mit Ihrer Verfügbarkeit, Ihrem Stunden-/Tagessatz und Ihren aktuellen CV freue ich mich.
Gerne stehe ich Ihnen bei Rückfragen jederzeit zur Verfügung.
Beste Grüße
Manuela Kieper