Beschreibung
Sehr geehrter Businesspartner,gerne möchte ich Ihnen ein spannendes Projekt vorstellen:
Rolle: Data Engineer (m/w)
Start: 24.09.2018
Ort: Köln
Dauer: 6 Monate, mit Option auf Verlängerung
Auslastung: Vollzeit, remote nach Absprache möglich
Aufgaben:
• Betreuung und Weiterentwicklung unserer Big Data-Plattform und Tracking-Lösung auf Basis von Hadoop
• Implementierung von skalierbaren Big Data-Lösungen im Bereich Data Driven Decisions sowie Data Science Projekten
• Entwicklung von APIs und Schnittstellen für interne und externe Informationssysteme
• Design und Realisierung skalierbarer (auch schemafreier) Datenstrukturen im NoSQL Umfeld mit den Schwerpunkten Column- und Document-Stores
• Umsetzung automatisierter Prozesse für Data Ingestion und Data Integration
• Etablieren und Gewährleisten von Standards, Qualität und Stabilität entlang der gesamten Prozesskette
Anforderung:
• Erfahrung in der Entwicklung mit der Technologie Hadoop (Mindestens 2 Jahre)
• Erfahrung in weiteren Technologien HDFS, Spark, Hive, HBase oder MapReduce sind wünschenswert
• Idealerweise weitere Kenntnisse mit Technologien wie ElasticSearch und MongoDB
• Idealerweise Hintergrundwissen / praktische Erfahrungen in einer oder mehreren Programmier- und Skriptsprachen (z.B. Java,
• SQL, Python, Scala, C# ...)
• Umfassende Kenntnisse über eine oder mehrere ETL-Technologien
• Kenntnisse in Tools zur Verarbeitung von Datenströmen wie Apache Kafka, NiFi
• Lösungsorientierte und kommunikative Persönlichkeit mit Spaß an interdisziplinärer Zusammenarbeit
• Strukturierte und analytische Arbeitsweise
Über Ihre positive Rückmeldung freue ich mich und stehe Ihnen bei Rückfragen gerne zur Verfügung.
Beste Grüße
Laura Inderfurth