Beschreibung
Für unseren Kunden in Frankfurt am Main suchen wir einen Data Engineer (m/w).
Aufgaben:
Technische Weiterentwicklung des Data Lakes, Konfiguration und Installation von Hortonworkskomponenten
Sicherstellung eines stabilen Betriebs der Big Data Platform im Zusammenspiel mit einer agilen Weiterentwicklung (DevOps)
Behebung von Fehlerzuständen auf der Big Data Platform
Konzeption und Operationalisierung von Betriebsführungsprozessen nach ITIL
Fokussiert auf die Datenbereitstellung, -haltung, -sicherheit und –qualität
Verfügbarmachung der Daten bspw. Unter der Verwendung von HDFS, Hive, Hbase und Kafka
Muss-Anforderungen:
Sehr gut Kenntnisse im Hadoop Hortonworks Framework
Sehr gute Kenntnisse der Spezifika von Big Data / BI Anwendungsszenarien
Sehr gute Kenntnisse in den Bereichen Datenmodellierung, Data Warehouse, Big Data, Data Lakes und Aufbau von Data Dictionaries
Erfahrungen in Konfiguration von Hortonworkskomponenten und APIs/ Schnittstellen
Erfahrung in mindestens einer Programmiersprache wie Java, Spark, Scala und/oder Python
Erfahrungen im Umfeld der Implementierungs-, Test-, Migrations-, Cut-Over-, Release-Planung
Praktische Erfahrung in der Integration von Lösungen in bestehende Landschaften inkl. Hybrid-Architekturen (Cloud & On-Premise)
Kenntnisse moderner Betriebs- und Entwicklungsarchitekturen (Cloud-Infrastructure)
Erfahrung mit IT Service Management nach ITIL
Erfahrung mit DevOps Rolle
Soll-Anforderungen:
Erfahrung in der Anwendung agiler Entwicklungsprozesse