Beschreibung
Für unseren Kunden in Frankfurt/Main suchen wir einen erfahrenen Big Data Spezialisten (m/w) mit sehr guten Kenntnissen in Hadoop Hortonworks Framework.
Aufgaben:
Technischer Aufbau des Data Lakes, Konfiguration und Installation von Hortonworkskomponenten
Fokussiert auf die Datenbereitstellung, -haltung, -sicherheit und –qualität
Verfügbarmachung der Daten bspw. Unter der Verwendung von HDFS, Hive, Hbase und Kafka
Umsetzung des Metadatenkonzepts und der Zugriffssteuerung
Muss-Anforderungen:
Sehr gut Kenntnisse im Hadoop Hortonworks Framework
Sehr gute Kenntnisse der Spezifika von Big Data / BI Anwendungsszenarien
Sehr gute Kenntnisse in den Bereichen Datenmodellierung, Data Warehouse, Big Data, Data Lakes und Aufbau von Data Dictionaries
Erfahrungen in Konfiguration von Hortonworkskomponenten und APIs/ Schnittstellen
Erfahrung in mindestens einer Programmiersprache wie Java, Scala und/oder Python
Erfahrungen im Umfeld der Implementierungs-, Test-, Migrations-, Cut-Over-, Release-Planung
Nachgewiesene Erfahrung in dafür notwendigen technische Komponenten wie No-SQL DBs, SQL DB und Produkte wie z.B Hadoop und Cassandra
Praktische Erfahrung in der Integration von Lösungen in bestehende Landschaften inkl. Hybrid-Architekturen (Cloud & On-Premise)
Kenntnisse moderner Betriebs- und Entwicklungsarchitekturen (Cloud-Infrastructure)
Soll-Anforderungen:
Nachgewiesene Erfahrung in der Durchführung agiler Projekte
Erfahrung in der Anwendung agiler Entwicklungsprozesse
Erfahrung Ansible und Cloud Formation
Bahn Know-How wünschenswert