Beschreibung
Wir suchen einen IT Consultant (m/w) Hortonworks HDFS, Hive, Hbase, Kafka für das Projekt "VENDO - Datenbereitstellung Basis" (Umfang 145 PT).PROJEKTZIELE:
Die Leistungen werden im Projekt Datenbereitstellung Basis des Programm Vendo erbracht.
AUFGABEN:
• Technischer Aufbau des Data Lakes, Konfiguration und Installation von Hortonworkskomponenten
• Fokussiert auf die Datenbereitstellung, -haltung, -sicherheit und –qualität
• Verfügbarmachung der Daten bspw. Unter der Verwendung von HDFS, Hive, Hbase und Kafka
• Umsetzung des Metadatenkonzepts und der Zugriffssteuerung
ANFORDERUNGEN:
• Sehr gut Kenntnisse im Hadoop Hortonworks Framework
• Sehr gute Kenntnisse der Spezifika von Big Data / BI Anwendungsszenarien
• Sehr gute Kenntnisse in den Bereichen Datenmodellierung, Data Warehouse, Big Data, Data Lakes und Aufbau von Data Dictionaries
• Erfahrungen in Konfiguration von Hortonworkskomponenten und APIs/ Schnittstellen
• Erfahrung in mindestens einer Programmiersprache wie Java, Scala und/oder Python
• Erfahrungen im Umfeld der Implementierungs-, Test-, Migrations-, Cut-Over-, Release-Planung
• Nachgewiesene Erfahrung in dafür notwendigen technische Komponenten wie No-SQL DBs, SQL DB und Produkte wie z.B Hadoop und Cassandra
• Praktische Erfahrung in der Integration von Lösungen in bestehende Landschaften inkl. Hybrid-Architekturen (Cloud & On-Premise)
• Kenntnisse moderner Betriebs- und Entwicklungsarchitekturen (Cloud-Infrastructure)
• Nachgewiesene Erfahrung in der Durchführung agiler Projekte
• Erfahrung in der Anwendung agiler Entwicklungsprozesse
• Erfahrung Ansible und Cloud Formation
• Bahn Know-How wünschenswert