Beschreibung
Aufgabe:• Technische Unterstützung beim Aufbau einer Hadoop-Plattform auf Basis von AWS Cloud-Services
--Konzeption der AWS Cloud-Services und des Hadoop-Ökosystems
--Aufsetzen der AWS Cloud-Services
--Installation und Konfiguration des Hadoop-Systems
--Umsetzung von Mandanten-Fähigkeit und Security-Anforderungen
--Monitoring und Optimierung der Hadoop-Plattform
• Beratung von Kundenprojekten zum Einsatz der Hadoop-Plattform
• Implementierung von Datenintegrationslösungen in Verbindung mit der Hadoop-Plattform
• Konzeption von Big Data Lösungen auf Basis der Hadoop-Plattform
Anforderung:
• Detaillierte Kenntnisse von Hadoop-Distributionen (z.B. Hortonworks HDP, AWS EMR)
• Praktische Erfahrungen beim Aufbau einer Hadoop-Plattform auf Basis von Cloud-Services
• Kenntnisse zum automatisierten Rollout von Hadoop-Knoten in einer Cloud-Umgebung
• Praktische Erfahrung bei der Implementierung von Datenanalysen auf Basis des Hadoop-Ökosystems
(z.B. MapReduce, Spark, Storm)
• Detaillierte Kenntnisse zur Administration eines Hadoop-Ökosystems
• Praktische Erfahrung beim Import von Daten in ein HDFS-System
• Detaillierte Kenntnisse von Tools zum Datenzugriff in einer Hadoop-Plattform (z.B. Hive, Spark SQL)
• Mehrjährige Projekterfahrung im Hadoop-Umfeld
Wünschenswert:
• Kenntnisse bei der Implementierung von ETL-Jobs mit Talend Open Studio
• Praktische Erfahrungen mit NoSQL-Datenbanken im Hadoop-Umfeld (z.B. HBase, Accumulo)
Beginn: 24.10.2016
Dauer: 32.12.2016
Branche: Logistik/Transport