Beschreibung
Aufgabe:- Technische Unterstützung beim Aufbau einer Hadoop-Plattform (Hortonworks) auf Basis von AWS Cloud-Services
- Konzeption der AWS Cloud-Services und des Hadoop-Ökosystems
- Aufsetzen der AWS Cloud-Services
- Installation und Konfiguration des Hadoop-Systems
- Umsetzung von Mandantenfähigkeit und Security-Anforderungen
- Monitoring und Optimierung der Hadoop-Plattform
- Beratung von Kundenprojekten zum Einsatz der Hadoop-Plattform
- Implementierung von Datenintegrationslösungen in Verbindung mit der Hadoop-Plattform
- Konzeption von Big Data Lösungen auf Basis der Hadoop-Plattform
Anforderung:
- Detaillierte Kenntnisse von Hadoop-Distributionen (z.B. Hortonworks HDP, aws EMR)
- Praktische Erfahrungen beim Aufbau einer Hadoop-Plattform auf Basis von Cloud-Services
- Kenntnisse zum automatisierten Rollout von Hadoop-Knoten in einer Cloud-Umgebung
- Praktische Erfahrung bei der Implementierung von Datenanalysen auf Basis des Hadoop-Ökosystems (z.B. MapReduce, Spark, Storm)
- Detaillierte Kenntnisse zur Administration eines Hadoop-Ökosystems
- Praktische Erfahrung beim Import von Daten in ein HDFS-System
- Detaillierte Kenntnisse von Tools zum Datenzugriff in einer Hadoop_Plattform (z.B. Hive, Spark SQL)
- Mehrjährige Projekterfahrung im Hadoop-Umfeld
Wünschenswert:
- Kenntnisse bei der Implementierung von ETL-Jobs mit Talend Open Studio
- Praktische Erfahrungen mit NoSQL-Datenbanken im Hadoop-Umfeld (z.B. HBase, Accumulo)
Umgebung/Sonstiges:
Ansprechpartner: Sam Maleki
Telefon
Beginn: 07.11.2016
Dauer: 23.12.2016
Branche: Logistik/Transport