Beschreibung
Hadoop Operations Architekt (m/w)Wir sind IT-Dienstleister für Projekte, Expertenleasing sowie Personalvermittlung und mit 700 angestellten Mitarbeitern für namhafte Unternehmen tätig.
Für einen unserer Kunden in Hamburg sind wir auf der Suche nach einem Hadoop Operations Architekt (m/w).
Aufgabenbeschreibung:
- Betrieb eines Cloudera Hadoop-Clusters als auch Teile unserer restlichen Infrastruktur sowie Weiterentwickelung dieser in enger Zusammenarbeit mit unserem externen Dienstleister
- Erhebung und Umsetzung von weiteren Sicherheitsanforderungen an das Cluster (Gruppenrechte, IP-Tables, Firewall-Regeln, …) außerhalb von Hadoop
- Steuerung unseres und Abstimmungen mit unserem Hosting-Provider
- Stabilisierung und kontinuierliche Verbesserung der Entwicklungen sowie dem Betrieb unserer Datenplattform
- Unterstützung bei der Entwicklung im Kontext von u.a. Hadoop, Spark, Scala, Akka, Docker, etc.
- Betrieb und Weiterentwicklung von Monitoring- und Deployment-Prozessen und -Infrastruktur
- Sicherer Umgang mit Linux Umgebungen – vor allem Ubuntu
- Fundierte Kenntnisse in der Verarbeitung großer, heterogener Datenmengen mit verteilten Systemen wie Hadoop und Hive sowie Kafka gepaart mit entsprechendem Betriebs-Knowhow dieser Systeme
- Bewährte Entwickler-Skills, bevorzugt in Java/Scala/Python und SQL
- Erste Erfahrung mit Zookeeper und Docker sind sehr willkommen
- Erfahrung im Monitoring von Infrastrukturen und Anwendungen unter Nutzung von Icinga2, NagVis, Graphite, o.ä.
Start: Januar
Laufzeit: 3 Monate
Auslastung: 4 Tage/Woche
Bei Interesse freuen wir uns über die Zusendung Ihres Skillprofils.
Sie können mich auch gerne unter persönlich ansprechen.