Beschreibung
+++ Apache Spark Architect (AWS, OpenStack, Spark Job Scheduling mit Spark SQL, Python, R, DAP, Kerberos, SSO) (m/w/d)+++63 PT bei 5 PT / Woche in Frankfurt / remote-----------------------------------------------------------------------------------------
Als Rahmenvertragspartner suchen wir für unseren Kunden einen Apache Spark Architect (AWS, OpenStack, Spark Job Scheduling mit Spark SQL, Python, R, DAP, Kerberos, SSO) (m/w/d)
Einsatzort: Frankfurt / remote
Zeitraum: 07.09.2020 – 30.12.2020 mit Option
Dauer: 63 PT
Auslastung: 5 PT / Woche
Aufgaben:
- Aufsetzen und Administration von neuen Spark Clustern on-prem und in der AWS Cloud
- Aufnahme von Anforderungen aus des Unternehmens IT-Abteilung bzgl. Security und allgemeiner IT-Strategie
- Beratung von Data Scientists, die Analysen in Spark durchführen, bzgl. Performance- und Speicher-Optimierung
- Monitoring der Spark Cluster
- Management der Anforderungen in Jira
- Integration neuer Datenquellen
- Dokumentation in Confluence
- Code-Verwaltung in GitLa
Anforderungen Kompetenzen / Skills
- Mind. 3 Jahre Erfahrung in der Umsetzung von Apache Spark Architekturen im Enterprise-Umfeld
- Erfahrung als Architekt im Big Data Umfeld mit Apache Technologien in mindestens 2 Projekten
- Erfahrung in der Umsetzung von Spark Job Scheduling mit Spark SQL, Python oder R
- Erfahrung in der Anpassung von Spark durch individuelle Konfigurationen
- Erfahrung im Monitoring von Spark Applikationen
- Erfahrung in der Optimierung der Performance und des Speichers in Spark
Wünschenswert:
- Erfahrung mit Enterprise-Netzwerkumgebungen (Firewalling, Security)
- Erfahrung mit LDAP, Kerberos und SSO
- Erfahrung mit OpenStack
- Erfahrung mit Spark Security
- Erfahrung mit der Arbeit in agilen Teams
- Jira, Confluence, GitLa
Abgabefrist: 03.09.2020 12:00 Uhr
Bei Interesse senden Sie uns bitte Ihr aktuelles Word-Profil mit Angabe Ihres all in UND Remote Tagessatzes und Ihrer Verfügbarkeit an
Bei Fragen und als Ansprechpartner stehen wir Ihnen gern zur Verfügung!
Tel. // Jan Noack
Mit freundlichen Grüßen
Jan Noack
-------------------------------------------------
iSAX GmbH & Co. KG
Weinbergstraße 15
01129 Dresden
Tel.:
Fax:
---
Seit 1998 bieten wir zuverlässig und kompetent Dienstleistungen im IT-Bereich und verfügt über qualifizierte und motivierte Mitarbeiter. Für namhafte Unternehmen wird ein breites Spektrum von IT-Dienstleistungen im IT-Betrieb, in der individuellen Anwendungsentwicklung sowie im Projektmanagement erbracht.