Beschreibung
Für einen unserer Kunden sind wir auf der Suche nach einem Big Data Entwickler (m/w)Tätigkeiten:
• Beratung im Bereich der SoftwareEntwicklung
• Beratung und Entwicklung von POCs in den Bereichen: Lokalisierung in Mobilfunknetzen, Clustering von Bewegungsmustern
• Inhaltliche Planung und Durchführung von Produktivsetzungen von POCs
• Beratung bei der Entwicklung und Übertragung von Algorithmen in Produktivsysteme
• Beratung bei der Entwicklung, Validierung und Produktionalisierung von Data Science Applikationen mit den DataScientists und DevOPS
• Beratung & Entwicklung von Big Data ETL Pipelines auf Basis gängiger AWS Services & Open Source Frameworks (Hadoop, Hive, Scala, Spark, EMR, Lambda)
o Skalierbarkeit
o Performance- und Kosteneffizienz
o Erstellung von zugehörigen Monitoring & Alerting-Mechanismen
• Prüfung der Ergebnisqualität anhand von Anwendungsfällen
• Inhaltliche Planung und Durchführung von Einweisungen, Übergabe und Benutzung der erstellten Anwendungen
Angeforderte Erfahrung:
• Mindestens 1 Jahr Erfahrung mit Big Data Technologien insb. Apache Spark (Scala + PySpark), Hadoop, AWS
• Gute Kenntnisse von AWS Services, insb. EMR, EC2, S3, Lambda
• Sehr gute Kenntnisse mit GIT, Jira, SSH, Confluence
• Sehr gute Erfahrung in agiler Arbeitsweise (Pair Programming, Code Reviews, Arbeiten in Sprints, Dokumentation)
• Sehr gute Teamfähigkeit
• Gute Kenntnisse in Scala, Python (PySpark), SQL
• Gute Erfahrung im Packaging und Deployment (insbes. Spark Jobs)
• Erfahrung im Umgang mit großen Datenmengen, Skalierbarkeit
• Erfahrung in Datenvisualisierung
• Vorteilhaft sind Kenntnisse in Java, R, Jupyter Notebooks, R-Shiny, Geodaten, Umgang mit Datenbanksystemen
• Sicherer Umgang in Linux und Scripting mit Bash und Python, REST Interfaces
• Mehrjährige Berufserfahrung im IT-Bereich
Srachkentnisse:
• Englisch - fließend
• Deutsch - fließend
Anfang: ASAP
Dauer: 2 Monate+
Einsatzort: München
Kontaktperson:
Tsvetelina Ivanova