Beschreibung
Ihre Leistungen werden für das Projekt Railmate erbracht. Durch dieses soll durch die höhere Transparenz eine schnellere Erkennung und schneller Abstellung von Missständen bei der Leistungserbringung ermöglicht und neue Erkenntnisse zu Kundenbedürfnissen gewonnen werden.Zur Verarbeitung und das Routing von Feedback soll eine hochautomatisierte Engine weiterentwickelt werden, mit der das Feedback analysiert, aufbereitet, mit betrieblichen Daten verschnitten und den Fachabteilungen zur Verfügung gestellt werden soll.
Im Rahmen des Projektes sollen bestehende Machine Learning Prozesse in eine AWS Infrastruktur portiert werden. Dafür wird primär eine Kombination aus EMR mit Apache Spark-basierten Anwendungen, Amazon RDS, Apache Kafka, Apache NiFi sowie einem on-premise Machine Learning Cluster eingesetzt. In diesem Zusammenhang sollen insbesondere die CI/CD Pipelines zum Zusammenspiel der Komponenten auf Basis von GitLab aufgebaut und erweitert werden.
Ihre Aufgaben:
• Weiterentwicklung bestehender CI/CD Pipelines zum Deployment und der Aktualisierung von Machine Learning Modellen
• Weiterentwicklung der bestehenden Machine Learning Infrastruktur bestehend aus Amazon EMR und einem Hadoop Cluster
• Beratung bei der Umsetzung einer cloudfähigen Architektur zur Verarbeitung von großen Datenmengen auf Basis von Data Mining Algorithmen in Apache Spark / EMR
• Beratung bei der Erstellung einer cloudfähigen und sicheren Architektur zur Verarbeitung von großen Datenmengen auf Basis von Data Mining Algorithmen in Apache Spark
• Weiterentwicklung des Monitorings der bestehenden Machine Learning Komponenten auf Basis von Grafana
• Dokumentation der Vorgänge und der umzusetzenden Architektur
Muss-Anforderungen:
• Mindestens 5 Jahre nachweisbare Erfahrung im Bereich Machine Learning
• Mindestens 2 Jahre nachweisbare Projekterfahrung im Bereich Erfahrung mit Apache Spark / EMR
• Mindestens 3 Jahre nachweisbare Erfahrung im Bereich GitLab und dem Aufbau von CI/CD Pipelines
• Mindestens 2 Jahre nachweisbare (Projekt-)Erfahrung im Bereich im Bereich Amazon AWS oder Microsoft Azure Cloud, insb. in den Gebieten Amazon EMR und Amazon ECS
• Mindestens 3 Jahre nachweisbare Erfahrung im Bereich Erfahrung in der Dokumentation und Beschreibung von Softwarearchitekturen bzw. Datenbankarchitekturen
Soll-Anforderungen:
• Erfahrung mit Apache NiFi
• Erfahrung mit Apache Kafka
• Erfahrung in agiler Softwareentwicklung
Projektlaufzeit: 02.08.2021 bis zunächst Dezember 2021, mit Option für gesamt 2022
Kontaktadresse:
Wenn wir damit Ihr Interesse geweckt haben und Sie sich bei uns melden - sei es per E-Mail oder in anderer Form -, erklären Sie zugleich Ihr EINVERSTÄNDNIS damit, dass wir Ihren vollständigen Namen, Ihre Adresse und Ihre Kontaktdaten sowie Ihre Angaben zur Qualifikation (z.B. Ausbildung, Tätigkeit, Profil, Referenzen) ausschließlich für unsere unternehmerischen Zwecke verarbeiten. Eine Weitergabe an Dritte erfolgt nicht (bzw. gegebenenfalls in einem späteren Stadium nur mit Ihrer gesonderten Einwilligung). Eine Löschung dieser Daten erfolgt, sobald feststeht, dass ein Vertrag in absehbarer Zeit nicht zu Stande kommt.
Wir weisen weiter darauf hin, dass Sie diese Einwilligung jederzeit mit sofortiger Wirkung widerrufen können, zweckmäßigerweise in Textform per E-Mail an
Wir verweisen im Übrigen auf die Datenschutzerklärung in unserem Impressum und weiter gehende Datenschutzregelungen beim Zustandekommen einer Vertragsbeziehung mit uns.