Beschreibung
Zur Verstärkung für das Team unseres Kunden suchen wir einen Java Developer (m/w/d).Hintergrundinformationen:
Durch höhere Transparenz soll eine schnellere Erkennung und schnellere Abstellung von Missständen bei der Leistungserbringung ermöglicht und neue Erkenntnisse zu Kundenbedürfnissen gewonnen werden.
Zur Verarbeitung und das Routing von Feedback soll eine hochautomatisierte Engine weiterentwickelt werden, mit der das Feedback analysiert, aufbereitet, mit betrieblichen Daten verschnitten und den Fachabteilungen zur Verfügung gestellt werden soll.
Im Rahmen des Projektes sollen bestehende Prozesse in eine "cloud-ready" Infrastruktur auf Basis von Apache Kafka, Apache Spark und Apache NiFi portiert werden. In diesem Zusammenhang sollen insbesondere Prozesse zur Datenaufbereitung und -verarbeitung in Java weiterentwickelt werden.
Die Leistungserbringung erfolgt überwiegend im Rahmen agiler Vorgehensmodelle (z.B. SCRUM). In diesem Fall sind die dort spezifischen Prozesse zu berücksichtigen und es ist ein regelmäßiger Austausch mit dem Team erforderlich.
Entsprechend dem im agilen Team gegebenen Vorgehen sind regelmäßige Abstimmungen notwendig, die Aufgaben-Verteilungsprozesse (z.B. Pull von Tasks gemäß Kompetenz und in Abstimmung mit dem Team) durchzuführen und die entsprechenden fachlichen Kommunikationsinstrumente (z.B. JIRA) zu bedienen.
Aufgaben:
Weiterentwicklung bestehender Prozesse auf Basis von Java / Spring Boot
- Weiterentwicklung bestehender ETL Workflows in Apache NiFi
- Umsetzung von CI/CD Pipelines für das Deployment von Containern in der AWS Cloud auf Basis von GitLab
- Unterstützung bei der Umsetzung einer cloudfähigen Architektur zur Verarbeitung von großen Datenmengen auf Basis von Data Mining
Algorithmen in Apache Spark
- Unterstützung bei der Portierung des bestehenden Hortonworks Hadoop Ökosystem in die Cloud, insb. nach Amazon AWS
Beratung bei der Erstellung einer cloudfähigen Architektur zur Verarbeitung von großen Datenmengen auf Basis von Data Mining
Algorithmen in Apache Spark
- Beratung bei der Portierung des bestehenden Hortonworks Hadoop Ökosystem in die Cloud, insb. nach Amazon AWS
- Dokumentation der Vorgänge und der umzusetzenden Architektur
Must Haves:
- Mindestens 5 Jahre nachweisbare Projekterfahrung in Bereich Softwareentwicklung mit Java und Spring Boot
- Mindestens 2 Jahre nachweisbare Projekterfahrung mit Apache NiFi
- Mindestens 2 Jahre nachweisbare Projekterfahrung mit Apache Kafka
- Mindestens 2 Jahre nachweisbare Projekterfahrung im Bereich Apache Spark insb. Entwicklung mit Java
- Mindestens 2 Jahre nachweisbare Projekterfahrung im Bereich GitLab und der Entwicklung von CI/CD Pipelines
- Mindestens 2 Jahre nachweisbare Projekterfahrung im Bereich Amazon AWS oder Microsoft Azure Cloud, insb. in den Gebieten Amazon
EMR und Amazon ECS
- Mindestens 2 Jahre nachweisbare Projekterfahrung im Bereich Erfahrung in der Dokumentation und Beschreibung von
Softwarearchitekturen bzw. Datenbankarchitekturen
Nice to Have:
- Erfahrung mit Microsoft SQL Server
- Erfahrung in agiler Softwareentwicklung