Beschreibung
Für unseren Kunden in Frankfurt/Main suchen wir aktuell einen Berater (m/w) Kafka Streaming Service
Aufgaben:
Konzeption und Umsetzung von einem zentralen Streaming Service
Aufbau von Daten-Pipelines für diverse Bereiche des Kunden
Integration von Echtzeit Daten in vorhandene Strukturen in Data Lakes
Zusammenführung von Daten aus unterschiedlichen Datenstrukturen und Herkunftssystemen
Beratung bei der Aufsetzung des Data Governance Prozesses für unterschiedliche Data Lake Instanzen
Performance-Tuning im Kafka
Erarbeitung und Operationalisierung eines Deploymentprozesses für Kafka Topics
Aufbereitung von Kafka für RealTime Analytics
Coaching und Beratung der Kunden
In der Zusammenarbeit auf Teamebene erfolgt die Umsetzung auf Basis von agilen Vorgehensweisen wie z.B. SCRUM, die Einhaltung der SCRUM Prozesse im SCRUM Team ist zu berücksichtigen und ein regelmäßiger Austausch mit dem SCRUM Master/ SCRUM Team ist erforderlich.
Die externe Fachkraft übernimmt im Rahmen ihrer Beauftragung Aufgaben im Team gemäß den agilen Methoden durch Pull von Tasks, die aus User Stories resultieren, gemäß ihrer Kompetenzen und in Abstimmung mit dem gesamten Umsetzungsteam
Die externe Fachkraft nimmt an allen fachbezogenen Arbeitssitzungen des Teams inkl. der fachlichen Retrospektiven teil
Muss-Anforderungen:
Agile Methoden SCRUM und Kanban, CI / CD: Als Methode zur Entwicklung der Services
Kafka as a Service: Erfahrung mit dem Aufbau eines Kafka Services
Kafka: Technische Entwicklung von Kafka
AWS: AWS zertifizierter Architekt ist zwingend notwendig
Datenbanken Oracle, DB2, HSQL, MongoDB, DynamoDB, Elasticsearch: Für die Bereitstellung von Daten als Stream
Docker/Microservices: Aufbau einer agilen und skalierbaren Architektur
Zertifizierung zu agilen Arbeitsmethoden (SCRUM)