Beschreibung
Für einen unserer Kunden suchen wir einen Professional oder Senior Data Engineer zur Projektunterstützung.Aufgaben:
• Zusammenführen und Bereitstellen von strukturierten und unstrukturierten Datenquellen für den Einsatz in datenzentrischen Vorhaben unter Berücksichtigung des Datenschutzes
• Erstellen von Daten-, Funktions- und/oder Objektmodellen; Entwickeln, Implementieren und Warten von Schnittstellen zu Datenbanken und anderen Applikationen
• Erheben und Definieren von Anforderungen an Datenanalysesysteme
• Konzipieren automatisierter Datenanalysen, Aufbauen und Integrieren in ICT-Prozesse (Monitoring, Alerting)
• Kontinuierliches Weiterentwickeln von ICT-Analyse-Infrastrukturen und -Tools; Identifizieren und Ableiten von Verbesserungen an Analysesystemen im Laufe ihres Lebenszyklus
• Interdisziplinäre Zusammenarbeit mit Machine-Learning Engineers, Data Scientists und Fachspezialisten
Erforderliche Qualifikationen:
• Breite Erfahrung mit skalierenden SQL- und NoSQL-Datenhaltungssystemen, insbesondere Hadoop
• Professionelle Erfahrungen in Python, Java und idealerweise Scala mit Fokus auf kontinuierliche Datenverarbeitung und -qualitätssicherung
• Solide Kenntnisse im Umgang mit Linux, Bash
• Pragmatische und zielgerichtete Verwendung von Daten-Verarbeitungs/Analyse-Tools wie z.B. Spark oder Flink
• Erfahrung mit Message-Broker und Streaming-Systemen, idealerweise Kafka
Zusätzlich gewünschte Qualifikationen:
• Erfahrung mit Job Scheduling wie z.B. Airflow, Luigi, Cron
• Erfahrung mit der Umsetzung von ML-Ansätzen auf Hadoop- und Spark-Umgebungen
• Erfahrungen mit Cloud-Technologien wie z.B. Kubernetes, Docker, OpenShift, AWS, etc.
Projektinformationen:
Arbeitsaufnahme: nach Vereinbarung
Dauer: 12 Monate mit Option
Pensum: 100% vor Ort
Ort: Bern
Interessiert?
Wir freuen uns darauf, von Ihnen zu hören!
bbv Software Services GmbH
Jägerstraße 67
DE-10117 Berlin