28.04.2025 aktualisiert

**** ******** ****
Premiumkunde
20 % teilweise verfügbar

Senior Data Engineer / Data Architekt

Karlsruhe, Deutschland
Deutschland +2
info: Deutschland, Österreich, Schweiz
M.Sc. Informatik
Karlsruhe, Deutschland
Deutschland +2
info: Deutschland, Österreich, Schweiz
M.Sc. Informatik

Profilanlagen

CV_Sebastian_Kress.pdf

Skills

JavaApache AirflowAmazon Web ServicesAmazon S3Microsoft AzureGoogle BigQueryETLData WarehousingApache HadoopApache HivePythonAnsibleSoftwareentwicklungSQLGoogle CloudApache SparkGitLabKotlinData LakeKubernetesApache KafkaApache NifiTerraformDockerDatabricks
Data Engineering
Ich entwerfe, entwickle und betreibe skalierbare und verteilte Batch, Event-Driven und Realtime Datenstrecken. Dabei setze ich auf modernste (open-source) Frameworks und Methoden des Software Engineerings.
Data Architektur
Ich helfe Ihnen bei der Auswahl geeigneter Daten Architekturen. Ich besitze mehrjährige Erfahrung mit Data Warehouses, Data Lakes, Data Lakehouses und Data Mesh.
Data Platforms
Ich unterstütze sie bei der Evaluierung, Planung, Umsetzung und Weiterentwicklung von Daten Plattformen, sowohl on-premise, hybrid als auch der Cloud.
Technologien
  • Apache Spark, Databricks
  • Apache Kafka, Kafka Streams, Kafka Connect
  • Apache Airflow
  • Apache Hadoop
    • HDFS, Hive, NiFi, Impala
  • Google Cloud Platform (GCP)
    • BigQuery, GCS, DataProc, Cloud Composer
  • Microsoft Azure
    • ADLSv2, Azure Databricks, Azure Functions
  • AWS
    • S3, Glue, Athena, Redshift, RDS Aurora, Kinesis
  • Infastructure, CI/CD
    • GitLab, Azure DevOps
    • Docker, Kubernetes
    • Terraform, Ansible
  • Programmiersprachen
    • Python, SQL, Kotlin, Java

Erfahrung

Berufserfahrung5 - 10 Jahre
Freelancer seit2024

Sprachen

DeutschMutterspracheEnglischverhandlungssicher

Projekthistorie

Data Engineer / Data Architect

Medienunternehmen

Medien und Verlage

5000-10.000 Mitarbeiter

Customer Retention – Streaming Architektur
Konzeption, Entwicklung und Betrieb einer nachhaltigen, echtzeitfähigen Dateninfrastruktur zur Verarbeitung von Events einer Video- und Musikstreaming Plattform. Weiterentwicklung und Optimierung von Spark Streaming Anwendungen.

Technologien: Kubernetes, Apache Kafka, Kinesis, Apache Spark, Kafka Streams, Apache Airflow, Terraform, AWS, Python, Kotlin

Data Platform Architect

Drogeriekonzern

Konsumgüter und Handel

>10.000 Mitarbeiter

Data Driven Retailer
Konzeption und Proof of Concept Entwicklung einer konzernweiten Daten- Plattform, unter Berücksichtigung der Unternehmensziele: Data-Driven Company, Cloud-First und Data Mesh.

Technologien: Data Mesh, Google Cloud, DataProc, BigQuery, Databricks, Terraform

Data Architect

Versicherungskonzern

Versicherungen

1000-5000 Mitarbeiter

Architektur Review Analytics Platform
Planung und Moderation eines Architektur Review Workshops zur Evaluierung einer geplanten Datenplattform Architektur. Technisches Sparring mit Fachabteilung.

Technologien: Azure, Databricks

Data Engineer / Solution Architect

Werkzeugmaschinen, Lasertechnik

Industrie und Maschinenbau

>10.000 Mitarbeiter

Data Integration Platform
Aufbau und Weiterentwicklung einer hybriden Daten-Plattform zur skalierbaren Analyse und Aufbereitung von Maschinen-, IoT-, und Stammdaten. Konzeption der Datenstrecken, Implementierung der Datenprozesse mit Azure Functions, Apache Spark und Apache NiFi. Performance- und Qualitätsoptimierung der Aufbereitungsprozesse.

Technologien: Azure, Databricks, Apache Spark, Cloudera CDH, Apache NiFi, Docker, Python, Terraform, Ansible

Data Engineer

Drogeriekonzern

Konsumgüter und Handel

>10.000 Mitarbeiter

Customer Experience Analytics
Aufbau und die Weiterentwicklung und Betrieb einer Daten-Plattform zur skalierbaren DSGVO-konformen Analyse und Aufbereitung von Kundendaten. Performance- und Qualitäts-Optimierung der Aufbereitungsprozesse; Architektur und Implementierung DSGVO-Prozesse.

Technologien: Apache Spark, Apache Airflow, Apache NiFi, Apache Zeppelin, Python, SAS Visual Analytics, SQL

Data Engineer / BI Engineer

B2B-Handelsplattform

Konsumgüter und Handel

500-1000 Mitarbeiter

Data Analytics und Business Intelligence
Modellierung und Implementierung von ETL-Strecken, Reports, Cubes und Dashboards. Weiterentwicklung eines Recommender-Systems sowie dessen Bereitstellung als hochverfügbaren Microservice. Konzeption und Umsetzung von Maßnahmen zur Qualitätssicherung.

Technologien: Pentaho BI Stack, Apache Spark, Python, Java, SQL, AWS

Data Engineer

Medienunternehmen

Medien und Verlage

5000-10.000 Mitarbeiter

Media Analytics Platform
Entwicklung von ETL-Strecken, Datenanalyse und -verarbeitung, Anbindung und Integration neuer Datenquellen in das bestehende System.

Technologien: Apache Hive, Apache Spark, Pentaho Data Integration, Java, Scala

Zertifikate

Azure Databricks Platform Architect

Databricks

2024

Certified Developer for Apache Kafka

Confluent

2020

Developer Certification for Apache Spark

Databricks

2017

Certified Professional for Software Architecture FL

iSAQB ®

2015


Kontaktanfrage

Einloggen & anfragen.

Das Kontaktformular ist nur für eingeloggte Nutzer verfügbar.

RegistrierenAnmelden