27.07.2026 aktualisiert
GG
nicht verfügbar
info: nicht verfügbar bis 31.12.2026
Data Engineer (Certified: Databricks, MS Fabric, AWS) | DWH Entwickler (3NF, Data Vault)
Gilching, Deutschland
Weltweit
Dipl.-Ing. für NachrichtentechnikSkills
Third Normal FormApache AirflowAmazon Web ServicesAmazon S3Bash ShellContinuous DeliveryContinuous IntegrationData VaultDimensionale ModellierungMapReduceMongoDBMicrosoft Power BIAnsibleAzure Data LakeTransact-Sql
Zertifikat:
- Databricks Certified Data Engineer Associate (Databricks zertifiziert)
- Microsoft: Fabric Analytics Engineer Associate (Microsoft zertifiziert)
- AWS Certified Big Data - Speciality (AWS zertifiziert)
- AWS Certified Solutions Architect - Associate (AWS zertifiziert)
Cloud Plattformen:
- Amazon Web Services, Microsoft Azure
Data Processing:
- Spark (PySpark/Scala), AWS Glue, Hive/Tez, Pig, MapReduce, SQL, T-SQL, Python (pandas)
Data Stream Processing:
- Kafka Streams, Spark Streaming, Akka Streams
Container Plattformen:
- AWS ECS, Kubernetes, Docker
Data Ingestion/Transport Layer:
- Kafka, Flume, AWS S3DistCp, Sqoop, NiFi
Job Scheduling und Orchestration:
- Airflow, Luigi, AWS Step Functions, AWS Lambda, Schedulix
Hadoop Plattformen:
- Amazon EMR, Cloudera CDH, HortonWorks HDP
Datenschicht-Konzepte:
- Data Warehouse (3NF, Data Vault, Dimensional Modeling, Star Schema), Data Lake, Databricks Delta Lake (Lakehouse)
Enterprise-Grade Security und Federated Identity Management:
- AWS IAM, Azure AD, Kerberos, Apache Sentry, LDAP/AD, TLS, at-Rest, SAML, AWS Cognito
Search Engines:
- Solr, ElasticSearch (ELK Stack), AWS OpenSearch
ETL Tools, Libraries und Engines:
- Spark, dbt, Cloudera Kite SDK (Morphlines), Oracle Streams/GoldenGate, Pentaho Data Integration Suite
Metadata Management:
- Hive Metadata Catalog, AWS Glue Catalog, Cloudera Navigator
Machine Learning und MLOps:
- AWS Sagemaker, MLFlow, Kubeflow, Weka, Python (tensorflow, pytorch, scikit-learn), R
Data Presentation/Visualization Layer:
- AWS QuickSight, Power BI, Kibana, Grafana, ggplot2 (R, Python), matplotlib, plotly
Datenbanken (NoSQL und RDBMS bzw. SQL-Engines):
- AWS Athena, Hive, Presto/Trino, Amazon Redshift, Snowflake, Oracle, Postgres, Aurora / PostgreSQL / MySQL, Azure Citus, DynamoDB, MongoDB/AWS DocumentDB/Azure CosmosDB, HBase
Datenformate:
- Parquet, Databricks Delta, Apache Iceberg, ORC
Programmiersprachen bzw. Skriptsprachen und Tools:
- Scala, Python, Java, SQL, T-SQL, PL/SQL, PL/pgSQL, Perl, groovy, bash, awk, sed, C, R.
Software Entwicklung, Build und Deployment Tools:
- JetBrains IDE (IntelliJ, PyCharm), VSC, JupyterLab, Zeppelin, Git-kompatible Repos, CI/CD (Jenkins, Gitlab, Bamboo, AWS CodeBuild/CodePipeline), Maven, sbt, Gradle
Modellierung, Provisionierung, Deployment und Automation Tools (Infrastructure-as-a-Code, DevOps):
- AWS CDK, AWS CloudFormation, Terraform, HashiCorp Packer, Ansible, Puppet, Docker
Data Serialization Format und Markup Sprachen:
- AVRO, Thrift, Protocol Buffers, YAML, JSON (jackson lib), XML
Erfahrung
Berufserfahrungmehr als 10 Jahre
Freelancer seit2023
Sprachen
DeutschverhandlungssicherEnglischverhandlungssicher