Data Engineer (m/w/d)
SOMI Experts GmbH
Ansprechpartner: SOMI Experts
Berlin, Deutschland
Verkehr und LogistikData AnalysisMicrosoft AzureBusiness IntelligenceBusiness Intelligence DevelopmentBig DataData ArchitectureData ControlDatenfusionDateninfrastrukturData IntegrationDatenmanagementData Manipulation LanguageData TransformationData MigrationDatenverarbeitungssystemeDatenbeschaffungDatensystemeDatenendeinrichtungData Transformation ServicesDaten-VirtualisierungData WarehousingDatenbankentwicklungInfosphere DatastageDatenflussanalyseData IntelligenceMicrosoft Data Access ComponentsMicrosoft SQL Server Data Engine (MSDE)Microsoft Sql-ServerAzure SQLMicrosoft Business IntelligenceSQL Server Management StudioOracle Business Intelligence Enterprise EditionOracle Data Service IntegratorSAP PowerDesignerSmart DataDataOpsAzure Data LakeSQLDatenbank-EnginesIntegration (Software)Daten- / DatensatzprotokollierungDatenimportDatenverarbeitungBusiness Intelligence Development StudioData Server InterfaceAzure Data FactoryApache SparkData AssimilationSQL Server Business IntelligenceDatenstrategieDatenbank-MigrationMicrosoft Fabric (Analytics-Plattform)PySparkDatenmanagementsystemeDatenprogrammierungAWS Data AnalyticsSSMSAzure Data AnalyticsDaten-PipelineSql Server Data ToolsData Generation
Beschreibung
Deine Tätigkeiten:
- Entwicklung und Umsetzung von Datenlösungen im Microsoft-Azure- und Fabric-Umfeld
- Mitarbeit bei der Modernisierung und Weiterentwicklung bestehender Datenplattformen und Data-Warehouse-Lösungen
- Planung und Durchführung von Datenmigrationen innerhalb von Azure- bzw. Data-Management-Umgebungen
- Entwicklung und Optimierung von Datenverarbeitungsprozessen mit Python, PySpark und Apache Spark
- Aufbau, Konfiguration und Administration von Microsoft SQL Server-Umgebungen
- Arbeit mit SQL Server Management Studio (SSMS) zur Entwicklung, Verwaltung und Analyse von Datenbanken
- Entwicklung und Anpassung technischer Komponenten auf Basis von Microsoft Fabric
- Integration verschiedener Systeme und Datenquellen sowie Umsetzung entsprechender Schnittstellen
- Fehleranalyse und Behebung von technischen Problemen aus Test- und Entwicklungsphasen
- Erstellung und Pflege technischer Dokumentationen und Systembeschreibungen
- Zusammenarbeit in einem agilen Projektumfeld bei der Weiterentwicklung einer modernen Analytics- und Datenplattform
Das gesuchte Profil:
Muss-Anforderungen
- Mehrjährige praktische Erfahrung in Datenmigrationen, insbesondere im Umfeld von Microsoft Azure oder Data Management
- Fundierte Erfahrung im Aufbau, Betrieb und Management von Microsoft SQL Servern
- Sicherer Umgang mit Microsoft SQL Server Management Studio (SSMS)
- Mehr als 3 Jahre praktische Erfahrung mit Apache Spark, insbesondere in Verbindung mit Python und PySpark
- Nachweisbare Projekterfahrung mit Microsoft Fabric
- Für die genannten Kernbereiche sollten jeweils mindestens drei relevante Projektreferenzen vorliegen
Zusätzliche Kenntnisse
- Erfahrung mit Microsoft Power BI, idealerweise durch mehrere erfolgreich umgesetzte Projekte nachweisbar
- Eine Zertifizierung als Microsoft Fabric Analytics Engineer Associate ist von Vorteil
- Eine Zertifizierung als Microsoft Power BI Data Analyst Associate ist ebenfalls wünschenswert
- Erfahrung mit modernen Data-Warehouse-, Analytics- und Transformationsprojekten im Microsoft-Ökosystem ist hilfreich