Data Engineer (gn)
Hamburg, Remote
Vollzeit
Festanstellung
70.000 - 90.000 € per year
Einleitung
Für meinen Stammkunden suche ich einen Data Engineer (gn). Das international aufgestellte Hamburger Unternehmen beschäftigt insgesamt rund 2000 Mitarbeitende, davon ca. 60 innerhalb der IT.
Deine Aufgaben
- Aufbau und Wartung effizienter und skalierbarer Datenpipelines zur Erfassung, Verarbeitung und Speicherung von Daten aus verschiedenen Quellen.
- Sicherstellung der Datenqualität, -integrität und -verfügbarkeit.
- Gestaltung und Implementierung von Datenbankschemata und -strukturen, die eine optimale Speicherung, Abfrage und Verarbeitung der Daten ermöglichen.
- Entwicklung, Verwaltung und Optimierung von ETL-Prozessen, um Daten aus verschiedenen Quellen zu extrahieren, zu transformieren und in Zielsysteme zu laden.
- Sicherstellung einer zeitnahen und präzisen Datenbereitstellung.
- Nutzung von Snowflake und Azure Data Factory zur Verwaltung cloudbasierter Data-Warehouse- und Datenintegrationsprozesse.
- Sicherstellung einer effizienten Datenspeicherung und -zugänglichkeit.
- Integration von IoT-Daten mithilfe von Azure IoT Hub, um eine Echtzeit-Datenverarbeitung und -analyse zu ermöglichen.
- Implementierung und Verwaltung von Daten-Workflows mit Apache Airflow, um ETL-Prozesse und andere datenbezogene Aufgaben zu automatisieren und zu steuern.
Dein Profil
- Abgeschlossenes Bachelor-Studium in Informatik, Informationstechnologie, Ingenieurwesen oder einem verwandten Bereich.
- Mindestens 5 Jahre Erfahrung als Data Engineer oder in einer vergleichbaren Position.
- Fundierte Erfahrung mit Datenpipeline-Tools und -Techniken.
- Sehr gute Kenntnisse in Snowflake und Azure Data Factory.
- Erfahrung mit der Integration von IoT-Daten über Azure IoT Hub.
- Praktische Erfahrung mit Apache Airflow zur Workflow-Automatisierung.
- Expertenwissen in ETL-Prozessen und den dazugehörigen Tools.
- Starke SQL-Kenntnisse und Erfahrung mit relationalen Datenbanken.
- Vertraut mit Datenmodellierungsprinzipien und Best Practices.
- Erfahrung mit Datenvisualisierungstools, insbesondere Microsoft Power BI.
- Kenntnisse in Cloud-Computing-Konzepten, insbesondere Microsoft Azure.
- Erfahrung mit weiteren Cloud-Plattformen wie AWS oder Google Cloud.
- Vertraut mit Big-Data-Technologien wie Hadoop, Spark oder Kafka.
- Erfahrung mit Python oder anderen Skriptsprachen.
- Kenntnisse in Data Governance und Datenqualitäts-Frameworks.
- Sehr gute Deutsch- und Englischkenntnisse erforderlich.
Benefits
- Eine unbefristete Festanstellung in Vollzeit (37,5 Std./ Woche bei Vollzeit)
- Flexibles Arbeitszeitmodell
- Eine hybride Homeoffice-Lösung (2-4 Tage Homeoffice/ Woche möglich)
- 30+ Urlaubstage
- Interne & externe Weiterbildungsangebote
- Urlaubsgeld, Bonuszahlungen, BAV & VWL
- Fitnessstudio vor Ort, Kantine mit Essenszulagen, Fahrtkostenzuschuss, Jobrad, Mitarbeiter- & Teamevents