Data Engineer (m/w/d)
Freiberuflich für ein Projekt Oberbayern Startdatum: sofort Referenznummer: 869330/1
Diesen Job teilen oder drucken
Aufgaben
1. Implementierung und Weiterentwicklung von Datenplattform-Komponenten auf Basis der Google Cloud Platform
2. Aufbau und Betrieb von Batch- und Streaming-Pipelines
3. Umsetzung von ETL- / ELT-Prozessen, inklusive CDC und SCD Type 1 & 2
4. Datenmodellierung, insbesondere Schema-Modellierung und Dimension Tables
5. Vorbereitung von Analysedaten sowie Freigabe- und Konsumschichten
6. Arbeiten mit Streaming- und Realtime-Technologien
7. Infrastrukturdefinition und -anpassung mittels Terraform -Infrastructure as Code
8. Entwicklung datenverarbeitender Komponenten mit Python
9. Mitarbeit an service-nahen Komponenten unter Einsatz von Java
Profil
10. Fundierte Erfahrung im Cloud-Umfeld, insbesondere mit Google Cloud Platform -GCP
11. Sehr gute Kenntnisse in Python -Muss-Kriterium
12. Erfahrung mit BigQuery, insbesondere im Kontext von Analyticsdatenbanken und Kostenoptimierung
13. Praxiserfahrung mit Batch- und Streaming-Datenverarbeitung
14. Kenntnisse in Pub/Sub sowie Dataflow / Apache Beam
15. Erfahrung mit ETL / ELT, inkl. CDC und Slowly Changing Dimensions -Typ 1 & 2-
16. Sicher in Datenmodellierung -Schema-Design, Dimensionstabellen
17. Erfahrung mit Terraform und Infrastructure-as-Code-Ansätzen
18. Java-Kenntnisse für servicebasierte Komponenten
Benefits
19. Durch Ihre Kandidatur über Hays sind Sie Teil einer kleinen, passgenauen Auswahl, die dem Kunden für diese Position präsentiert wird
20. Erhöhen Sie Ihre Chancen zu einem Vorstellungsgespräch eingeladen zu werden
21. Hays legt großen Wert auf die Kandidatenqualität und Passgenauigkeit der Profile
22. Bevor wir Ihren Lebenslauf bei unserem Kunden vorstellen, prüfen wir mit Ihnen, ob die Vakanz zu Ihnen passt