Westhouse ist eines der führenden internationalen Recruitment Unternehmen für die Vermittlung von hochqualifizierten Fachexperten in Bereichen wie IT Life Cycle, SAP, Engineering, Kaufmännischem und Fachberatung.
Für unseren Kunden suchen wir aktuell eine/n Data Engineer (m/w/d) - Remote/ Berlin.
Ihre Aufgaben
1. Technische Weiterentwicklung unserer Datenpipelines (Batch und Streaming) in der AWS Cloud im Python Code
2. Sicherstellung Datenqualität und Entwurf relationale und nicht-relationale Datenmodelle zur Erfüllung der Geschäftsanforderungen
3. Entwicklung und Betrieb von internen und externen Schnittstellen zur Bereitstellung von Datenprodukten
4. Weiterentwicklung unserer Datenstrategie
5. Beratung der Projektmitglieder zum Einsatz unterschiedlicher AWS Technologien und Datenqualitätssicherung
6. Entwicklung datengetriebener Softwarekomponenten zur Optimierung von Dispositionsentscheidungen und verantwortest ein möglichst reibungsloses, effizientes und fehlerfreies Bereitstellen der Datenquellen und deren Aggregationen
Interessiert?
Liliya Pylnova
Tel.:
Fax.:
Email:
Share posting
Ihre Qualifikationen
7. (Muss) Umfangreiche und aktuelle Kenntnisse mit dem Aufbau und der Restrukturierung von Datenarchitekturen insbesondere relationale und nicht relationale Datenbanken (Berufserfahrung in mindestens 3 Kundenprojekten)
8. (Muss) Praktische Erfahrungen mit Big Data Tools wie z.B. Redis, Flink, Hadoop (In mind. 3 Projekten)
9. (Muss) Praktische Erfahrung mit Frameworks zur Datenvalidierung wie z.B. Great Expectation, Pandera oder TFDV hinzufügen (Mind. 3 Jahres Berufserfahrung)
10. (Muss) Erfahrung in der Verwaltung von Kubernetes Clustern (In mind. 3 Projekten)
11. (Muss) Umfangreiche Erfahrung in der Python Programmierung (Mind. 10 Jahre Berufserfahrung)
12. Erfahrungen in anderen Großkonzernen (Projekte in mind. einem weiteren Konzern)
13. Erfahrung innerhalb des Sektors Transport und Logistik (Nachweisliche Erfahrung von mindestens einem Datenprojekt innerhalb des Sektors)
14. Fließend in Deutsch (C1)
15. Erfahrung mit Great Expectations
16. Erfahrung mit Lambda
17. Erfahrung mit CDK
18. Erfahrung mit Athena
19. Erfahrung mit Redis