Westhouse ist eines der führenden internationalen Recruitment Unternehmen für die Vermittlung von hochqualifizierten Fachexperten in Bereichen wie IT Life Cycle, SAP, Engineering, Kaufmännischem und Fachberatung.
Für unseren Kunden suchen wir aktuell eine/n Data Architekt – BigData (m/w/d) - Remote.
Ihre Aufgaben
1. Erstellung von Big Data Prototypen für die Datenintegration, Datenhaltung, Daten-Aufbereitung Datenanalyse und Datennutzung im Projekt
2. Technische Data Lake / DWH Architektur mit dem Schwerpunkt: Analyse großerDatenmengen mit Hilfe von Spark
3. Erarbeitung der Mehrschicht-Architektur des Data Lakes (landing, structured, export, usecase-Zonen)
4. Entwicklung und Optimierung von ETL-Routinen im Amazon Redshift und Postsgres Umfeld. Entwicklung komplexer SQL-Statements.
5. Umgang mit AWS Services: S3, DynamoDB, Step Functions, EMR, AWS Glue, Athena, Lambda, RDS…
6. Softwareentwicklung mit Scala, Python
Interessiert?
Sven Schäfer
Tel.:
Fax.:
Email:
Share posting
Ihre Qualifikationen
7. (Muss) 6 Jahre Architekturverantwortung im Bereich Data-Lake
8. (Muss) 6 Jahre Erfahrung mit energiewirtschaftlichen Daten in Unternehmen der Energiewirtschaft
9. (Muss) 6 Jahre Erfahrung in der Umsetzung von Anforderungen in den Sprachen: Scala, Python, SQL, Java
10. (Muss) 3 Jahre Erfahrung mit AWS-Services rund um Datenhaltung und Datenmanagement (S3, DynamoDB, Step Functions, EMR, AWS Glue, Athena, Lambda, RDS)
11. (Muss) 6 Jahre Erfahrung in der Datenbankentwicklung mit großen Datenmengen (BigData)
12. (Soll) 3 Jahre Erfahrung in der Modellierung- und Entwicklung für ETL Strecken
13. (Soll) 3 Jahre Erfahrung im Aufbau von Data-Lake Architekturen
14. (Soll) 3 Jahre Erfahrung mit Problemlösungs-Know-How
15. (Soll) 3 Jahre Erfahrung in der Entwicklung von Infrastructure as Code: Terraform, AWS CDK, CloudFormation
16. (Soll) 3 Jahre Erfahrung in der Testautomation mit PyTest und ScalaTest