Datamesh GmbH, ein innovatives Unternehmen im Bereich der Softwareentwicklung, sucht einen engagierten Data Engineer zur Verstärkung unseres dynamischen Teams. Mit Sitz in Deutschland und einem kleinen, aber hoch spezialisierten Team von 1-10 Mitarbeitern, bietet Datamesh GmbH die Möglichkeit, in einem agilen und kreativen Umfeld zu arbeiten. Unsere Leidenschaft für Technologie und Entwicklung neuer Softwarelösungen treibt uns an, die Grenzen des Möglichen zu erweitern. Als Data Engineer werden Sie eine zentrale Rolle spielen, indem Sie komplexe Datenarchitekturen entwickeln und implementieren, die unsere Softwarelösungen unterstützen.
Aufgaben
* Entwicklung von Daten pipelines auf basis von Databricks auf Azure
* Entwicklung von Prefect / Dagster / Airflow pipelines
* Entwicklung von Java Backends
* Entwicklung von Big Data Pipelines basierend auf Apache Spark
* Entwicklung von Real Time Applikationen basierend auf Apache Kafka
* Aufbau von Datalake inklusive Data processing auf basis von dbt tools
* Unterstützung im Konzeptions- und Design Prozessen
* Unterstützung bei der Bearbeitung von Kunden- und Supportanfragen
* Automatisierung von Infrastructure via Terraform (mit python)
* Support für die Senior Entwickler
Qualifikation
* Du hast ein abgeschlossenes Studium der Informatik oder vergleichbaren Studiengang
* Du besitzt gute EDV-Kenntnisse mit Git, Outlook
* Linux / UNIX
* Gute Kenntnisse der englischen und deutschen Sprache in Wort und Schrift.
* Du hast eine selbstständige Arbeitsweise, bist zuverlässig und kommunikativ.
* Mindestens 1 Jahr Databricks Erfahrung
* Mindestens 1 Jahr Azure Erfahrung
* Mindestens 1 Jahr Ci CD Erfahrung
* Mindestens 1 Jahr Data Engineering Erfahrung
* Du hast Fachwissen in einer der verschiedenen Programmiersprachen / Frameworks:
1. Java / Scala
2. Python
3. Spring Boot / Apache Spark / Apache Airflow
4. Bash / Ansible / ssh / RSA Keys / Networking
5. Azure Cloud
6. DBT / Databricks
Benefits
2 Tage die Woche Home Office, E-Scooter und Büro Snacks.
Zuletzt solltest du Spaß am Arbeiten mit Technik und dem Lösen von Problemen haben.
Join Datamesh GmbH as a Data Expert and dive into cutting-edge technology to shape the future of data processing. Apply now!