Technical Expert Databricks (m/w/d)
Land: Deutschland (DE)
Funktionsbereich: IT Services
Organisationseinheit: Data & Analytics Services
Vollzeit / Teilzeit: 100
Deine Perspektiven und Möglichkeiten in der LBBW-IT sind vielfältig und umfassen alle Bereiche einer modern aufgestellten IT. In der Gruppe Data & Analytics Services verantworten wir die Entwicklung und den Betrieb unserer Plattformen und Services rund um die Themen Data, Data Management, Analytics/KI und Generative KI. Unsere Mission ist es den wertschöpfenden Einsatz von Daten in der LBBW zu ermöglichen. Hierfür bauen wir die Plattformen und Services der Zukunft.
Aufgaben:
1. Als Technical Expert Databricks verantwortest Du als Teil des Teams die technische Konzeption, Bereitstellung und Weiterentwicklung unserer Data Management & Analytics Plattform auf Basis Azure Databricks
2. Du automatisierst und verwaltest Azure Databricks-Infastrukturen unter Einsatz von Terraform und verantwortest die technische Bereitstellung der Azure Databricks Plattform mit Fokus auf Skalierbarkeit, Sicherheit, Stabilität und Wartbarkeit
3. Du verantwortest den Aufbau und die Wartung der benötigten Netzwerke um eine stabile und sichere Kommunikation zischen Cloud-Ressourcen aber auch zwischen Cloud und OnPrem sicherzustellen
4. Du kümmerst Dich um die Umsetzung von Best Practices für CI/CD Pipelines in MS DevOps
5. Du erstellst Konzepte zur Erweiterung der Data Management & Analytics Plattform um Schnittstellen, technische Komponente und Features (z.B. Anbindung 3rd Party Analytics Werkzeuge (u.a. PowerBI)) und setzt diese gemeinsam im Team um
Persönlichkeit:
6. Du hast ein abgeschlossenes Studium der Informatik, (Wirtschafts-)Informatik / Medieninformatik oder einer verwandten Fachrichtung
7. Du bist Experte auf Deinem Gebiet, hast mehrjährige praktische Erfahrung in Azure Databricks und verfügst über ein umfangreiches technisches und fachliches Wissen
8. Du hast sehr gute konzeptionelle und architektonische Fähigkeiten und Erfahrung in der Implementierung von Data Lakehouse- und Medallion-Architekturen sowie Delta Lake
9. Du verfügst über mehrjährige Erfahrung in der Terraform Entwicklung und in der Arbeit mit Azure DevOps
10. Du kennst Dich aus im Umgang mit Unity Catalog sowie dem Berechtigungsmanagement via Microsoft Entra ID
11. Du programmierst mit Python, Spark/PySpark sowie SQL und verfügst über Expertise im verteilten Rechnen mit Databricks
12. Du verfügst idealerweise über erste Erfahrungen in der technischen Anbindung von 3rd Party Analytics Werkzeugen an Azure Databricks (z.B. PowerBI)
13. Du verfügst über mindestens 5 Jahre IT-Projekterfahrung und über eine hohe Umsetzungskompetenz
14. Du behältst bei sehr hohem Arbeitsaufkommen den Überblick, gehst strukturiert vor und hältst Termine verbindlich ein
15. Du verfügst über hervorragende analytische und konzeptionelle Fähigkeiten
16. Du arbeitest vollkommen eigenverantwortlich, lösungs- und zielorientiert
17. Du bist kommunikationsstark, belastbar und verfügst über ein hohes Maß an Durchsetzungsvermögen
18. Du bist ein Teamplayer, magst es, gemeinsam Dinge zu bewegen und hast „a good sense of humor“