Im Auftrag unseres Mandanten suchen wir einen F1-Optimierer für KI-Systeme (m/w/d). Hier tragen Sie maßgeblich dazu bei, die Qualität und Zuverlässigkeit moderner KI-Anwendungen kontinuierlich zu verbessern. In dieser Rolle sind Sie verantwortlich für die Messung, Analyse und Optimierung zentraler Qualitätsmetriken von KI-Systemen – insbesondere des F1-Scores, der die Balance zwischen Precision und Recall bewertet – um sicherzustellen, dass die Systeme robust, präzise und wirklich einsatzfähig sind.
Persönliche IT-Job-Perspektiven
• Direkter Einfluss: Sie leisten einen sichtbaren Beitrag zur Qualitätsentwicklung und fachlichen Weiterentwicklung von KI-Anwendungen.
• Hybrid- und Weiterentwicklungsoptionen: Flexible Arbeitsmodelle und gezielte Weiterbildungs- sowie Entwicklungsangebote.
• Moderne IT-Umgebung: Zugang zu zeitgemäßen Entwicklungs- und Evaluationswerkzeugen sowie interdisziplinären Teams.
• Attraktive Rahmenbedingungen: Ein wettbewerbsfähiges Vergütungspaket und weitere Benefits zur Förderung von Work-Life-Balance und beruflicher Weiterentwicklung.
Die Herausforderungen dieses IT-Jobs
• Kontinuierliche Analyse und Optimierung: Sie analysieren systematisch Leistungsmetriken wie F1-Score, Precision und Recall, identifizieren Fehlerquellen bei KI-Systemen und verbessern diese zielgerichtet.
• Qualitätssicherung von Komponenten: Sie bewerten und optimieren Komponenten wie Dokument-Ranking, Chunking-Strategien und Embeddings, um die Gesamtleistung von KI-Anwendungen messbar zu steigern.
• Evaluations-Frameworks: Aufbau und Weiterentwicklung von methodischen Evaluations- und Testframeworks zur objektiven Messung von Systemqualität und zur Steuerung von Optimierungsprozessen.
• Fehlerdiagnose und Ursachenanalyse: Sie identifizieren typische Modelleigenschaften wie Halluzinationen oder unpräzise Antworten und lokalisieren Ursachen in Prompt-Design, Retrieval-Komponenten oder Modellverhalten.
• Interdisziplinäre Zusammenarbeit: Enge Zusammenarbeit mit Data Scientists, ML-Ingenieuren und Fachbereichen, um technische Erkenntnisse verständlich zu kommunizieren und praxisnahe Verbesserungen umzusetzen.
Deine Qualifikation für diesen IT-Job
• Akademische Qualifikation: Abgeschlossenes Studium in Informatik, Data Science, Computational Linguistics, Mathematik oder einem vergleichbaren Studiengang.
• Fachliches Know-how: Tiefes Verständnis moderner KI-Technologien, insbesondere Large Language Models (LLMs), Natural Language Processing (NLP) und Retrieval-Architekturen.
• Quantitative Analyse: Erfahrung in der Anwendung und Interpretation von Leistungsmetriken (z. B. Precision, Recall, F1-Score) zur Bewertung und Optimierung von KI-Systemen.
• Technische Methoden: Kenntnisse in Prompt-Engineering, Embeddings, Evaluationsstrategien und modernen KI-Bibliotheken oder -Toolchains sind von Vorteil.
• Analytische Stärke: Strukturierte, ergebnisorientierte Arbeitsweise mit der Fähigkeit, komplexe technische Zusammenhänge klar zu kommunizieren.
Job ID: null null null null null null null null null null
Angebot von Jobseeker (eventuell ist eine Anmeldung erforderlich). Auf Jobseeker hast du die Möglichkeit, einen personalisierten Lebenslauf zu erstellen und so deine Bewerbung zu beschleunigen.