Your personal AI career agent
F1-Optimierer für KI-Systeme(m/w/x)
Optimierung von F1-Scores und LLM-Fehleranalyse für Dokument-Ranking und Embeddings bei einem Softwareanbieter. Praktische Erfahrung mit RAG-Architekturen oder Agenten-Frameworks erforderlich. Arbeit in einem spezialisierten KI-Team.
Requirements
- Abgeschlossenes Studium in Informatik, Data Science, Computational Linguistics oder vergleichbar
- Fundiertes Verständnis von Machine Learning, NLP und modernen LLMs
- Praktische Erfahrung mit Retrieval-, Search- und RAG-Architekturen
- Vertrautheit mit Agenten-Frameworks, Federated Learning, Fine-Tuning oder LoRA
- Routiniert im Umgang mit Evaluationsmethoden
- Fähigkeit, qualitative Ergebnisse in messbare Kriterien zu übersetzen
- Sicher im Umgang mit Python für Datenanalyse
- Praktische Erfahrung mit Prompt-Design und typischen LLM-Herausforderungen
- Hands-on, produktnah und iterativ
Tasks
- F1-Score kontinuierlich analysieren und optimieren
- Typische Fehler von LLMs erkennen
- Verlässliche und reproduzierbare Arbeitsweise der Systeme sicherstellen
- Precision und Recall der Systeme anpassen
- Qualität von Dokument-Ranking, Chunking-Strategien und Embeddings bewerten
- End-to-End-F1-Score unter Einbindung des RAGs verbessern
- Trade-off zwischen Vollständigkeit und Präzision steuern
- Evaluations-Frameworks entwickeln
- Prompts für LLMs testen und optimieren
- User-Fragen und Modellantworten analysieren
- Ursachen für unerwünschte LLM-Antworten identifizieren
- Zusammenhänge verständlich erklären
Education
- Bachelor's degree
Languages
- German – Business Fluent
Tools & Technologies
- Python
Benefits
Competitive Pay
- Attraktives Vergütungspaket
Family Support
- Work-Life-Balance
Purpose-Driven Work
- Gestaltungsspielraum
Learning & Development
- Zielgerichtete Weiterbildungsmöglichkeiten
- Strukturiertes Onboarding Programm
Diverse Work
- Abwechslungsreiche Tätigkeit
Informal Culture
- International geprägtes Arbeitsumfeld
- Wertschätzende Unternehmenskultur
Modern Office
- Modernes Büroumfeld
Like this job?
BetaYour Career Agent finds similar jobs for you every day.
Not a perfect match?
- Hengeler Mueller Partnerschaft von Rechtsanwälten mbBFull-timeOn-siteExperiencedFrankfurt am Main
- Hengeler Mueller Partnerschaft von Rechtsanwälten mbB
KI-Lösungsdesigner(m/w/x)
Full-timeOn-siteExperiencedFrankfurt am Main - Capco
AI Architect(m/w/x)
Full-timeOn-siteExperiencedBerlin, Frankfurt am Main - kobaltblau
AI Solution Engineer(m/w/x)
Full-timeOn-siteJuniorFrankfurt am Main, Berlin, Düsseldorf, Hamburg, München, Stuttgart - Institutional Investment Group
Senior AI-Native Software Engineer / .NET Architect(m/w/x)
Full-timeOn-siteCareer ChangerFrankfurt am Main
F1-Optimierer für KI-Systeme(m/w/x)
Optimierung von F1-Scores und LLM-Fehleranalyse für Dokument-Ranking und Embeddings bei einem Softwareanbieter. Praktische Erfahrung mit RAG-Architekturen oder Agenten-Frameworks erforderlich. Arbeit in einem spezialisierten KI-Team.
Requirements
- Abgeschlossenes Studium in Informatik, Data Science, Computational Linguistics oder vergleichbar
- Fundiertes Verständnis von Machine Learning, NLP und modernen LLMs
- Praktische Erfahrung mit Retrieval-, Search- und RAG-Architekturen
- Vertrautheit mit Agenten-Frameworks, Federated Learning, Fine-Tuning oder LoRA
- Routiniert im Umgang mit Evaluationsmethoden
- Fähigkeit, qualitative Ergebnisse in messbare Kriterien zu übersetzen
- Sicher im Umgang mit Python für Datenanalyse
- Praktische Erfahrung mit Prompt-Design und typischen LLM-Herausforderungen
- Hands-on, produktnah und iterativ
Tasks
- F1-Score kontinuierlich analysieren und optimieren
- Typische Fehler von LLMs erkennen
- Verlässliche und reproduzierbare Arbeitsweise der Systeme sicherstellen
- Precision und Recall der Systeme anpassen
- Qualität von Dokument-Ranking, Chunking-Strategien und Embeddings bewerten
- End-to-End-F1-Score unter Einbindung des RAGs verbessern
- Trade-off zwischen Vollständigkeit und Präzision steuern
- Evaluations-Frameworks entwickeln
- Prompts für LLMs testen und optimieren
- User-Fragen und Modellantworten analysieren
- Ursachen für unerwünschte LLM-Antworten identifizieren
- Zusammenhänge verständlich erklären
Education
- Bachelor's degree
Languages
- German – Business Fluent
Tools & Technologies
- Python
Benefits
Competitive Pay
- Attraktives Vergütungspaket
Family Support
- Work-Life-Balance
Purpose-Driven Work
- Gestaltungsspielraum
Learning & Development
- Zielgerichtete Weiterbildungsmöglichkeiten
- Strukturiertes Onboarding Programm
Diverse Work
- Abwechslungsreiche Tätigkeit
Informal Culture
- International geprägtes Arbeitsumfeld
- Wertschätzende Unternehmenskultur
Modern Office
- Modernes Büroumfeld
Like this job?
BetaYour Career Agent finds similar jobs for you every day.
About the Company
Hengeler Mueller Partnerschaft von Rechtsanwälten mbB
Industry
Legal
Description
Das Unternehmen fördert eine wertschätzende, kollegiale und familienfreundliche Unternehmenskultur.
Not a perfect match?
- Hengeler Mueller Partnerschaft von Rechtsanwälten mbB
Prompt Engineer(m/w/x)
Full-timeOn-siteExperiencedFrankfurt am Main - Hengeler Mueller Partnerschaft von Rechtsanwälten mbB
KI-Lösungsdesigner(m/w/x)
Full-timeOn-siteExperiencedFrankfurt am Main - Capco
AI Architect(m/w/x)
Full-timeOn-siteExperiencedBerlin, Frankfurt am Main - kobaltblau
AI Solution Engineer(m/w/x)
Full-timeOn-siteJuniorFrankfurt am Main, Berlin, Düsseldorf, Hamburg, München, Stuttgart - Institutional Investment Group
Senior AI-Native Software Engineer / .NET Architect(m/w/x)
Full-timeOn-siteCareer ChangerFrankfurt am Main