Skip to content
Neuer Job?Nejo!

Dein persönlicher KI-Karriere-Agent

ALAllianz Global Investors

AI Quality Assurance Engineer(m/w/x)

Frankfurt am Main, München
Vollzeitmit HomeofficeBerufserfahren

Validating AI Hub capabilities and supporting decentralized AI use cases. Understanding of prompt engineering and agentic AI testing required. Flexible hybrid work, relocation support.

Anforderungen

  • Understanding of prompt/context/harness engineering, intent-based testing, spec-driven development, BDD, codified acceptance criteria, feature flagging, A/B testing
  • Min. 3 years experience as engineer, strong advocacy/knowledge of SQA, System Testing in Agentic AI
  • Min. 2 years experience, familiarity with evaluation frameworks, behavioural/performance testing, observability platforms (e.g., LangSmith, DeepEval, Ragas, Langfuse, Braintrust, Datadog)
  • Experience defining test strategies, test plans, acceptance criteria, validation approaches
  • Deep understanding of Generative AI systems (e.g. LLM based applications), agentic AI workflows
  • Familiarity with evaluation of GenAI outputs (e.g. hallucination risk, consistency, explainability, robustness)
  • Understanding of prompt-based system behaviour, orchestration patterns, AI agents
  • Familiarity with data pipelines, APIs, system integration patterns
  • Ability to translate functional AI requirements to technically testable specifications
  • Experience in Agile delivery environments, cross-functional teams
  • Strong analytical and problem-solving skills
  • Experience in regulated financial services environments is beneficial

Aufgaben

  • Evaluate and validate AI Hub capabilities
  • Support decentralized AI use cases
  • Define evaluation approaches for AI systems
  • Translate AI requirements into testable criteria
  • Derive reusable validation methods and best practices
  • Promote AI quality assurance methods
  • Ensure scalable and compliant AI deployment
  • Assess AI system reliability, performance, explainability, robustness
  • Implement CI/CD regression gates
  • Maintain a golden eval set
  • Run evals in CI
  • Block rollout on regressions
  • Apply best practices in prompt, context, and harness engineering
  • Mitigate risks like context rot
  • Use spec-driven development frameworks
  • Codify clear quality instructions
  • Apply feature flagging and A/B testing
  • Support continuous improvement of AI solutions

Berufserfahrung

  • 3 Jahre

Ausbildung

  • Abgeschlossene BerufsausbildungODER
  • Bachelor-AbschlussODER
  • Master-Abschluss

Sprachen

  • Englischverhandlungssicher

Tools & Technologien

  • LangSmith
  • DeepEval
  • Ragas
  • Langfuse
  • Braintrust
  • Datadog
  • APIs

Benefits

Flexibles Arbeiten

  • Flexible work arrangements
  • Hybrid model
  • Flexible working hours

Betriebliche Altersvorsorge

  • Company pension/savings plans

Sonstige Vorteile

  • Relocation support

Kinderbetreuung

  • Childcare facilities

Attraktive Vergütung

  • Company share purchasing plan

Mentale Gesundheitsförderung

  • Mental health and wellbeing programs

Firmenfahrrad

  • Jobrad bike leasing

Öffi Tickets

  • Subvention Jobticket

Karriere- und Weiterentwicklung

  • Career opportunities within Allianz Group

Weiterbildungsangebote

  • Self-guided learning & development

Gemeinnützige Ausrichtung

  • Volunteering time
Die Originalanzeige dieses Stellenangebotes in der aktuellsten Version findest du hier. Nejo hat diesen Job automatisch von der Website des Unternehmens Allianz Global Investors erfasst und die Informationen auf Nejo mit Hilfe von KI für dich aufbereitet. Trotz sorgfältiger Analyse können einzelne Informationen unvollständig oder ungenau sein. Bitte prüfe immer alle Angaben in der Originalanzeige! Inhalte und Urheberrechte der Originalanzeige liegen beim ausschreibenden Unternehmen.

Gefällt dir diese Stelle?

Beta

Dein Career Agent findet täglich ähnliche Jobs für dich.


  • Allianz Global Investors

    DevSecOps AI Engineer(m/w/x)

    Vollzeitmit HomeofficeBerufserfahren
    Frankfurt am Main
  • Allianz Global Investors

    Data Engineer(m/w/x)

    Vollzeitmit HomeofficeBerufserfahren
    Frankfurt am Main, München
  • paiqo GmbH

    AI Engineer II - Agentic AI Platform(m/w/x)

    Vollzeitmit HomeofficeBerufserfahren
    Paderborn, Frankfurt am Main
  • paiqo GmbH

    Lead AI Engineer - Agentic AI Platform(m/w/x)

    Vollzeitmit HomeofficeSenior
    Paderborn, Frankfurt am Main
  • Deloitte GmbH Wirtschaftsprüfungsgesellschaft

    Senior Quality Engineer(m/w/x)

    Vollzeitmit HomeofficeSenior
    Berlin, Düsseldorf, Frankfurt am Main, Hamburg, Hannover, Köln, München, Nürnberg, Stuttgart
Alle 100+ ähnlichen Jobs ansehen

Nejo ist eine KI – Ergebnisse können unvollständig sein oder Fehler enthalten

Diese Jobs könnten dich auch interessieren