Aleph Alpha Research
Senior AI Software Engineer(m/w/x)
Vollzeit
mit Homeoffice
Senior
Keine Angabe
Heidelberg, Berlin
AL
Aleph Alpha Research2 Monate
AI Software Engineer - Model Evaluation(m/w/x)
Vollzeit
mit Homeoffice
Berufserfahren
AI/ML Job
Data Science
Keine Angabe
Heidelberg, Berlin
Nejo KI-Zusammenfassung
As an AI Software Engineer in Model Evaluation, you will design and implement tools to assess model performance while collaborating with researchers to create benchmarks and datasets. Your work will drive product decisions and contribute to the responsible deployment of AI models.
Lass KI die perfekten Jobs für dich finden!
Lade deinen CV hoch und die Nejo-KI findet passende Stellenangebote für dich.
Anforderungen
- •Bachelor’s degree in computer science, engineering, or related field
- •Willingness to work in Germany
- •Proficiency in programming
- •Curiosity to understand model capabilities
- •Desire to take ownership of problems
- •Motivation to learn AI-related topics
- •Strong communication skills
- •Master’s or PhD degree in computer science or related fields
- •Familiarity with evaluation and benchmarking frameworks for AI models
- •Experience with distributed systems for large-scale data processing
- •Experience in dataset creation, annotation, and curation
- •Familiarity with LLM architectures and popular NLP tools
- •Experience designing evaluations for safety and bias in AI systems
- •Strong skills in data visualization and reporting
- •Familiarity with cluster management systems and MLOps workflows
- •Eagerness to learn AI
- •Ability to translate evaluation insights into actionable improvements
Bachelor-Abschluss
ODER
Master-Abschluss
ODER
Doktor / Ph.D.
Berufserfahrung
ca. 1 – 4 Jahre
Deine Aufgaben
- •Design and develop scalable evaluation tools
- •Collaborate with researchers to create evaluation tasks and benchmarks
- •Analyze evaluation performance for efficient tool operation
- •Build pipelines for generating and maintaining high-quality evaluation datasets
- •Implement automated analysis systems to interpret results
- •Work with Product teams to align evaluations with real-world needs
- •Contribute to papers and reports on evaluation methodologies
- •Mentor engineers and researchers on evaluation best practices
- •Co-own efforts to make evaluation datasets and tools available to the research community
Tools & Technologien
PyTorchHF Transformers
Sprachen
Englisch – verhandlungssicher
Deine Vorteile
Flexibles Arbeiten
- •Flexible working hours
Mehr Urlaubstage
- •30 days of paid vacation
Gesundheits- & Fitnessangebote
- •Fitness & wellness offerings
Mentale Gesundheitsförderung
- •Mental health support
Betriebliche Altersvorsorge
- •Subsidized company pension plan
Öffi Tickets
- •Subsidized transportation ticket
Moderne Technikausstattung
- •Budget for technical equipment
Attraktive Vergütung
- •Virtual Stock Option Plan
Firmenfahrrad
- •Bike lease
Die Originalanzeige dieses Stellenangebotes in der aktuellsten Version findest du hier. Nejo hat diesen Job automatisch von der Website des Unternehmens Aleph Alpha Research erfasst und die Informationen auf Nejo mit Hilfe von KI für dich aufbereitet. Trotz sorgfältiger Analyse können einzelne Informationen unvollständig oder ungenau sein. Bitte prüfe immer alle Angaben in der Originalanzeige! Inhalte und Urheberrechte der Originalanzeige liegen beim ausschreibenden Unternehmen.
Ähnliche Jobs direkt in deine Inbox?
Noch nicht perfekt?