Skip to content
Neuer Job?Nejo!

Dein persönlicher KI-Karriere-Agent

G2G2i

Senior Software Engineer - AI Interaction Evaluator(m/w/x)

Wien
ab USD 50 - 200 / Stunde
TeilzeitFreelanceRemoteSenior
AI/ML

Evaluating AI coding agents for real-world scenarios and assessing response logic. Highly experienced software engineer with strong TypeScript/JavaScript or Python background required. Work from home, 4-day work week.

Anforderungen

  • Highly experienced software engineer (SR+)
  • Comfortable making subjective but rigorous judgments
  • Staff / Principal-level engineer or equivalent experience
  • Strong background in TypeScript/JavaScript or Python
  • TypeScript / JavaScript
  • Python
  • Hands-on experience using OpenAI Codex, Claude Code, or Cursor
  • OpenAI Codex
  • Claude Code
  • Cursor
  • Deep familiarity with modern AI-assisted dev workflows
  • Able to evaluate code without full execution
  • Comfortable giving direct, opinionated feedback
  • High bar for good engineering
  • Experience with AI-first IDEs like Cursor
  • Prior exposure to prompt design or evaluation workflows
  • Experience mentoring senior engineers or defining standards

Aufgaben

  • Evaluate AI coding agents in real-world scenarios
  • Assess whether AI responses make sense
  • Judge the usefulness of AI preambles and reasoning
  • Determine if AI output reflects strong engineering judgment
  • Evaluate if AI interactions feel right to an experienced developer
  • Assess the quality of AI explanations and reasoning
  • Distinguish between different levels of response quality
  • Provide clear, opinionated feedback on what worked and what didn’t
  • Identify what felt off or misleading in AI interactions
  • Help define what great interactions look like with tools like Cursor
  • Answer whether AI responses feel like a strong engineer’s
  • Determine if explanations are helpful, not just technically correct
  • Assess if the AI is guiding users well or just dumping output
  • Evaluate if interactions build or erode trust

Berufserfahrung

  • ca. 4 - 6 Jahre

Ausbildung

  • Bachelor-AbschlussODER
  • Master-Abschluss

Sprachen

  • Englischverhandlungssicher

Tools & Technologien

  • TypeScript
  • JavaScript
  • Python
  • OpenAI Codex
  • Claude Code
  • Cursor
Die Originalanzeige dieses Stellenangebotes in der aktuellsten Version findest du hier. Nejo hat diesen Job automatisch von der Website des Unternehmens G2i erfasst und die Informationen auf Nejo mit Hilfe von KI für dich aufbereitet. Trotz sorgfältiger Analyse können einzelne Informationen unvollständig oder ungenau sein. Bitte prüfe immer alle Angaben in der Originalanzeige! Inhalte und Urheberrechte der Originalanzeige liegen beim ausschreibenden Unternehmen.

Gefällt dir diese Stelle?

Beta

Dein Career Agent findet täglich ähnliche Jobs für dich.


  • Becton, Dickinson and Company

    Senior Machine Learning Engineer(m/w/x)

    Vollzeit/Teilzeitmit HomeofficeSenior
    Wien
    ab 52.136 / Jahr
  • SKAD

    Senior Consultant Automation & AI(m/w/x)

    Vollzeit/Teilzeitmit HomeofficeSenior
    Berlin, Wien, Hamburg, München, Frankfurt am Main, Düsseldorf, Stuttgart, Dresden, Bonn, Mannheim
  • SKAD

    Senior Consultant – Automation & AI in Construction(m/w/x)

    Vollzeit/Teilzeitmit HomeofficeSenior
    Berlin, Wien, Hamburg, München, Frankfurt am Main, Düsseldorf, Stuttgart, Dresden, Bonn, Mannheim
  • SKAD

    Senior Consultant - AI Governance(m/w/x)

    Vollzeit/Teilzeitmit HomeofficeSenior
    Berlin, Wien, Hamburg, München, Frankfurt am Main, Düsseldorf, Stuttgart, Dresden, Bonn, Mannheim
  • SKAD

    Senior Consultant - Automation AI & EU Research(m/w/x)

    Vollzeit/Teilzeitmit HomeofficeSenior
    Berlin, Wien, Hamburg, München, Frankfurt am Main, Düsseldorf, Stuttgart, Dresden, Bonn, Mannheim
Alle 100+ ähnlichen Jobs ansehen

Nejo ist eine KI – Ergebnisse können unvollständig sein oder Fehler enthalten

Diese Jobs könnten dich auch interessieren