Dein persönlicher KI-Karriere-Agent
Masterarbeit: Evaluation von Vision-Language Models zur Erfassung sozial situativer Kontexte in industriellen Umgebungen – Benchmark-Entwicklung & Modellvergleich(m/w/x)
Entwicklung eines Benchmarks und Vergleichs von Vision-Language Models zur Erfassung sozial situativer Kontexte in industriellen Umgebungen. Programmierkenntnisse in Python und erste Erfahrungen mit multimodalen KI-Modellen erforderlich. Hoher Gestaltungsspielraum und flexible Arbeitszeiten.
Anforderungen
- Studium in Ingenieurswissenschaften oder Informatik
- Programmierkenntnisse in Python
- Erste Erfahrungen mit multimodalen KI-Modellen (Vision-Language Models, LLMs) oder Bildverarbeitung
- Interesse an Mensch-Roboter-Interaktion und sozialer Robotik
- Zuverlässige und selbstständige Arbeitsweise
Aufgaben
- Literaturrecherche zu Vision-Language Models (VLMs) durchführen
- Recherche zu bestehenden VLM-Benchmarks durchführen
- Recherche zu Methoden der Human-Human-Interaction (HHI) Erkennung durchführen
- Recherche zu Methoden der Human-Object-Interaction (HOI) Erkennung durchführen
- Entwicklung einer Annotationsstrategie für sozial situative Szenen
- Entwicklung einer Taxonomie für sozial situative Szenen (Interaktionsmuster, Ansprechbarkeit, Tätigkeitskontext, soziale Normen)
- Auswahl eines Annotationstools (z. B. CVAT)
- Einrichtung eines Annotationstools (z. B. CVAT)
- Annotation eines industriellen Bilddatensatzes (4 Branchen) mit mehreren Annotierenden
- Bestimmung des Inter-Annotator-Agreements
- Systematischer Vergleich lokaler VLMs (z. B. LLaVA, InternVL2, Qwen2-VL) auf einem NVIDIA Jetson Orin AGX
- Prompt-Engineering für den Vergleich lokaler VLMs
- Analyse der Prompt-Sensitivität
- Auswertung der Ergebnisse
- Wissenschaftliche Dokumentation der Ergebnisse
Ausbildung
- Bachelor-Abschluss
Sprachen
- Deutsch – verhandlungssicher
Tools & Technologien
- Python
- multimodalen KI-Modellen (Vision-Language Models, LLMs)
- Bildverarbeitung
Benefits
Flexibles Arbeiten
- Flexible Arbeitszeiten
Modernes Büro
- Hervorragende Ausstattung
Lockere Unternehmenskultur
- Sympathisches, motiviertes Team
Sinnstiftende Arbeit
- Hoher Gestaltungsspielraum
Gefällt dir diese Stelle?
BetaDein Career Agent findet täglich ähnliche Jobs für dich.
Noch nicht perfekt?
- XITASO GmbHVollzeit/TeilzeitPraktikumnur vor OrtKarlsruhe, Augsburg, Berlin, Erlangen, Ingolstadt, Krumbach (Schwaben), Leipzig
- Fraunhofer-Gesellschaft
Studienarbeit/ Bachelorarbeit/ Masterarbeit: VLA-basierte Robotermanipulation(m/w/x)
Vollzeit/TeilzeitWerkstudentnur vor OrtAugsburg - Everllence
Abschlussarbeit: Unsupervised Learning für Anomalie Detektion in Zeitreihendaten(m/w/x)
VollzeitPraktikumnur vor OrtAugsburg - Fraunhofer-Gesellschaft
Wissenschaftliche:r Mitarbeiter:in im Bereich KI-Basierte Robotik(m/w/x)
Vollzeit/TeilzeitBefristeter Vertragnur vor OrtJuniorAugsburg - Fraunhofer-Gesellschaft
Studienarbeit/ Bachelorarbeit: Dynamische Sicherheitszonen in der flexiblen Produktion(m/w/x)
Vollzeit/TeilzeitPraktikumnur vor OrtAugsburg
Masterarbeit: Evaluation von Vision-Language Models zur Erfassung sozial situativer Kontexte in industriellen Umgebungen – Benchmark-Entwicklung & Modellvergleich(m/w/x)
Entwicklung eines Benchmarks und Vergleichs von Vision-Language Models zur Erfassung sozial situativer Kontexte in industriellen Umgebungen. Programmierkenntnisse in Python und erste Erfahrungen mit multimodalen KI-Modellen erforderlich. Hoher Gestaltungsspielraum und flexible Arbeitszeiten.
Anforderungen
- Studium in Ingenieurswissenschaften oder Informatik
- Programmierkenntnisse in Python
- Erste Erfahrungen mit multimodalen KI-Modellen (Vision-Language Models, LLMs) oder Bildverarbeitung
- Interesse an Mensch-Roboter-Interaktion und sozialer Robotik
- Zuverlässige und selbstständige Arbeitsweise
Aufgaben
- Literaturrecherche zu Vision-Language Models (VLMs) durchführen
- Recherche zu bestehenden VLM-Benchmarks durchführen
- Recherche zu Methoden der Human-Human-Interaction (HHI) Erkennung durchführen
- Recherche zu Methoden der Human-Object-Interaction (HOI) Erkennung durchführen
- Entwicklung einer Annotationsstrategie für sozial situative Szenen
- Entwicklung einer Taxonomie für sozial situative Szenen (Interaktionsmuster, Ansprechbarkeit, Tätigkeitskontext, soziale Normen)
- Auswahl eines Annotationstools (z. B. CVAT)
- Einrichtung eines Annotationstools (z. B. CVAT)
- Annotation eines industriellen Bilddatensatzes (4 Branchen) mit mehreren Annotierenden
- Bestimmung des Inter-Annotator-Agreements
- Systematischer Vergleich lokaler VLMs (z. B. LLaVA, InternVL2, Qwen2-VL) auf einem NVIDIA Jetson Orin AGX
- Prompt-Engineering für den Vergleich lokaler VLMs
- Analyse der Prompt-Sensitivität
- Auswertung der Ergebnisse
- Wissenschaftliche Dokumentation der Ergebnisse
Ausbildung
- Bachelor-Abschluss
Sprachen
- Deutsch – verhandlungssicher
Tools & Technologien
- Python
- multimodalen KI-Modellen (Vision-Language Models, LLMs)
- Bildverarbeitung
Benefits
Flexibles Arbeiten
- Flexible Arbeitszeiten
Modernes Büro
- Hervorragende Ausstattung
Lockere Unternehmenskultur
- Sympathisches, motiviertes Team
Sinnstiftende Arbeit
- Hoher Gestaltungsspielraum
Gefällt dir diese Stelle?
BetaDein Career Agent findet täglich ähnliche Jobs für dich.
Über das Unternehmen
Fraunhofer-Gesellschaft
Branche
Research
Beschreibung
Das Unternehmen ist eine der führenden Organisationen für anwendungsorientierte Forschung mit 76 Instituten in Deutschland.
Noch nicht perfekt?
- XITASO GmbH
Masterand - Semantic 4D Occupancy Forecasting(m/w/x)
Vollzeit/TeilzeitPraktikumnur vor OrtKarlsruhe, Augsburg, Berlin, Erlangen, Ingolstadt, Krumbach (Schwaben), Leipzig - Fraunhofer-Gesellschaft
Studienarbeit/ Bachelorarbeit/ Masterarbeit: VLA-basierte Robotermanipulation(m/w/x)
Vollzeit/TeilzeitWerkstudentnur vor OrtAugsburg - Everllence
Abschlussarbeit: Unsupervised Learning für Anomalie Detektion in Zeitreihendaten(m/w/x)
VollzeitPraktikumnur vor OrtAugsburg - Fraunhofer-Gesellschaft
Wissenschaftliche:r Mitarbeiter:in im Bereich KI-Basierte Robotik(m/w/x)
Vollzeit/TeilzeitBefristeter Vertragnur vor OrtJuniorAugsburg - Fraunhofer-Gesellschaft
Studienarbeit/ Bachelorarbeit: Dynamische Sicherheitszonen in der flexiblen Produktion(m/w/x)
Vollzeit/TeilzeitPraktikumnur vor OrtAugsburg