Masterarbeit: Evaluation von Vision-Language Models für soziale Situationen
Primary stack
Job description
About the Position
Die Fraunhofer-Gesellschaft ist eine der weltweit führenden Organisationen für anwendungsorientierte Forschung. Das Fraunhofer IGCV, das erste produktionstechnische Fraunhofer-Institut in Bayern, sucht zum nächstmöglichen Zeitpunkt einen Studierenden für eine Masterarbeit zum Thema: "Evaluation von Vision-Language Models zur Erfassung sozial situativer Kontexte in industriellen Umgebungen – Benchmark-Entwicklung & Modellvergleich".
Responsibilities
- Literaturrecherche zu Vision-Language Models (VLMs), bestehenden VLM-Benchmarks sowie Methoden der Human-Human-Interaction (HHI) und Human-Object-Interaction (HOI) Erkennung
- Entwicklung einer Annotationsstrategie und Taxonomie für sozial situative Szenen (Interaktionsmuster, Ansprechbarkeit, Tätigkeitskontext, soziale Normen) inkl. Auswahl und Einrichtung eines Annotationstools (z. B. CVAT)
- Annotation eines industriellen Bilddatensatzes (4 Branchen) mit mehreren Annotierenden und Bestimmung des Inter-Annotator-Agreements
- Systematischer Vergleich lokaler VLMs (z. B. LLaVA, InternVL2, Qwen2-VL) auf einem NVIDIA Jetson Orin AGX inkl. Prompt-Engineering und Analyse der Prompt-Sensitivität
- Auswertung und wissenschaftliche Dokumentation der Ergebnisse
Requirements
- Studium im Bereich der Ingenieurswissenschaften oder Informatik
- Programmierkenntnisse in Python
- Erste Erfahrungen mit multimodalen KI-Modellen (Vision-Language Models, LLMs) oder Bildverarbeitung
- Interesse an Mensch-Roboter-Interaktion und sozialer Robotik
- Zuverlässige und selbstständige Arbeitsweise
We Offer
Wir bieten flexible Arbeitszeiten, eine hervorragende Ausstattung und die Möglichkeit, die sozial situative Wahrnehmung für soziale Roboter aktiv mitzugestalten. Als Teil eines sympathischen, motivierten Teams sind Sie an der Realisierung spannender Forschungsprojekte beteiligt und übernehmen verantwortungsvolle Aufgaben mit hohem Gestaltungsspielraum.
About the Company
Die Fraunhofer-Gesellschaft spielt eine zentrale Rolle im Innovationsprozess und wirkt als Wegweiser und Impulsgeber für innovative Entwicklungen und wissenschaftliche Exzellenz an der Gestaltung unserer Gesellschaft und unserer Zukunft mit.
Bereit für Veränderung? Dann bewerben Sie sich jetzt, und machen Sie einen Unterschied! Nach Eingang Ihrer Online-Bewerbung erhalten Sie eine automatische Empfangsbestätigung. Dann melden wir uns schnellstmöglich und sagen Ihnen, wie es weitergeht.
Fragen zu dieser Position beantwortet gerne: Christian Pest | 0821 90678-195 | [email protected]
Fraunhofer IGCV
Am Technologiezentrum 10
86159 Augsburg
Fraunhofer-Institut für Gießerei-, Composite- und Verarbeitungstechnik IGCV
Kennziffer: 84683 Bewerbungsfrist:
Stellensegment:
Engineer, Engineering
© Fraunhofer Institut AISEC. This job description was sourced from the employer's public career page. TheJob is not the employer — we index the posting and route candidates to the source. All content rights and hiring decisions belong to the employer.