Frederic Kerber
Doctoral Researcher
Research Interests
SmartwatchesWrist-worn devicesWearablesInput and output for small devicesSame-Side InteractionGesture sensingOpen Thesis Topics
Motivation
Die Eyeled GmbH hat sich als Anbieter von Apps für Weltleitmessen etabliert. Die Apps enthalten alle relevanten Informationen für den Besucher zur Vorbereitung und für den Messebesuch selbst.
Die jüngsten Fortschritte bei den großen Sprachmodellen (Large Language Models, LLMs) ermöglichen es inzwischen, natürlichsprachliche Fragen basierend auf der vorhandenen Datenlage kompetent zu beantworten.
In einer vorangegangenen Master-Arbeit wurde bereits ein System entwickelt, welches basierend auf ausgewählten Ausstellern und Terminen auf dem Messegelände einen optimalen Weg berechnen kann.
Thema
Basierend auf einem LLM und den bereits geleisteten Vorarbeiten soll ein persönlicher Assistent entwickelt werden, der einerseits konkrete Fragen rund um den Messebesuch beantworten kann, andererseits aber auch basierend auf den Interessen des Nutzers einen Vorschlag für einen Besuchsplan erstellen kann und diesen durch Feedback des Nutzers iterativ optimieren kann.
Zu untersuchen ist, inwieweit die Antworten des LLMs automatisch ausgewertet werden können, sodass z. B. vorgeschlagene Aussteller automatisch erkannt werden und in die Wegeplanung aufgenommen werden können. Dadurch kann basierend auf der Wegberechnung auch automatisch Feedback an das LLM gegeben werden, wenn z. B. die vorgeschlagenen Aussteller innerhalb einer vorgegebenen Zeit nicht besucht werden können, weil sie zu weit über das Messegelände verteilt liegen.
Inhalte der Arbeit
- Evaluation des derzeitigen Stands der Forschung
- Analyse der Anwendungsfälle
- Konzeption des Systems
- Prototypische Umsetzung und Evaluierung
- Schnittstellendefinition und Integration mit bestehender Messe-App (Anpassungen an Messe-App ist nicht Teil der Anforderungen)
Voraussetzungen
- Interesse am Thema Künstlicher Intelligenz und insbesondere LLMs
- Gute bis sehr gute Programmierkenntnisse
- Datenbankkenntnisse (SQLite)
Bewerbung
Bitte sende eine E-Mail an Frederic Kerber mit den folgenden Informationen:
- Gewünschter Start der Arbeit
- Geplante Fertigstellung der Arbeit
- Ein kurzes Motivationsstatement, warum das Thema interessant für dich ist
- Eine kurze Zusammenfassung, warum du gut für die Bearbeitung des Themas geeignet bist
- Übersicht besuchter Lehrveranstaltungen
Ansprechpartner
DFKI: Frederic Kerber
Eyeled GmbH: Christoph Bartelmus
Selected Publications (Full text access provided)
- Investigating Current Techniques for Opposite-Hand Smartwatch Interaction
- User-Independent Real-Time Hand Gesture Recognition Based on Surface Electromyography
- Understanding Same-Side Interactions with Wrist-Worn Devices
- Managing Smartwatch Notifications through Filtering and Ambient Illumination
- Investigating Interaction Techniques for State-of-the-Art Smartwatches
- EMPress: Practical Hand Gesture Classification with Wrist-Mounted EMG and Pressure Sensing
- WristRotate: a Personalized Motion Gesture Delimiter for Wrist-Worn Devices
- Same-side Hand Interactions with Arm-placed Devices Using EMG
- Investigating the Effectiveness of Peephole Interaction for Smartwatches in a Map Navigation Task
Projects
Teaching
- Seminar: Developing Cloud Software using SAP Technology (SS 2022)
- Proseminar: Recent Topics in HCI (WS 2019/20)
- Seminar: Design and Evaluation of Ubiquitous Technology in Sports (WS 2017/18)
- Proseminar: Recent Topics in HCI (WS 2017/18)
- Seminar: Wearable Computing - From Idea to Prototype (WS 2015/16)
- Seminar: Gamified Life: Integration of Gamification elements into everyday life (WS 2014/15)
- Ubiquitous Media (SS 2014)
- Seminar: From analog to digital: Moving from paper-based artifacts to digital counterparts (WS 2013/14)
- Ubiquitous Media (SS 2013)
- User Interface Design (SS 2013)
- Proseminar: Programmierung mobiler Geräte mit Android (WS 2012/13)