AuRorA – KI unterstütztes, interaktives Kochen mit Roboter in Smart-Home-Küche



In dem vom BMBF geförderten AuRorA-Projekt wurde ein Küchenroboter entwickelt, der den Menschen im Alltag unterstützt und entlastet. Im Fokus der Forschung steht die natürliche, intuitive Interaktion sowie die Fähigkeit des Roboters auch proaktiv den Menschen anzusprechen, Fragen zu stellen und über seine Handlungen vorab zu informieren. Das AuRorA-System lernt während des interaktiven Dialogs und passt sich so an die individuellen Bedürfnisse und Präferenzen der Nutzerinnen und Nutzer an.
Ursprünglich konzipiert, um Seniorinnen und Senioren ein möglichst selbstbestimmtes Leben im Eigenheim zu ermöglichen, kann das System Gegenstände anreichen, handhaben und an Aufgaben erinnern. AuRorA erfasst die Umgebung über eine Vielzahl von Kameras und ermöglicht somit eine dynamische, kollisionsfreie Trajektorienplanung und die Lokalisierung und gezielte Positionierung von Objekten.
Dabei setzt das System vorhandene und modulare Fähigkeiten ein. Diese können individuell zusammengeschaltet werden, um auch komplexe Aufgaben wie das Kochen von Spaghetti mit Tomatensoße zu erlernen. Das Verhalten basiert auf einem am FZI Forschungszentrum Informatik entwickelten Behavior Tree Framework, welches im Projekt AuRorA um lernende, interaktive Komponenten erweitert wurde.
Die Interaktion stellt eine Schlüsselrolle hinsichtlich Akzeptanz und Praxistauglichkeit dar. Für die Interaktion greift AuRorA auf die Sprache zurück, analysierte aber auch Mimik, Gestik, Puls- und Blinzelrate und ermöglicht Rückschlüsse auf die Belastung der Nutzerinnen und Nutzer.
Weiterführende Informationen können auf der Projektwebseite (https://projekt-aurora.de/) gefunden werden.

In the AuRorA project, a new, intelligent kitchen robot supports and assists humans in everyday life. The research focuses on natural, intuitive interaction as well as the robot's ability to start a new interaction by itself, ask questions and inform the user about its actions in advance. The AuRorA system learns and evolves during the interactive dialogue and therefore adapts to the individual needs and preferences of the user.
Designed to enable seniors to live as independently as possible in their own homes, the system can hand over and manipulate objects as well as remind the user about important things or next steps in cooperative task. AuRorA monitors the environment via multiple cameras, enabling dynamic, collision-free trajectory planning, the localization and targeted positioning of objects. The system utilizes available modular skills. These can be individually interconnected to learn complex tasks such as cooking spaghetti with tomato sauce. This learning ability is based on a Behavior Tree Framework developed at FZI Forschungszentrum Informatik, which has been extended in AuRorA to include these interactive learning components.
The natural interaction represents a key role in terms of acceptance and everyday use. For interaction, AuRorA uses speech, but also analyzed facial expressions, gestures, pulse and blink rates, allowing to estimate the users' stress levels. The project was funded by the Federal Ministry of Education and Research (BMBF).Learn more about AuRorA on the project website (https://projekt-aurora.de/).