Work

From a Multi-modal Intelligent Cell to a Self-organizing Robotic Skin - Realizing Self and Enriching Robot Tactile Interaction

Year: 2015
Type: dissertation
Abstract: Human skin provides numerous inspirations for robots, supplying the whole body surface with multi-modal tactile sensitivity.Unlike a robot purely relying on joint information or vision, a robot equipped with artificial skin has a much richer information set.Challenges to efficiently deploy, organize and utilize a high number of distributed multi-modal sensors have so far prevented an effective utilization of artificial skin technology in robotics.In this thesis, we introduce a novel approach to create multi-modal artificial skin and a novel approach to self-organize the body representation of a robot.Our modular artificial skin is built by placing similar skin cells side-by-side into a flexible carrier material.Every skin cell is a self-contained system with a variety of sensors, signal conversion, processing and communication capabilities.The advantage of our modular approach is its robustness, scalability and transferability to various robotic systems.We developed various self-organizing features to automatically handle a potentially high number of skin cells on a large surface area.Automatic networking algorithms explore available skin cells and connections, distribute unique identifiers and provide robust and adaptive real-time communication.Mounted on a robot, our framework systematically explores and models the robot's body schema -inferring the robot's own kinematic and volumetric model from an egocentric perspective.In order to speed up the process, and to omit potentially harmful contacts, we only utilize low-range, open-loop motions of the robot and accelerometers embedded in our skin cells.A first algorithm explores the kinematic dependencies of body parts and joints, allocating actuators to joints and skin cells to body parts.A 3D reconstruction algorithm then computes the volumetric surface model of each body part, utilizing relative rotation estimates based on gravity and a topographic map inferred from the cell-2-cell connections.Turning skin patches into active visual markers, those distributed surface models can be visually combined into one homogeneous body representation -additionally joining tactile and visual space.A kinematic calibration algorithm finally estimates the parameters of the self-assembled kinematic model.In completion, we show exemplary applications of the prototype skin on industrial robot arms and the upper body of a humanoid robot.These examples demonstrate the benefits of an artificial skin for human robot interaction, multi-modal contact control, safety and object manipulation.iii Kurzfassung Die Berührungsempfindlichkeit der menschlichen Haut, liefert zahlreiche Inspirationen für die Robotik.Robotern, die bisher lediglich mit Gelenksensoren und Kameras ausgestattet sind, kann eine künstliche Haut eine Fülle von neuen Informationen zur Verfügung stellen.Die Herausforderungen eine hohe Anzahl unterschiedlicher Sensoren effizient zu verteilen, zu organisieren und zu verwenden, verhinderten bisher einen nennenswerten Einsatz künstlicher Haut in der Robotik.In dieser Doktorarbeit wurden neue Ansätze erarbeitet, um eine multi-modale künstliche Haut für Roboter zu realisieren und das Körperschema eines Roboters selbständig zu organisieren.Hierfür wurde ein neuartiges, modulares System aus Hautzellen entwickelt, die nebeneinander platziert und vernetzt werden können.Jede Hautzelle ist ein eigenständiges System und verfügt über eine Reihe unterschiedlicher Sensoren, Signalverarbeitungsund Kommunikationsfähigkeiten. Durch diese Modularität erreichen wir eine hohe Flexibilität, Robustheit und Skalierbarkeit, und können unsere künstliche Haut sehr schnell auf neuen Robotern einsetzen.Weiterhin entwickelten wir Methoden um eine hohe Anzahl an Hautzellen auf großen Oberflächen automatisch zu organisieren.Netzwerkalgorithmen stellen automatisch die Anzahl der zu Verfügung stehenden Zellen und Verbindungen fest, verteilen neue Identifikationsnummern und leiten Informationen robust und in Echtzeit zum Computer-Gehirn des Roboters weiter.Im nächsten Schritt benützen wir unser System um das Körperschema des Roboters, sein volumetrisches und kinematisches Modell, aus einer egozentrischen Perspektive zu erlangen.Um diesen Prozess zu beschleunigen und sicherer zu gestalten, benützen wir lediglich minimale Bewegungen des Roboters im freien Raum und Beschleunigungssensoren in den Hautzellen.Zuerst analysiert ein Algorithmus die kinematische Abhängigkeit zwischen Gelenken mit Drehachsen und Körperteilen mit Hautzellen.Anschließend benutzen wir das Erdgravitationsfeld und die Netzwerktopologie um die Oberfläche der Körperteilen in 3D zu rekonstruieren.Diese lokalen Rekonstruktionen können dann in optische Marker überführt und mit Hilfe einer monokularen Kamera in einer homogene 3D Darstellung des Körpers vereint werden.Zuletzt schätzt ein Algorithmus die Parameter eines automatisch erzeugten kinematischen Models.Abschließend präsentieren v wir beispielhafte Anwendungen unserer künstlichen Haut auf industriellen Roboterarmen und einem humanoiden Roboter.Diese Beispiele verdeutlichen den Vorteil einer künstlichen Haut hinsichtlich Mensch-Maschine Interaktion, Kontaktregelung, Sicherheit und Objektmanipulation.
Language: English
Open Access status: green
OpenAlex ID: W2749887649
Cites: 137
Cited by: 6
Related to: 10