Fortschritte in der Robotik und taktilen Technologie von Meta auf der CoRL 2024

Meta präsentiert Fortschritte in der Robotik und taktilen Wahrnehmung auf der CoRL 2024 in München Vom 6. bis 9. November 2024 fand in München die Conference on Robot Learning (CoRL) statt, eine führende Konferenz im Bereich Robotik und Maschinelles Lernen. Meta nutzte die Gelegenheit, neueste Forschungsergebnisse im Bereich der taktilen Wahrnehmung und Robotik vorzustellen. Die Präsentationen konzentrierten sich auf Meta Sparsh, Meta Digit 360 und Meta Digit Plexus sowie den Benchmark PARTNR.

Meta Sparsh: Ein universeller Encoder für visuelle, taktile Sensorik

Meta Sparsh ist ein vielseitig einsetzbarer Encoder für visuelle, taktile Sensorik. Er zeichnet sich dadurch aus, dass er mit einer Vielzahl von taktilen Sensoren und für verschiedene Aufgaben kompatibel ist. Trainiert wurde Sparsh mit über 460.000 taktilen Bildern unter Verwendung von selbstüberwachtem Lernen. Dies ermöglicht es Sparsh, Eigenschaften wie Kräfte und Kontakt zu messen, die durch reine visuelle Wahrnehmung nicht erfassbar sind.

Meta Digit 360: Ein künstlicher Finger mit menschlichen Fähigkeiten

Meta Digit 360 ist ein künstlicher Finger, der mit über 18 Sensorfunktionen ausgestattet ist. Diese ermöglichen es ihm, detaillierte Berührungsdaten mit menschenähnlicher Präzision zu erfassen. Durch die Integration von On-Device-KI kann Digit 360 Informationen lokal verarbeiten und schnell auf verschiedene Reize reagieren, ähnlich der Reflexfunktion bei Mensch und Tier.

Meta Digit Plexus: Standardisierte Plattform für Roboter-Sensor-Interaktionen

Meta Digit Plexus bietet eine standardisierte Plattform für die Verbindung und Interaktion von Robotersensoren. Die Hard- und Softwarelösung ermöglicht die Integration mehrerer taktiler Sensoren an einer Roboterhand und vereinfacht die Datenerfassung, Steuerung und Analyse über ein einziges Kabel. Digit Plexus orientiert sich an der Art und Weise, wie menschliche Hände Berührungsinformationen verarbeiten.

PARTNR: Benchmark für die Mensch-Roboter-Kollaboration

Mit PARTNR (Planning And Reasoning Tasks in humaN-Robot collaboration) stellt Meta einen Benchmark für Planungs- und Argumentationsaufgaben in der Mensch-Roboter-Kollaboration vor. PARTNR basiert auf Habitat 3.0 und ist der größte Benchmark seiner Art zur Untersuchung und Bewertung der Mensch-Roboter-Kollaboration bei Haushaltsaktivitäten. Die Standardisierung dieser Arbeit soll die Forschung und Innovation in diesem Bereich beschleunigen.

Kooperationen und Ausblick

Um die neuen Entwicklungen für verschiedene Anwendungen zugänglich zu machen, arbeitet Meta mit GelSight und Wonik Robotics zusammen. Ziel ist es, die Innovationen im Bereich der taktilen Sensorik weiterzuentwickeln und zu kommerzialisieren. Die vorgestellten Technologien haben das Potenzial, verschiedene Bereiche zu beeinflussen, von der medizinischen Forschung über die Lieferkette bis hin zur Fertigung. Meta sieht in der Kombination von KI und Robotik großes Potenzial für die Zukunft. Bibliograhie: https://www.mirmi.tum.de/mirmi/veranstaltungen/events-single-view/article/corl-2024-conference-on-robot-learning/ https://www.mirmi.tum.de/en/mirmi/events/ https://www.linkedin.com/posts/frankarobotics_corl2024-experts-researchers-activity-7252988606871392256-Wfp6 https://www.mcml.ai/events/pastevents/page/49/ https://mcml.ai/events/pastevents/page/19/ https://munich-robotics-ai.de/events/ https://baiosphere.org/en/robotics/