News
Mistral AI präsentiert Robostral Navigate: Fortschrittliche Roboternavigation mit einer einzelnen Kamera
Das Wichtigste in Kürze
- Mistral AI hat "Robostral Navigate" vorgestellt, ein KI-Modell für die Roboternavigation.
- Das Modell ermöglicht Robotern die autonome Navigation ausschließlich mittels einer einzelnen RGB-Kamera und natürlicher Sprachbefehle.
- Es verzichtet auf zusätzliche Sensoren wie LiDAR oder Tiefenkameras.
- Robostral Navigate erreichte auf dem R2R-CE-Benchmark Erfolgsraten von 76,6 % in unbekannten und 79,4 % in bekannten Umgebungen, was vergleichbare Systeme übertrifft.
- Das Training erfolgte vollständig in simulierten Umgebungen und nutzte eine effiziente Prefix-Caching-Methode sowie Online-Reinforcement-Learning.
- Mistral AI positioniert dieses Modell als ersten Schritt zu einem einheitlichen "Embodied Agent" in der Robotik.
Mistrals Robostral Navigate: Autonome Roboternavigation mit einer Kamera
In der dynamischen Landschaft der Künstlichen Intelligenz und Robotik hat Mistral AI, ein führendes französisches KI-Unternehmen, mit der Einführung von "Robostral Navigate" einen bemerkenswerten Fortschritt erzielt. Dieses neue KI-Modell verspricht, die Art und Weise, wie Roboter autonome Navigation verstehen und ausführen, grundlegend zu verändern. Die Besonderheit liegt in seiner Fähigkeit, Roboter allein mit einer einzigen RGB-Kamera und natürlichen Sprachbefehlen durch komplexe Umgebungen zu führen, ohne auf zusätzliche, oft kostspielige Sensorik wie LiDAR oder Tiefenkameras angewiesen zu sein.
Technologische Innovation: Weniger ist mehr
Die autonome Navigation von Robotern war bisher oft von einer Vielzahl von Sensoren abhängig, die detaillierte Umgebungsdaten lieferten. Diese Multikamera-Setups, LiDAR-Systeme zur optischen Abstands- und Geschwindigkeitsmessung sowie Tiefensensoren trugen nicht nur zu höheren Hardwarekosten bei, sondern erhöhten auch die Komplexität der Systemintegration. Robostral Navigate bricht mit diesem Paradigma, indem es sich auf die Verarbeitung visueller Informationen einer einzelnen RGB-Kamera konzentriert.
Mistral AI gibt an, dass Robostral Navigate auf dem R2R-CE-Benchmark (Room-to-Room in Continuous Environments) eine Erfolgsrate von 76,6 Prozent in unbekannten Umgebungen erzielt. Dies übertrifft laut Mistral nicht nur den besten bisherigen Einzelkamera-Ansatz um 9,7 Prozentpunkte, sondern auch Systeme, die Tiefen- oder Multikamera-Setups verwenden, um 4,5 Prozentpunkte. In bereits bekannten Umgebungen soll das Modell eine Erfolgsrate von 79,4 Prozent erreichen. Diese Ergebnisse deuten auf eine signifikante Leistungssteigerung bei gleichzeitiger Hardware-Reduktion hin.
Navigationsmechanismus und Robustheit
Für die Navigation nutzt Robostral Navigate eine Technik, die als "Pointing" bezeichnet wird. Dabei prognostiziert das Modell die Bildkoordinaten des Zielorts im aktuellen Kamerabild sowie die gewünschte Ausrichtung bei der Ankunft. Sollte das Ziel außerhalb des aktuellen Sichtfelds liegen, wechselt das System zu lokalen Koordinatenverschiebungen, beispielsweise Anweisungen wie "2 Meter vorwärts, 1,5 Meter nach links, 25 Grad links drehen". Dieser Pointing-Ansatz soll die Robustheit des Modells gegenüber Änderungen in den Kameraeinstellungen erhöhen, was ein entscheidender Vorteil in dynamischen Einsatzszenarien sein kann.
Das Modell basiert auf Mistrals eigenem Vision-Language-Modell, das speziell für Grounding-Aufgaben wie Objektlokalisierung und Zählen optimiert wurde. Dies unterstreicht die interne Entwicklungskompetenz von Mistral AI und die Abkehr von bestehenden Open-Source-VLMs.
Training und Effizienz
Ein wesentlicher Aspekt der Entwicklung von Robostral Navigate ist das Training, das vollständig in simulierten Umgebungen erfolgte. Die Trainingsdaten umfassten rund 400.000 Trajektorien aus 6.000 verschiedenen Szenen. Eine innovative, auf Prefix-Caching basierende Trainingsmethode reduzierte die benötigte Anzahl von Tokens erheblich, wodurch Trainingsläufe von Monaten auf Tage verkürzt werden konnten. Nach dem überwachten Training kam CISPO (Clipped Importance Sampling Policy Optimization) zum Einsatz, ein Online-Reinforcement-Learning-Algorithmus, der die Erfolgsrate zusätzlich um 3,2 Prozentpunkte verbesserte. Diese Methoden zeigen, wie Effizienz und Leistung im Trainingsprozess Hand in Hand gehen können.
Anwendungsfelder und Zukunftsperspektiven
Robostral Navigate ist so konzipiert, dass es auf verschiedenen Robotertypen eingesetzt werden kann, darunter Rad-, Lauf- und Flugroboter unterschiedlicher Größe. Mistral AI sieht potenzielle Anwendungsfelder in der Fertigung, Lieferung und Logistik. Der Verzicht auf teure Sensorik könnte die Einstiegshürden für die Implementierung autonomer Roboter senken und sie für eine breitere Palette von Unternehmen zugänglich machen. Es bleibt jedoch festzuhalten, dass der rein kamerabasierte Ansatz seine Leistungsfähigkeit und Sicherheit in realen, potenziell kritischen Umgebungen noch umfassend unter Beweis stellen muss.
Mistral AI selbst bezeichnet Robostral Navigate als "nur den ersten Schritt hin zu einem einheitlichen Embodied Agent". Dies deutet auf eine langfristige Strategie hin, die darauf abzielt, KI-Modelle zu entwickeln, die nicht nur kognitive Aufgaben erfüllen, sondern auch physisch in der Welt agieren können. Die Expansion des Robotik-Teams bei Mistral AI ist ein klares Signal für ein verstärktes Engagement in diesem zukunftsweisenden Bereich.
Die Einführung von Robostral Navigate reiht sich ein in eine Serie von Innovationen von Mistral AI. Zuvor hatte das Unternehmen bereits Leanstral 1.5 vorgestellt, ein spezialisiertes Modell für formale mathematische Beweise, das als Open Source verfügbar gemacht wurde. Diese Entwicklungen unterstreichen Mistrals Bestreben, an der Spitze der KI-Forschung und -Anwendung zu bleiben und sowohl im Bereich der Sprachmodelle als auch in der physischen KI neue Maßstäbe zu setzen.
Bibliography
- heise online. (2026, 9. Juli). Robostral Navigate: Mistral veröffentlicht Einzelkamera-KI für die Roboter. Abgerufen von https://www.heise.de/news/Robostral-Navigate-Mistral-veroeffentlicht-Einzelkamera-KI-fuer-die-Roboter-11355527.html
- Mistral AI. (2026, 8. Juli). Robostral Navigate: single-camera AI navigation. Abgerufen von https://mistral.ai/news/robostral-navigate/
- The Decoder. (2026, 8. Juli). Robostral Navigate: Mistrals neues 8B-Modell steuert Roboter nur mit einer Kamera durch komplexe Umgebungen. Abgerufen von https://the-decoder.de/robostral-navigate-mistrals-neues-8b-modell-steuert-roboter-nur-mit-einer-kamera-durch-komplexe-umgebungen/
- ComputerBase. (2026, 9. Juli). Robostral Navigate von Mistral: Neues KI-Modell steuert Roboter mit nur einer RGB-Kamera. Abgerufen von https://www.computerbase.de/news/wirtschaft/robostral-navigate-von-mistral-neues-ki-modell-steuert-roboter-mit-nur-einer-rgb-kamera.98312/
- Dr. Web. (2026, 8. Juli). Mistrals KI lotst Roboter mit einer einzigen Kamera. Abgerufen von https://www.drweb.de/mistrals-ki-lotst-roboter-mit-einer-einzigen-kamera/
- IT-Boltwise. (2026, 9. Juli). Mistral Robostral Navigate: autonome Navigation mit nur einer RGB-Kamera. Abgerufen von https://www.it-boltwise.de/mistral-robostral-navigate-autonome-navigation-mit-nur-einer-rgb-kamera.html
- Finanzen.at. (2026, 9. Juli). Robostral Navigate: Mistral veröffentlicht Einzelkamera-KI für die Roboter. Abgerufen von https://www.finanzen.at/nachrichten/aktien/robostral-navigate--mistral-veroeffentlicht-einzelkamera-ki-fuer-die-roboter-15789514
- IT-Boltwise. (2026, 8. Juli). Robostral Navigate: Ein-Kamera-KI führt Roboter per Sprache durch Räume. Abgerufen von https://www.it-boltwise.de/robostral-navigate-ein-kamera-ki-fuehrt-roboter-per-sprache-durch-raeume.html
- Blogspan. (2026, 8. Juli). Robostral Navigate: Mistrals Roboter-KI nur mit Kamera. Abgerufen von https://www.blogspan.net/mistral-robostral-navigate-roboter-kamera/
Weitere News-Artikel
Alle ansehen- Mistral AI präsentiert neues Sprachmodell Small 3 unter Apache-Lizenz
- Mistral AI fordert technologische Souveränität Europas im Bereich der Cybersicherheit
- Mistral AI präsentiert umfassendes Update für Le Chat mit neuen Funktionen und mobilen Apps
- Mistral AI präsentiert Vibe: Neuer Chatbot mit erweiterten Funktionen und strategischen Partnerschaften
- Mistral Medium 3.5: Integration von Chat, logischem Denken und Programmierung in einem KI-Modell
- Mistral präsentiert mit Pixtral-12B sein erstes multimodales KI-Modell
KI, die in Deutschland zu Hause ist.
Testen Sie Mindverse Studio oder sprechen Sie mit unserem Team über Ihren Anwendungsfall.