Erste Reaktionen der Nutzer auf OpenAIs neues o1 AI-Modell

Einführung

OpenAI hat kürzlich sein neuestes AI-Modell, bekannt als "o1" oder "Strawberry", vorgestellt. Dies hat in der AI-Community eine Welle von Reaktionen ausgelöst. Das Modell, das in zwei Varianten – o1-preview und o1-mini – verfügbar ist, soll komplexe Aufgaben besser lösen können als seine Vorgänger. Während einige Experten beeindruckt sind, zeigen sich andere skeptisch.

Technische Neuerungen

Das Hauptmerkmal des o1-Modells ist seine Fähigkeit, vor der Beantwortung "nachzudenken". OpenAI behauptet, dass dies zu besseren Ergebnissen führt, doch nicht alle sind überzeugt. Laut OpenAI wurde das Modell mit einer neuen Optimierungsalgorithmus und einem speziell dafür zugeschnittenen Trainingsdatensatz trainiert. Dies soll die Genauigkeit erhöhen und Halluzinationen reduzieren, auch wenn dieses Problem noch nicht vollständig gelöst ist.

Expertenmeinungen

Gary Marcus: Beeindruckt, aber skeptisch

Gary Marcus, ein bekannter Wissenschaftler im Bereich AI, beschreibt das Modell als "beeindruckend", ist jedoch nicht bereit, es als Durchbruch in der allgemeinen AI zu bezeichnen. Er kritisiert die fehlenden detaillierten Informationen über die Funktionsweise des Modells und die unvollständige Offenlegung der Benchmark-Ergebnisse. Marcus ist auch skeptisch gegenüber der Behauptung, dass eine längere Denkzeit zu besseren Ergebnissen führt, da hierfür noch keine soliden Beweise vorliegen.

Ethan Mollick: Erstaunlich, aber begrenzt

Der Wissenschaftler Ethan Mollick, der frühen Zugang zu o1 hatte, beschreibt es als "erstaunlich, aber noch begrenzt". Er merkt an, dass das Modell bei komplexen Problemen, die Planung erfordern, hervorragend abschneidet. In anderen Bereichen, wie dem Schreiben, übertrifft es jedoch nicht seinen Vorgänger. Mollick testete das Modell mit einem komplexen Kreuzworträtsel, bei dem es zunächst Schwierigkeiten hatte, es aber nach einem entscheidenden Hinweis lösen konnte.

Erste Nutzererfahrungen

OpenAI hat das neue Modell schnell vielen ChatGPT-Nutzern zugänglich gemacht, was zu einer Flut von Beispielinteraktionen online geführt hat. Diese Beispiele zeigen sowohl die Fortschritte als auch die bestehenden Schwächen des Modells.

Erfolge und Misserfolge

Ein bemerkenswerter Erfolg des o1-Modells liegt im Bereich der kreativen Schreibaufgaben. Mehran Jalali forderte das Modell heraus, ein Gedicht mit spezifischen Reim- und Wortvorgaben zu schreiben. Laut Jalali übertraf das Modell alle anderen Sprachmodelle, die er getestet hatte. Dies zeigt das Potenzial des o1-Modells zur Bewältigung regelbasierter kreativer Aufgaben.

Auf der anderen Seite gab es auch Schwächen. Ed Zitron berichtete, dass das Modell bei der Aufgabe, alle US-Bundesstaaten mit dem Buchstaben "a" aufzulisten, versagte – und "Mississippi" als 20. Eintrag nannte. Dies geschah trotz einer angeblichen Denkzeit von 18 Sekunden vor der Antwort.

Technische Herausforderungen und Fragen

Entwickler wie Simon Willison haben Bedenken hinsichtlich der "Reasoning Tokens" des o1-Modells geäußert. Diese Tokens, die den Denkprozess des Modells darstellen, sind in API-Antworten nicht sichtbar, zählen aber dennoch als Ausgabetokens. Willison argumentiert, dass dieser Mangel an Transparenz einen Rückschritt für die AI-Entwicklung darstellt. Die Interpretierbarkeit von Sprachmodellen sei von entscheidender Bedeutung.

Empfehlungen für Nutzer

Andrew Mayne, ein früher Zugangsnutzer und ehemaliger OpenAI-Mitarbeiter, bietet Tipps für effektives Promten von o1. Er rät Nutzern, das Modell wie einen klugen Freund zu behandeln und detaillierte, gut durchdachte Prompts zu geben. Mayne empfiehlt auch, o1-mini für Aufgaben zu verwenden, die schrittweises Denken erfordern.

Ausblick

OpenAI plant, das o1-Modell weiter zu verbessern und zusätzliche Funktionen wie das Durchsuchen des Webs und das Verarbeiten von Dateien und Bildern zu integrieren. Während das o1-Modell derzeit noch einige Einschränkungen hat, zeigt es bereits jetzt beeindruckende Fähigkeiten im Bereich der komplexen Problemlösung und des kreativen Schreibens.

Fazit

Das o1-Modell von OpenAI hat gemischte Reaktionen hervorgerufen. Während einige Experten und Nutzer von den neuen Fähigkeiten beeindruckt sind, bleiben andere skeptisch hinsichtlich seiner langfristigen Auswirkungen und der tatsächlichen Verbesserung durch die längere Denkzeit. Es bleibt abzuwarten, wie sich das Modell in der Praxis bewährt und welche weiteren Entwicklungen OpenAI in Zukunft vornehmen wird.

Quellen

- https://www.theverge.com/2024/9/12/24242439/openai-o1-model-reasoning-strawberry-chatgpt - https://fortune.com/2024/09/13/openai-o1-strawberry-model-9-things-you-need-know/ - https://www.tomsguide.com/ai/openais-o1-model-takes-ai-to-a-new-level-it-fact-checks-itself-before-responding - https://www.forbes.com/sites/lanceeliot/2024/09/13/making-logical-sense-of-the-newly-launched-openai-o1-model-that-thinks-longer-and-keeps-hidden-its-ace-in-the-hole-chain-of-thought/ - https://community.openai.com/t/new-reasoning-models-openai-o1-preview-and-o1-mini/938081 - https://simonwillison.net/2024/Sep/12/openai-o1/ - https://arstechnica.com/information-technology/2024/09/openais-new-reasoning-ai-models-are-here-o1-preview-and-o1-mini/ - https://web.swipeinsight.app/posts/openai-introduces-o1-a-new-ai-model-for-advanced-reasoning-10699 - https://azure.microsoft.com/en-us/blog/introducing-o1-openais-new-reasoning-model-series-for-developers-and-enterprises-on-azure/ - https://venturebeat.com/ai/forget-gpt-5-openai-launches-new-ai-model-family-o1-claiming-phd-level-performance/