News

Integration von Künstlicher Intelligenz in macOS-Anwendungen: Neueste Entwicklungen von Meta und OpenAI

Integration von Künstlicher Intelligenz in macOS-Anwendungen: Neueste Entwicklungen von Meta und OpenAI

Das Wichtigste in Kürze

  • Meta hat eine offizielle Beta-App von Meta AI für macOS veröffentlicht, die über WebKit und SwiftUI auf das KI-System zugreift und Diktierfunktionen sowie Interaktion mit Coding-Tools bietet.
  • Meta AI kann auf den Bildschirm zugreifen und Text- sowie Bildinformationen aus Screenshots auslesen, bietet jedoch noch keine vollständige "Computer Use"-Steuerung.
  • OpenAI hat ein iMessage-Plugin für ChatGPT Work und die Codex-App auf macOS eingeführt, das das Suchen, Analysieren, Entwerfen und Versenden von Nachrichten ermöglicht.
  • Das ChatGPT-Plugin soll lokal laufen und keinen Index der Nachrichten erstellen, erfordert jedoch weitreichende Systemberechtigungen, inklusive Vollzugriff auf die Festplatte.
  • Nutzer werden von OpenAI dazu angehalten, die Berechtigungen des iMessage-Plugins genau zu prüfen und keine dauerhafte Freigabe für das Versenden von Nachrichten zu erteilen.
  • Die iMessage-Integration ist derzeit nur auf Macs mit Apple-Silicon-Prozessoren verfügbar.
  • Innerhalb der EU wurde die "Computer History"-Funktion in der ChatGPT-App freigegeben, die Aktivitäten am Mac erfassen und zusammenfassen kann, standardmäßig jedoch für Pro-, Business- und Enterprise-Accounts deaktiviert ist.

Die Integration von Künstlicher Intelligenz in alltägliche Anwendungen schreitet stetig voran, und der Mac-App-Markt bildet hier keine Ausnahme. Jüngste Entwicklungen zeigen, wie führende KI-Unternehmen wie Meta und OpenAI ihre Technologien tiefer in das macOS-Ökosystem einbetten, was sowohl neue Möglichkeiten als auch Diskussionen über Datenschutz und Sicherheit mit sich bringt.

Meta AI auf dem Mac: Bildschirmzugriff und Interaktion

Meta hat kürzlich die Beta-Version 1.0 seiner Meta AI App für macOS eingeführt. Diese Anwendung unterscheidet sich von simplen Web-Apps, da sie als native Mac-App konzipiert ist und über WebKit sowie SwiftUI direkten Zugriff auf das KI-System von Meta bietet. Nutzer können über einen Shortcut jederzeit auf die im Hintergrund laufende Meta AI zugreifen.

Funktionsumfang der Meta AI Mac App

Die App verfügt über eine Diktierfunktion, die es ermöglicht, Prompt-Ergebnisse in andere Anwendungen zu übertragen. Darüber hinaus können Anwender mit Coding-Werkzeugen interagieren. Eine bemerkenswerte Funktion ist die Möglichkeit, Meta AI Zugriff auf den Bildschirm zu gewähren. Obwohl eine vollständige "Computer Use"-Steuerung, also die direkte App-Steuerung via Tastatur und Maus, zum aktuellen Zeitpunkt nicht möglich zu sein scheint, kann Meta AI Screenshots analysieren und daraus Text- und Bildinformationen extrahieren. Wie andere KI-Anwendungen speichert Meta AI auch ein Archiv früherer Anfragen. Das Dock-Icon lässt sich bei Bedarf ausblenden.

ChatGPT und iMessage: Eine neue Schnittstelle mit Implikationen

OpenAI hat für seine ChatGPT-Anwendungen für macOS ein neues Plugin vorgestellt, das die Interaktion mit Apples iMessage-Anwendung "Nachrichten" ermöglicht. Dieses Feature ist für die Work-Version von ChatGPT und die Codex-App verfügbar und erlaubt es Nutzern, iMessages, SMS und RCS-Nachrichten zu durchsuchen, Konversationen zu analysieren, Nachrichtenentwürfe zu erstellen und sogar Antworten direkt über ChatGPT auf dem Mac zu versenden.

Technische Umsetzung und Datenschutzbedenken

Da Apple keine offizielle Schnittstelle für den direkten Datenbankzugriff auf iMessage bietet, wird vermutet, dass OpenAI auf inoffizielle Methoden zurückgreift. Es wird spekuliert, dass hierbei Tools aus dem OpenClaw-Projekt zum Einsatz kommen könnten, dessen Leiter mittlerweile bei OpenAI tätig ist. Diese technische Herangehensweise wirft Fragen bezüglich der Systemsicherheit auf.

OpenAI betont, dass das Plugin lokal auf dem Gerät läuft und keinen Index aller Nachrichten erstellt, um Bedenken hinsichtlich des Datenschutzes zu zerstreuen. Die Hauptsorge vieler Nutzer ist, dass ihre privaten Kommunikationsdaten zum Training der KI verwendet werden könnten. OpenAI rät Nutzern ausdrücklich dazu, das "Kleingedruckte" zu beachten und dem Feature keine dauerhafte Freigabe zu erteilen. Standardmäßig erfordert das Versenden von Nachrichten eine explizite Zustimmung des Nutzers, und eine dauerhafte Freigabe würde die letzte Möglichkeit zur Überprüfung einer Nachricht vor dem Versand eliminieren.

Systemanforderungen und Berechtigungen

Die iMessage-Integration ist ausschließlich auf Macs mit Apple-Silicon-Prozessoren nutzbar. Für den Zugriff benötigt ChatGPT weitreichende Berechtigungen auf dem Mac, darunter "Vollzugriff auf die Festplatte", Zugriff auf Kontaktnamen und Genehmigungen für Automatisierungstools.

Die "Computer History"-Funktion in ChatGPT

Zusätzlich zu den genannten Neuerungen hat die ChatGPT-App innerhalb der EU die "Computer History"-Funktion freigegeben. Diese Funktion ermöglicht es dem Chatbot, auf Wunsch die Aktivitäten des Nutzers am Mac über den Tag hinweg zu erfassen und Zusammenfassungen zu erstellen. Laut OpenAI-Supportdokumentation ist diese Funktion für Pro-, Business- und Enterprise-Accounts standardmäßig deaktiviert. Es bleibt abzuwarten, inwieweit diese Funktion für Nutzer des kostenlosen Tarifs verfügbar sein wird und welche weiteren Diskussionen sie im Hinblick auf Datensouveränität und Privatsphäre hervorrufen wird.

Die Entwicklungen im Bereich der KI-Apps für macOS zeigen einen klaren Trend zur tieferen Integration von KI in die Benutzeroberfläche und die Kernfunktionen des Betriebssystems. Während dies das Potenzial für eine erhöhte Produktivität und neue Interaktionsmöglichkeiten birgt, erfordert es von Nutzern und Unternehmen gleichermaßen ein erhöhtes Bewusstsein für die Implikationen hinsichtlich Datenschutz und der Vergabe von Systemberechtigungen.

Bibliography: - heise online: "KI-Apps für den Mac: ChatGPT verschickt iMessages, Meta AI liest Bildschirm" - appgefahren.de: "ChatGPT liest jetzt iMessages auf dem Mac und kann Nachrichten verschicken" - heise online (English): "AI Apps for Mac: ChatGPT Sends iMessages, Meta AI Reads Screen" - t3n.de: "Plug-in für iMessage in ChatGPT: Darum sollten Nutzer aufpassen" - techrepublic.com: "Meta AI Mac App Adds Screen Sharing, Business Tools" - mactechnews.de: "ChatGPT-App schreibt und versendet jetzt auch iMessages" - de.headtopics.com: "KI-Apps für den Mac: ChatGPT verschickt iMessages, Meta AI liest Bildschirm - Chatgpt | Apple Nachrichten" - unite.ai: "ChatGPT‑Plugin liest und sendet Apple‑Nachrichten auf Apple‑Silicon‑Macs" - blogspan.net: "ChatGPT und Apple Messages: Plugin verlangt Festplattenvollzugriff" - macrumors.com: "ChatGPT Can Now Read and Send iMessages on Mac"

KI, die in Deutschland zu Hause ist.

Testen Sie Mindverse Studio oder sprechen Sie mit unserem Team über Ihren Anwendungsfall.