Den vollständigen Index der Dokumentation findest du in llms.txt. Die Markdown-Version einer Dokumentationsseite erhältst du, indem du .md an die URL der Seite anhängst.
Hauptnavigation
Design

Computernutzung

Lass ChatGPT Aufgaben in Desktop-Apps erledigen

In unterstützten Regionen kannst du die Computernutzung in der ChatGPT-Desktop-App unter macOS und Windows mit ChatGPT Work und Codex verwenden. Öffne Einstellungen > Computernutzung, um zu sehen, welche Apps du mit ChatGPT steuern kannst.

Mit der Computernutzung kann ChatGPT grafische Benutzeroberflächen unter macOS oder Windows sehen und bedienen. Nutze die Funktion für Aufgaben, bei denen Befehlszeilentools oder strukturierte Integrationen allein nicht ausreichen. Dazu gehören das Prüfen einer Desktop-App, das Bedienen eines Browsers, das Ändern von App-Einstellungen, die Arbeit mit einer Datenquelle, für die es kein Plugin gibt, oder das Reproduzieren eines Fehlers, der nur in einer grafischen Benutzeroberfläche auftritt.

Mit der Computernutzung kann ChatGPT auch außerhalb des Arbeitsbereichs deines Projekts Änderungen an Apps und am System vornehmen. Grenze die Aufgaben deshalb klar ein und prüfe Berechtigungsanfragen, bevor du fortfährst.

Computernutzung einrichten

  1. Wechsle in der ChatGPT-Desktop-App in den Work-Modus oder wähle Codex aus.
  2. Öffne Einstellungen > Computernutzung. Suche unter Steuerung nach dem Eintrag Beliebige App. Wenn in der Zeile Installieren steht, wähle die Option aus und folge den Anweisungen. Ist der Schalter ausgeschaltet, schalte ihn ein. Zeigt deine App stattdessen eine Plugin-Seite für die Computernutzung an, folge den Anweisungen zur Einrichtung auf dieser Seite.
  3. Starte eine Aufgabe mit Computernutzung. ChatGPT fragt nach deiner Genehmigung, bevor es eine App verwendet. Apps, für die du den Zugriff auch bei künftigen Aufgaben genehmigst, findest du in denselben Einstellungen unter Immer erlaubte Apps.

Wenn du Beliebige App nicht siehst, stehen dir möglicherweise eigene Einstellungen für einen Browser oder eine einzelne App zur Verfügung. Diese Einstellungen gewähren keinen Zugriff auf andere Desktop-Apps. Wenn du einen verwalteten Workspace verwendest, frage bei der Workspace-Administration nach, ob die Computernutzung dort erlaubt ist.

Unter Windows muss die Ziel-App auf dem aktiven Desktop sichtbar bleiben, solange die Aufgabe läuft. Erteile unter macOS die Berechtigungen für Bildschirmaufnahme und Bedienungshilfen, wenn du dazu aufgefordert wirst. So kann ChatGPT die Ziel-App sehen und bedienen.

Erteile unter macOS folgende Berechtigungen:

  • Bildschirmaufnahme, damit ChatGPT die Ziel-App sehen kann.
  • Bedienungshilfen, damit ChatGPT klicken, tippen und navigieren kann.

Wann sich die Computernutzung eignet

Wähle für anspruchsvolle Aufgaben, bei denen es auf Screenshots oder eine visuelle Beurteilung ankommt, GPT-6 Astra, sofern das Modell in deiner Modellauswahl verfügbar ist. Es gelten dieselben Systemberechtigungen und Einstellungen für den App-Zugriff.

Nutze die Computernutzung, wenn die Aufgabe von einer grafischen Benutzeroberfläche abhängt und sich das Ergebnis anhand von Dateien oder Befehlsausgaben allein nur schwer überprüfen lässt.

Die Computernutzung eignet sich zum Beispiel für folgende Aufgaben:

  • Eine macOS-App, eine Windows-App, einen Ablauf im iOS-Simulator oder eine andere Desktop-App testen, an der ChatGPT gerade arbeitet.
  • Eine Aufgabe ausführen, für die dein Webbrowser erforderlich ist.
  • Einen Fehler reproduzieren, der nur in einer grafischen Oberfläche auftritt.
  • App-Einstellungen ändern, für die du dich durch eine Benutzeroberfläche klicken musst.
  • Informationen in einer App oder Datenquelle prüfen, auf die kein Plugin Zugriff bietet.
  • Unter macOS eine klar abgegrenzte Aufgabe im Hintergrund ausführen, während du an etwas anderem weiterarbeitest.
  • Einen Ablauf ausführen, an dem mehrere Apps beteiligt sind.

Verwende für Web-Apps, die du lokal entwickelst, zuerst den integrierten Browser.

Nutzung im Vordergrund unter Windows

Unter Windows läuft die Computernutzung auf dem aktiven Desktop. Sie kann nicht im Hintergrund laufen, während du in derselben Windows-Sitzung weiterarbeitest. Rechne damit, dass ChatGPT während der Aufgabe den Mauszeiger bewegt, Text eingibt und die Bedienung im Vordergrund übernimmt.

Wenn eine Aufgabe unter Windows in deiner Abwesenheit weiterlaufen soll, lass das Windows-Gerät entsperrt und mit dem Internet verbunden. Über die Fernsteuerung kannst du auf deinem Smartphone den Fortschritt prüfen oder weitere Anweisungen senden. Du kannst die ChatGPT-Desktop-App auch in einer virtuellen Windows-Maschine ausführen. Dann steuert ChatGPT bei der Computernutzung die VM anstelle deines Hauptdesktops.

Eine Aufgabe mit Computernutzung starten

Erwähne @Computer oder @AppName in deinem Prompt oder bitte ChatGPT, die Computernutzung zu verwenden. Gib genau an, welche App oder welches Fenster ChatGPT bedienen oder welchen Ablauf es ausführen soll.

Öffne die App mit der Computernutzung und reproduziere den Fehler beim Onboarding.
Korrigiere den kleinsten Codepfad, der den Fehler verursacht. Führe nach jeder
Änderung dieselben Schritte in der Benutzeroberfläche erneut aus.
Öffne @Chrome und prüfe, ob die Checkout-Seite nach den letzten Änderungen weiterhin funktioniert.

Wenn die Ziel-App ein eigenes Plugin oder einen MCP-Server anbietet, nutze für den Datenzugriff und für wiederholbare Vorgänge bevorzugt diese strukturierte Integration. Wähle die Computernutzung, wenn ChatGPT die App über ihre grafische Oberfläche prüfen oder bedienen muss.

Berechtigungen und Genehmigungen

Die Workspace-Administration kann einschränken, auf welche Apps die Computernutzung zugreifen darf und ob Genehmigungen gespeichert werden können. Weitere Informationen findest du im Abschnitt Zentrale Einstellungen für Browser und Computernutzung.

Die Systemberechtigungen für die Computernutzung sind von den App-Genehmigungen in ChatGPT getrennt. Unter macOS kann ChatGPT mit den Berechtigungen für Bildschirmaufnahme und Bedienungshilfen Apps sehen und bedienen. Mit den App-Genehmigungen legst du fest, welche Apps ChatGPT verwenden darf. Für das Lesen und Bearbeiten von Dateien sowie für Shell-Befehle gelten weiterhin die Sandbox- und Genehmigungseinstellungen der jeweiligen Aufgabe.

Mit der Computernutzung kann ChatGPT nur in den von dir erlaubten Apps Inhalte sehen und Aktionen ausführen. Während einer Aufgabe fragt ChatGPT nach deiner Genehmigung, bevor es eine App auf deinem Computer verwendet. Wähle Immer erlauben, wenn ChatGPT diese App künftig ohne erneute Nachfrage verwenden darf. Du kannst Apps aus der Liste Immer erlauben entfernen. Du findest sie im Abschnitt Computernutzung in den Einstellungen der ChatGPT-Desktop-App.

ChatGPT kann dich auch um Genehmigung bitten, bevor es sensible Aktionen ausführt oder in laufende Vorgänge eingreift.

Wenn ChatGPT eine App unter macOS nicht sehen oder steuern kann, öffne Systemeinstellungen > Datenschutz & Sicherheit und prüfe die Berechtigungen Bildschirmaufnahme und Bedienungshilfen für Codex Computernutzung. Stelle unter Windows sicher, dass die Ziel-App in der aktiven Desktopsitzung sichtbar ist.

App-Richtlinie für Windows konfigurieren

Unter Windows speichert die Computernutzung dauerhafte Entscheidungen zum App-Zugriff in $CODEX_HOME/config.toml. Liste dort die Apps auf, die ChatGPT bei der Computernutzung ohne Rückfrage öffnen darf:

[computer_use.windows]
always_allowed_app_ids = ["mspaint.exe"]

Verwende die App-Kennung, die die Computernutzung unter Windows meldet, etwa den Namen der ausführbaren Datei bei einer Desktop-App oder die App User Model ID bei einer als Paket bereitgestellten App. Bei Apps, die nicht in der Liste stehen, fragt ChatGPT nach. Um eine gespeicherte Genehmigung zu widerrufen, entferne die App unter Einstellungen > Computernutzung > Immer erlauben.

Diese Tabelle enthält die lokalen Entscheidungen zur Computernutzung. Sie ist unabhängig von der administrativ vorgegebenen Datei requirements.toml. Dort kann die Administration die Computernutzung mit [features].computer_use = false deaktivieren. Einträge aus der Liste der erlaubten Apps in der früher verwendeten Datei $CODEX_HOME/computer-use/config.toml werden in die aktuelle Einstellung übernommen. Die dortige Liste denied ist im aktuellen Richtlinienschema nicht vorgesehen.

Nutzung bei gesperrtem Mac

Die Nutzung bei gesperrtem Computer ist unter macOS verfügbar. Unter Windows läuft die Computernutzung im Vordergrund.

ChatGPT kann die Computernutzung nach dem Sperren deines Mac nur verwenden, wenn du die Nutzung bei gesperrtem Mac zuvor aktiviert hast. Aktiviere diese Option, wenn ChatGPT für eine Aufgabe von einem verbundenen Gerät aus auf Desktop-Apps zugreifen muss, nachdem dein Mac gesperrt wurde.

Wenn du die Nutzung bei gesperrtem Mac aktivierst, installiert ChatGPT ein Autorisierungs-Plug-in von Apple, das macOS beim Entsperren einbindet.

Die Funktion ist bewusst auf diesen Zweck beschränkt. Sie bietet keine allgemeine Möglichkeit, deinen Mac aus der Ferne zu entsperren. Auch andere Apps oder lokale Prozesse können den Computer damit nicht entsperren.

So verwendest du die Funktion:

  1. Öffne in der App Einstellungen > Computernutzung.
  2. Aktiviere die Nutzung bei gesperrtem Mac.
  3. Sobald der Bildschirm deines Mac gesperrt ist, starte von einem verbundenen Gerät aus eine Aufgabe mit Computernutzung.

Wenn ChatGPT bei einer Aufgabe über die Computernutzung auf eine App auf deinem gesperrten Mac zugreift, entsperrt es den Mac vorübergehend. Dabei blockiert ChatGPT die lokale Bedienung. Die Schutzmaßnahmen des Sperrbildschirms bleiben wirksam. Vor dem Entsperren prüft ChatGPT, ob der Versuch zu einem aktiven, vertrauenswürdigen Schritt der Computernutzung gehört. Außerhalb dieses kurzen Zeitfensters verweigert ChatGPT das Entsperren und fordert dich bei Bedarf auf, den Mac manuell zu entsperren.

Für die Nutzung bei gesperrtem Mac gelten folgende Schutzmaßnahmen:

  • Die Autorisierung gilt nur für kurze Zeit und ausschließlich für den aktuellen Entsperrversuch.
  • Nur ChatGPT kann den Mac automatisch entsperren, und das nur während eines aktiven Schritts der Computernutzung.
  • Während der Desktop vorübergehend entsperrt ist, verdeckt ChatGPT die Inhalte auf allen Bildschirmen.
  • Erkennt ChatGPT eine lokale Tastatur- oder Zeigereingabe, sperrt es den Mac erneut. Das automatische Entsperren bleibt ausgesetzt, bis du den Mac manuell entsperrst.

Hinweise zur Sicherheit

Mit der Computernutzung kann ChatGPT Bildschirminhalte sehen, Screenshots erstellen, Fenster und Menüs der Ziel-App bedienen, Tastatureingaben vornehmen und auf die Zwischenablage zugreifen. Beachte, dass ChatGPT während der Aufgabe sichtbare App-Inhalte, Webseiten, Screenshots und in der Ziel-App geöffnete Dateien als Kontext verarbeiten kann.

Grenze Aufgaben klar ein und bleib bei sensiblen Vorgängen dabei:

  • Gib ChatGPT jeweils eine konkrete Ziel-App oder einen klar definierten Ablauf vor.
  • Du kannst die Aufgabe jederzeit stoppen oder die Bedienung deines Computers übernehmen.
  • Lass Apps mit sensiblen Inhalten geschlossen, sofern sie für die Aufgabe nicht erforderlich sind.
  • Unter Windows übernimmt ChatGPT während der Aufgabe die Eingabe im Vordergrund. Nutze ein zweites Gerät oder eine VM oder stoppe die Aufgabe, bevor du den Desktop selbst bedienst.
  • Vermeide Aufgaben, für die geheime Informationen erforderlich sind, es sei denn, du bist dabei und kannst jeden Schritt genehmigen.
  • Prüfe Berechtigungsanfragen, bevor du ChatGPT die Nutzung einer App erlaubst.
  • Wähle Immer erlauben nur für Apps, bei denen du ChatGPT zutraust, sie bei künftigen Aufgaben selbstständig zu verwenden.
  • Bleib dabei, wenn es um Einstellungen für Konten, Sicherheit, Datenschutz, Netzwerke, Zahlungen oder Zugangsdaten geht.
  • Brich die Aufgabe ab, wenn ChatGPT anfängt, das falsche Fenster zu bedienen.

Wenn ChatGPT deinen Browser verwendet, kann es auch Seiten bedienen, auf denen du bereits angemeldet bist. Prüfe Aktionen auf Websites genauso sorgfältig, als würdest du sie selbst ausführen. Webseiten können schädliche oder irreführende Inhalte enthalten. Websites können genehmigte Klicks, das Absenden von Formularen und Aktionen im angemeldeten Zustand deinem Konto zuordnen. Wenn du deinen Browser weiterverwenden möchtest, während ChatGPT arbeitet, bitte ChatGPT, einen anderen Browser zu nutzen.

Die Computernutzung kann weder Terminal-Apps noch ChatGPT selbst automatisieren, da sich so die Sicherheitsrichtlinien von ChatGPT umgehen ließen. Sie kann sich auch nicht mit Administratorrechten authentifizieren oder auf deinem Computer Berechtigungsanfragen für Sicherheit und Datenschutz genehmigen.

Für Dateiänderungen und Shell-Befehle gelten weiterhin die jeweiligen Genehmigungs- und Sandbox-Einstellungen von ChatGPT. Änderungen, die über Desktop-Apps vorgenommen werden, erscheinen im Überprüfungsbereich unter Umständen erst, wenn sie auf dem Datenträger gespeichert sind und das Projekt sie erfasst. Deine ChatGPT-Dateneinstellungen gelten für alle Inhalte, die ChatGPT verarbeitet, auch für Screenshots, die bei der Computernutzung entstehen.