Anthropic hat für sein KI-Code-Agent-Tool Claude Code eine neue Funktion namens „Computer Use“ („Computer-Nutzung“) eingeführt und sie in Form einer Research Preview für macOS-Nutzer freigegeben. Diese Funktion ermöglicht es Claude, direkt die Computer-Bildschirmoberfläche des Nutzers zu steuern – Apps zu öffnen, Buttons zu klicken, Text einzugeben, Screenshots zu erstellen und in demselben Gespräch den vollständigen Workflow von der Programmierung bis zum UI-Test nahtlos zu verbinden, ohne das Terminal zu verlassen.
Was kann Claude für dich direkt „klicken“?
Laut offizieller technischer Dokumentation richtet sich Computer Use vor allem an Aufgaben, die eine grafische Benutzeroberfläche (GUI) benötigen – also an jene Dinge, die du normalerweise beiseitelegen und selbst erledigen musst:
Native Anwendungen bauen und verifizieren: Claude soll eine macOS-Menüleisten-App schreiben. Er wird sie selbst kompilieren, starten und jeden einzelnen Steuerbereich nacheinander anklicken, um zu bestätigen, dass die Funktionen korrekt funktionieren – sogar bevor du diese App jemals geöffnet hast.
End-to-End-UI-Tests: Zeige auf eine lokale Electron-App und sage „Testen Sie den neuen Onboarding-Flow“, dann öffnet Claude die App, klickt die Registrierungs-Schritte an und macht Screenshots von jedem Bildschirm. Keine Playwright-Konfiguration, kein Test-Framework.
Fehlerdiagnose für visuelle und Layout-Probleme: Sage Claude „Dieses Modal wird in einem kleinen Fenster abgeschnitten“, dann verkleinert es das Fenster, um den Bug zu reproduzieren, macht Screenshots, passt CSS an und bestätigt das Ergebnis der Reparatur erneut – es sieht also das, was du siehst.
Tools mit nur GUI: Design-Tools, Hardware-Steuerungs-Panels, iOS Simulator oder jede proprietäre Software ohne CLI oder API.
Priorisierte Auswahl der Claude-Tools
Computer Use ist das „umfangreichste, aber langsamste“ Tool. Claude wählt je nach Priorität die genaueste Vorgehensweise:
Gibt es einen passenden MCP Server → verwende MCP
Ist es ein Shell-Befehl → verwende Bash
Ist es eine Browser-Interaktion und es gibt eine Einstellung „Claude in Chrome“ → verwende die Chrome-Erweiterung
Keiner der obigen Fälle → erst Computer Use aktivieren
Das heißt: Die Bildschirmsteuerung ist für Szenarien reserviert, in denen „andere Wege nicht funktionieren“ – native Anwendungen, Simulatoren oder Tools ohne API.
So aktivierst du Computer Use
Computer Use wird in Form eines eingebauten MCP Server bereitgestellt (Name:
computer-use
), ist standardmäßig deaktiviert und muss manuell aktiviert werden:
Führe in einer interaktiven Claude-Code-Arbeitssitzung /mcp aus, finde in der Liste computer-use (erscheint als „deaktiviert“)
Wähle es aus und klicke auf Enable. Die Einstellungen werden projektbezogen dauerhaft gespeichert; pro Projekt ist die Einrichtung nur einmal nötig.
Beim ersten Mal, wenn Claude den Computer steuert, fordert macOS die Berechtigung für zwei Dinge an: Barrierefreiheit (Accessibility) und Bildschirmaufzeichnung (Screen Recording). Nach der Genehmigung „Nochmals versuchen“ auswählen; in manchen Fällen muss Claude Code neu gestartet werden.
Jede App muss in jeder Arbeitssitzung einzeln genehmigt werden
Aktivieren
computer-use
bedeutet nicht, dass Claude alle Apps auf deinem Computer steuern kann. Wenn Claude in einer Arbeitssitzung zum ersten Mal versucht, eine bestimmte App zu bedienen, erscheint im Terminal eine Aufforderung, die Folgendes anzeigt:
Welche Apps Claude steuern möchte
Ob zusätzliche Berechtigungen angefordert werden (z. B. Zugriff auf die Zwischenablage)
Wie viele andere Apps während der Arbeit ausgeblendet werden
Wähle „Für diese Arbeitssitzung erlauben“ oder „Ablehnen“. Die Genehmigung gilt nur für die aktuelle Arbeitssitzung. Bei Apps mit weitreichendem Systemzugriff zeigt das System zusätzlich eine Warnung an:
Wie Claude auf deinem Bildschirm arbeitet
Vollständige exklusive Sperre: Nach dem Start von Computer Use wird eine exklusive Sperre auf Maschinenebene übernommen. Wenn bereits eine andere Claude-Code-Arbeitssitzung den Computer verwendet, schlägt die neue Anfrage fehl und es wird darauf hingewiesen, dass zuerst die andere Sitzung beendet werden soll.
Andere Apps werden vorübergehend ausgeblendet: Wenn Claude beginnt, den Bildschirm zu steuern, werden nicht genehmigte sichtbare Apps ausgeblendet, damit Claude nur mit den genehmigten Apps interagiert. Dein Terminalfenster bleibt sichtbar und wird nicht gescreent; du kannst jederzeit direkt mitverfolgen, was Claude sieht. Claude kann seine eigene Ausgabe nicht sehen. Wenn Claude fertig ist, werden die ausgeblendeten Apps automatisch wiederhergestellt.
Jederzeit unterbrechen: Nachdem Claude die Sperre erhalten hat, zeigt macOS eine Benachrichtigung an: „Claude is using your computer · press Esc to stop“. Du kannst jederzeit
Esc
drücken oder im Terminal Ctrl+C eingeben, um sofort zu unterbrechen. Claude gibt die Sperre frei, stellt alle Apps wieder her und gibt die Kontrolle zurück.
Sicherheitsmechanismen und Vertrauensgrenzen
Die offizielle Dokumentation betont ausdrücklich, dass Computer Use sich von den sandboxisierten Bash-Tools unterscheidet: Er wird direkt in deiner Desktop-Umgebung ausgeführt, und die Vertrauensgrenzen sind andere. Die integrierten Sicherheitsvorkehrungen umfassen:
App-für-App-Genehmigung: Claude kann nur Apps steuern, die in der aktuellen Arbeitssitzung ausdrücklich genehmigt wurden
Wächter-Warnung: Apps, die Shell-, Dateisystem- oder System-Einstellungszugriff erhalten sollen, werden vor der Genehmigung besonders markiert
Automatische Hinweis-Injection-Erkennung: Claude überprüft den Inhalt auf dem Bildschirm und markiert potenzielle Hint-Injection-Angriffe
Verwendungsbedingungen und Einschränkungen
Erfordert ein Pro- oder Max-Abo (Team-, Enterprise-Plan nicht verfügbar)
Erfordert Claude Code v2.1.85 oder höher
Derzeit nur mit macOS kompatibel (Research-Preview-Phase)
Muss in einer interaktiven Arbeitssitzung verwendet werden; nicht unterstützt für den nicht-interaktiven Modus ( -p Flag)
Browser- und Handelsplattform-Apps nur im „Ansichtsmodus“; Terminal und IDE im „Klickmodus“; andere Apps vollständige Kontrolle
MacRumors weist darauf hin, dass Claude Computer Use im Vergleich zu Wettbewerbern mit einem strengeren Prioritätsdesign für Berechtigungen umgesetzt hat, und dass es aktuell nur für Mac verfügbar ist, während andere Pläne macOS, Windows und Linux bereits unterstützt haben.
Für Entwickler liegt der größte Nutzen dieser Funktion darin, die Schleife „Programm schreiben → testen → Bugs beheben“ zu verkürzen – Claude schreibt nicht nur Code, sondern kann auch selbst direkt auf deinem Bildschirm die Ergebnisse verifizieren.
Risikohinweis: Investitionen in Kryptowährungen sind mit einem hohen Risiko verbunden; ihr Preis kann stark schwanken, und Sie könnten Ihr gesamtes investiertes Kapital verlieren. Bitte prüfen Sie das Risiko sorgfältig.
Dieser Artikel Claude Code neue Funktion: AI steuert direkt deinen Mac-Bildschirm, vom Terminal-Code bis zum Klick-Test aus einer Hand erschien zuerst auf KettenNews ABMedia.
