Kurz gesagt

  • Google hat die Computer-Nutzung für seine Gemini-Mac-App eingeführt, wodurch die KI durch Desktop-Anwendungen und Websites klicken kann, während die Nutzer weiterarbeiten.
  • Der Agent läuft auf einem separaten virtuellen Bildschirm, mit App-Berechtigungen, Live-Vorschauen und Bestätigungsanfragen für sensible Aktionen.
  • Google warnt, dass schädliche Inhalte, umfassender App-Zugriff und unvollkommene Backups die Daten und Dateien der Nutzer dennoch gefährden können.

Google möchte, dass Gemini mehr tut, als nur Fragen auf deinem Mac zu beantworten.

Das Unternehmen hat am Donnerstag eine Computer-Nutzungsfunktion eingeführt, die es seinem KI-Assistenten ermöglicht, Anwendungen zu öffnen, durch Menüs zu navigieren, Formulare auszufüllen und Informationen im Namen eines Nutzers zwischen lokalen Dateien und Websites zu verschieben.

„Ab heute hilft die Computer-Nutzung in der Gemini-App für Mac dabei, mehrstufige Aufgaben über deine lokalen Dateien, Desktop-Apps und das Web hinweg zu erledigen“, kündigte Google an. „Beschreibe einfach, was du brauchst, und Gemini übernimmt für dich das Klicken, Tippen, die Menüs und Formulare.“

NEU$0.00Volumen
1. Dez.Schließt: 1. Dez. 2026, 04:59 UTC

Schließt: 1. Dez. 2026, 04:59 UTC

Die neue Funktion läuft in einem isolierten Hintergrundfenster, wie Google es nennt, und lässt das Hauptdisplay sowie den Cursor des Computers für den Besitzer verfügbar. Nutzer können die Aktionen des Agenten über eine Live-Vorschau im Gemini-Chat beobachten und eine Aufgabe unterbrechen, wenn sie vom Kurs abweicht.

Zu Googles Beispielen gehören das Extrahieren von Versanddetails aus PDF-Dokumenten und deren Eingabe in Online-Formulare, das Bearbeiten von Fotostapeln und das Erstellen von Präsentationen aus Dashboard-Daten. Das Unternehmen schlägt außerdem vor, Preise zu recherchieren und Wiederverkaufsangebote basierend auf auf einem Mac gespeicherten Bildern vorzubereiten.

Diese Aufgaben beinhalten eine andere Art der KI-Interaktion als einen Chatbot zu bitten, Anweisungen zu schreiben. Gemini soll die Software selbst bedienen und die Klicks und Tastatureingaben ausführen, die sonst dem Nutzer obliegen würden.

Ein Hintergrundarbeiter mit Zugriff auf deine Apps

Die Funktion wird in englischer Sprache in den Vereinigten Staaten für erwachsene Nutzer mit persönlichen bezahlten Google-Konten eingeführt. Sie erfordert einen Apple Silicon Mac mit macOS Sequoia 15.0 oder neuer; Arbeits- und Schulkonten werden zum Start nicht unterstützt.

Um sie zu aktivieren, schalten Nutzer die Computernutzung in der Mac-App ein, öffnen den Task-Modus und fordern Gemini mit @Computer use auf. Laut Googles Support-Dokumentation bittet der Assistent um Erlaubnis, bevor er eine neue App steuert, mit Optionen, den Zugriff zu verweigern, ihn einmalig zu erlauben oder ihn dauerhaft zu erlauben.

Nutzer können Listen erlaubter und blockierter Apps erstellen, den virtuellen Bildschirm überwachen und eine Aufgabe stoppen. Google sagt, dass sensible Aktionen eine Bestätigung erfordern, bevor der Agent fortfährt, obwohl auf eine als „immer erlauben“ markierte App erneut ohne eine weitere Aufforderung auf App-Ebene zugegriffen werden kann.

BitcoinBTC · USD

$59,007−14%

13. Nov.15. Nov.17. Nov.19. Nov.20. Nov.

$69,1k$65,7k$62,4k$59,0k

24h-HochHoch$63,219

24h-TiefTief$58,811

Vol.Vol.$2,0 Mrd.

→

Bitcoin mit USDC kaufen

Bereitgestellt von Jupiter

Preisdaten von CoinGeckoCoinGeckoMehr Bitcoin-Nachrichten und Prognosen →

Die Computernutzung verleiht Googles Agentenstrategie eine lokale Dimension. Decrypt berichtete zuvor über Gemini Spark, den cloudbasierten Aufgabenagenten des Unternehmens, während Wettbewerber Desktop-Steuerungstools entwickelt haben, darunter OpenAIs Codex, Anthropics Claude und Kimi Work.

Das separate Fenster ist auch eine praktische Unterscheidung: Ein Agent, der den sichtbaren Cursor übernimmt, kann einen Computer während einer langen Aufgabe schwer benutzbar machen. Googles Ansatz ermöglicht es der Person, weiterzuarbeiten, während Gemini einen anderen Workflow bearbeitet.

Was passiert, wenn der Agent einen Fehler macht?

Ein Hintergrundfenster sollte nicht mit einer Garantie verwechselt werden, dass Dateien oder Konten vor Risiken isoliert sind. Googles eigene Dokumentation warnt davor, dass der Agent auf aktive Sitzungen in Desktop-Anwendungen zugreifen, auf dem Bildschirm angezeigte Authentifizierungscodes antreffen und Aktionen ausführen kann, die manche Apps nicht rückgängig machen können.

In diesem Fall liegt jeder Fehler beim Nutzer, nicht bei Google.

Es wird auch vor Prompt-Injection gewarnt, einem Angriff, bei dem bösartige Anweisungen, die in einem Dokument oder einer Website versteckt sind, ein KI-System dazu überreden, etwas zu tun, was sein Nutzer nie verlangt hat. Mit der Berechtigung, mehrere Apps zu bedienen, könnte Gemini in einem Programm auf feindselige Inhalte stoßen und in einem anderen darauf reagieren.

Google bietet optionale Dateisicherungen auf Anfrage an, sagt aber, dass sie nicht immer erstellt werden können. Wo sie funktionieren, bleiben die temporären Kopien 24 Stunden lang oder bis zum nächsten Prompt verfügbar, und manche Anwendungen können möglicherweise verhindern, dass ihre Inhalte überhaupt gesichert werden.

Die Einführung erfolgt außerdem drei Tage, nachdem Apple in der macOS-27.3-Beta strengere Zugriffskontrollen eingeführt hat. Diese Änderungen geben Nutzern mehr Möglichkeiten, leistungsstarke Berechtigungen auf bestimmte Apps oder Ordner zu beschränken und jedes Mal eine neue Genehmigung zu verlangen, wenn Zugriff angefordert wird.

Es verlangt von Nutzern außerdem, im Austausch für Bequemlichkeit viel Privatsphäre aufzugeben. Das Hilfezentrum besagt, dass Nutzer auch die Berechtigungen für macOS-Bedienungshilfen sowie Bildschirm- & Systemaudioaufnahme aktivieren müssen, bevor Gemini die Kontrolle über Desktop-Apps übernehmen kann.

Schließen Sie sich über 72.000 Lesern an