Computer Use bezeichnet die Fähigkeit eines KI-Systems, grafische Benutzeroberflächen ähnlich wie ein Mensch zu bedienen. Die KI kann beispielsweise Webseiten betrachten, Schaltflächen auswählen, Text eingeben, scrollen oder Formulare ausfüllen. Dazu wertet sie meist Bildschirmaufnahmen aus und entscheidet anschließend, welche Aktion als Nächstes erforderlich ist. 

Damit können KI-Systeme Aufgaben in Programmen oder Browsern erledigen, auch wenn keine spezielle Schnittstelle für sie vorhanden ist. Interessant ist Computer Use vor allem für KI-Agenten, die mehrstufige Arbeitsabläufe selbstständig ausführen sollen. Gleichzeitig entstehen Risiken: Eine KI kann falsche Elemente auswählen, unerwartete Inhalte auf Webseiten als Anweisungen missverstehen oder folgenschwere Aktionen auslösen. Deshalb empfehlen Anbieter eingeschränkte Umgebungen, Sicherheitsregeln und menschliche Bestätigung bei wichtigen Aktionen.