Computer Use in Microsoft Copilot Studio einrichten
Eine praktische Anleitung zum Konfigurieren, Testen und Überwachen des Vorschau-Tools Computer Use für Web- und Desktop-Aufgaben.
TL;DR
Das Computer-Use-Tool in Microsoft Copilot Studio ermöglicht Agenten Web- und Windows-Desktop-Aufgaben wie Formulare, Dateneingabe, Rechnungsverarbeitung und Datenextraktion ohne direkten API-Zugriff. Das Tool wird über die Registerkarte Tools eingerichtet: Aufgabe in natürlicher Sprache beschreiben, detaillierte Anweisungen ergänzen, speichern und die ausgeführten Schritte mit Screenshots testen.
Original von Griffin Lickfeldt, auf Citizen Developer. Artikel lesen
Dies ist unsere eigene Kurzfassung, keine Wiederveröffentlichung oder vollständige Übersetzung.
Warum das wichtig ist
- Makers: Computer Use über die Registerkarte Tools hinzufügen, die Aufgabe klar beschreiben und detaillierte Anweisungen geben, damit der Agent interfacebasierte Arbeit zuverlässig ausführt.
- Makers: Aufgaben wie das Absenden eines Kontaktformulars testen und Screenshots, ausgeführte Schritte, Fehler sowie Echtzeit-Feedback vor dem Einsatz prüfen.
- Admins/IT: Computer Use als Vorschaufunktion behandeln und beobachten, wie Agenten auf Pop-ups, verschobene Schaltflächen und andere Interface-Änderungen reagieren.
Häufige Fragen
Wie füge ich das Computer-Use-Tool in Microsoft Copilot Studio hinzu?
Öffnen Sie die Registerkarte Tools, wählen Sie Add a new tool und dann Computer Use. Danach Aufgabe benennen, beschreiben und detaillierte Anweisungen ergänzen.
Können Copilot-Studio-Agenten mit Computer Use Webformulare ohne API ausfüllen?
Ja, Agenten können Websites aufrufen, Felder ausfüllen und Formulare ohne direkten API-Zugriff absenden. Das wird als Testszenario beschrieben.
Wie teste ich Computer-Use-Agenten in Copilot Studio richtig?
Speichern Sie die Konfiguration und wählen Sie Test. Prüfen Sie Screenshots und jeden ausgeführten Schritt, wiederholen Sie Tests und beobachten Sie Interface-Änderungen.