Ein technischer Endpunkt ist noch kein gutes Werkzeug
Eine vorhandene API kann viele Möglichkeiten bieten. Werden diese unverändert als unscharf beschriebene Agentenwerkzeuge angeboten, bleibt unklar, wann welche Funktion verwendet werden soll.
Ein Werkzeug „Kunden bearbeiten“ kann suchen, ändern oder löschen bedeuten. Ein enger Name wie „internen Antwortentwurf anlegen“ macht die vorgesehene Wirkung deutlich leichter verständlich.
Den fachlichen Auftrag abbilden
Anthropic beschreibt die Gestaltung zweckgerichteter Agentenwerkzeuge und ihrer Rückgaben. Für einen betrieblichen Einsatz sollten die Funktionen zu den tatsächlich erlaubten Arbeitsschritten passen.
Fiktives Beispiel: Zum Nachschlagen einer Lieferinformation benötigt der Ablauf eine Artikelkennung und eine begrenzte Rückgabe mit Status und Quelle. Eine vollständige Kopie aller Lagerdaten ist für diese Aufgabe möglicherweise unnötig.
Fehler als verwertbare Rückmeldung zurückgeben
Wenn eine Artikelkennung nicht eindeutig ist, sollte das Werkzeug dies erkennbar melden. Eine leere Antwort lässt dagegen offen, ob nichts gefunden wurde oder ein technischer Fehler vorliegt.
Unterscheiden Sie beispielsweise fehlende Berechtigung, unbekannte Kennung und vorübergehende Nichterreichbarkeit. Der nächste Schritt kann je Fall unterschiedlich sein: Rückfrage, manuelle Prüfung oder begrenzte Wiederholung.
Die Verwendung an echten Aufgaben prüfen
Beobachten Sie, welches Werkzeug bei welcher Anfrage gewählt wird und welche Parameter übergeben werden. Eine sprachlich überzeugende Endantwort kann einen falschen Werkzeugaufruf verdecken.
Zu den Prüffällen gehören ähnliche Bezeichnungen, fehlende Kennungen und Aufgaben außerhalb des erlaubten Umfangs. Kontrollieren Sie auch, ob das Werkzeug seine Berechtigungen selbst durchsetzt. Eine Beschreibung im Prompt ist dafür kein Ersatz.
Änderungen an Namen oder Rückgaben können das Verhalten des Agenten beeinflussen. Halten Sie die Werkzeugversion zusammen mit den getesteten Fällen fest. So lässt sich später nachvollziehen, ob eine Verbesserung am konkreten Ablauf tatsächlich nachgewiesen wurde.
Quellen und weiterführende Grundlagen
Über den Autor
Julian Süllner hat Provehor gegründet und führt das Unternehmen als Geschäftsführer. Er verantwortet Produktentwicklung, Kundenprojekte und die Ratgeber auf dieser Website.