Wie stellt man fest, ob ein Tool erfolgreich ausgeführt wurde?
Überprüfen Sie gleichzeitig den Exit-Status, die tatsächliche Ausgabe und die generierten Artefakte.
Verlassen Sie sich nicht nur auf eine einzige Erfolgsmeldung
Die natürlichsprachliche Zusammenfassung von Agent muss mit der Ausgabe des Tools übereinstimmen. Der Erfolg des Befehlsstarts, der Erfolg des Programmabschlusses und die Erreichung des Aufgabenziels sind drei verschiedene Ebenen: Ein Programm kann normal beendet werden, aber trotzdem die angegebene Datei nicht verarbeiten.
Überprüfen Sie zuerst die Zielumgebung und die Eingabe, dann prüfen Sie, ob die Ausgabe die endgültige Schlussfolgerung ausreichend stützt.
Beurteilen Sie anhand sichtbarer Beweise
Überprüfen Sie beispielsweise bei einer Berichterstellungsaufgabe, ob die Datei existiert und der Inhalt vollständig ist; bei einer Programmprüfungsaufgabe sehen Sie sich die tatsächlichen Ergebnisse und anwendbaren Bedingungen an, nicht nur, ob es rote Fehlermeldungen gibt.
Wenn der Bericht beispielsweise „Prüfung bestanden“ lautet, fragen Sie, welche Dateien von der Prüfung abgedeckt wurden, welche Eingaben verwendet wurden und ob Elemente übersprungen wurden. Ein korrekter Exit-Status unterstützt nur die Beurteilung auf Ausführungsebene; ob Ihr Ziel erreicht wurde, muss immer noch mit den zu Beginn vereinbarten Akzeptanzkriterien übereinstimmen.
- Überprüfen Sie den Ausführungsstatus des Befehls und die wichtigsten Ausgaben.
- Bestätigen Sie, dass die verarbeiteten Dateien, Versionen oder Ziele wie erwartet sind.
- Inspizieren Sie die generierten Dateien und erforderlichen Felder.
- Geben Sie alle nicht abgedeckten Umfangs-Anforderungen klar an.
Wenn die Ausgabe sehr lang ist oder die Verlaufssitzung beendet wurde
Das Tool kann eine begrenzte Ausgabe speichern oder einen Speicherort angeben; gehen Sie nicht davon aus, dass die Gesprächsvorschau den gesamten Protokoll enthält. Lassen Sie Agent relevante Segmente extrahieren und die ursprünglichen Ergebnisse beibehalten. „Läuft“ in historischen Ausführungsdatensätzen beweist nicht unbedingt, dass der Prozess zu diesem Zeitpunkt noch läuft; wenn Sie eine Aufgabe fortsetzen, überprüfen Sie zuerst den aktuellen Status und die Artefakte, bevor Sie den nächsten Schritt entscheiden.