Kuidas määrata, kas tööriist on tõeliselt edukalt täidetud?
Kontrollige väljundi olekut, tegelikku väljundit ja loodud artefakte samaaegselt.
Ärge lootke ainult ühele edukokkuvõttele
Agent loomuliku keele kokkuvõte peab vastama tööriista väljundile. Käsu käivitamise edu, programmi väljumise edu ja ülesande eesmärgi saavutamine on kolm erinevat taset: programm võib normaalselt väljuda, kuid siiski mitte töödelda määratud faili.
Kõigepealt kontrollige sihtkeskkonda ja sisendit, seejärel kontrollige, kas väljund toetab piisavalt lõplikku järeldust.
Hinnake nähtavate tõendite põhjal
Näiteks aruande koostamise ülesandes kontrollige, et fail on olemas ja sisu on täielik; programmi kontrollimise ülesandes vaadake tegelikke tulemusi ja sobivaid tingimusi, mitte ainult seda, kas on punaseid veateateid.
Näiteks kui aruandes öeldakse "kontroll läbitud", küsige, milliseid faile kontroll hõlmas, milliseid sisendeid kasutati ja kas mõnda üksust jäeti vahele. Korrektne väljumise olek toetab ainult täitmise taseme hindamist; kas teie eesmärk saavutati, peab ikkagi vastama alguses kokkulepitud vastuvõtukriteeriumidele.
- Kontrollige käsu täitmise olekut ja peamisi väljundeid.
- Kinnitage, et töödeldud failid, versioonid või sihtmärgid on ootuspärased.
- Kontrollige loodud faile ja nõutud välju.
- Selgitage selgelt kõiki katmata ulatusnõudeid.
Kui väljund on väga pikk või ajaloo seanss on lõppenud
Tööriist võib säilitada piiratud väljundi või pakkuda salvestuskohta; ärge eeldage, et vestluse eelvaade näitab kogu logi. Paluge Agent-l ekstraktida asjakohased segmendid ja säilitada originaaltulemused. "Töös" ajaloolistes täitmisrekordites ei pruugi tingimata tõestada, et protsess töötab praegu; ülesande jätkamisel kontrollige kõigepealt praegust olekut ja artefakte, enne kui otsustate järgmise sammu üle.