Bagaimana Cara Menentukan Apakah Alat Benar-Benar Berhasil Dieksekusi?
Periksa status keluar, output aktual, dan artefak yang dihasilkan secara bersamaan.
Jangan Hanya Bergantung pada Satu Ringkasan Keberhasilan
Ringkasan bahasa alami Agent harus sesuai dengan output alat. Keberhasilan memulai perintah, keberhasilan keluar program, dan pencapaian tujuan tugas adalah tiga tingkat yang berbeda: program dapat keluar secara normal tetapi masih tidak memproses file yang ditentukan.
Verifikasi terlebih dahulu lingkungan target dan input, lalu periksa apakah output cukup mendukung kesimpulan akhir.
Nilai Berdasarkan Bukti yang Terlihat
Misalnya, dalam tugas pembuatan laporan, periksa bahwa file ada dan kontennya lengkap; untuk tugas pemeriksaan program, lihat hasil aktual dan kondisi yang berlaku, bukan hanya apakah ada pesan kesalahan berwarna merah.
Misalnya, jika laporan menyatakan "pemeriksaan lulus," tanyakan file mana yang dicakup oleh pemeriksaan, input apa yang digunakan, dan apakah ada item yang dilewati. Status keluar yang benar hanya mendukung penilaian di tingkat eksekusi; apakah tujuan Anda tercapai masih perlu sesuai dengan kriteria penerimaan yang disepakati di awal.
- Periksa status eksekusi perintah dan output utama.
- Konfirmasikan bahwa file, versi, atau target yang diproses sesuai harapan.
- Periksa file yang dihasilkan dan bidang yang diperlukan.
- Nyatakan dengan jelas persyaratan cakupan apa pun yang belum tercakup.
Saat Output Sangat Panjang atau Sesi Riwayat Telah Berakhir
Alat mungkin menyimpan output terbatas atau menyediakan lokasi penyimpanan; jangan berasumsi pratinjau percakapan menampilkan seluruh log. Minta Agent untuk mengekstrak segmen yang relevan dan menyimpan hasil aslinya. "Berjalan" dalam catatan eksekusi historis tidak serta merta membuktikan proses masih berjalan saat ini; saat melanjutkan tugas, verifikasi terlebih dahulu status dan artefak saat ini sebelum memutuskan langkah selanjutnya.