¿Cómo Determinar si una Herramienta se Ha Ejecutado Exitosamente?
Verifica el estado de salida, la salida real y los artefactos generados simultáneamente.
No Confíes Únicamente en un Resumen de Éxito Único
El resumen en lenguaje natural del Agent debe corresponder con la salida de la herramienta. El éxito de inicio del comando, el éxito de salida del programa y el logro del objetivo de la tarea son tres niveles diferentes: un programa puede salir normalmente pero aún así no procesar el archivo especificado.
Primero verifica el entorno y la entrada de destino, luego comprueba si la salida soporta suficientemente la conclusión final.
Juzga por Evidencia Visible
Por ejemplo, en una tarea de generación de informes, verifica que el archivo exista y que el contenido esté completo; para una tarea de verificación de programas, mira los resultados reales y las condiciones aplicables, no solo si hay mensajes de error en rojo.
Por ejemplo, si el informe dice "verificación aprobada", pregunta qué archivos fueron cubiertos por la verificación, qué entradas se usaron y si se omitieron elementos. Un estado de salida correcto solo apoya el juicio a nivel de ejecución; si tu objetivo se logró aún necesita corresponder con los criterios de aceptación acordados al principio.
- Verifica el estado de ejecución del comando y las salidas clave.
- Confirma que los archivos, versiones o destinos procesados son los esperados.
- Inspecciona los archivos generados y los campos requeridos.
- Declara claramente cualquier requisito de alcance no cubierto.
Cuando la Salida es Muy Larga o la Sesión del Historial Ha Terminado
La herramienta puede retener una salida limitada o proporcionar una ubicación de guardado; no asumas que la vista previa de la conversación muestra el registro completo. Haz que el Agent extraiga segmentos relevantes y preserve los resultados originales. "Ejecutando" en los registros de ejecución históricos no prueba necesariamente que el proceso todavía se esté ejecutando en este momento; al reanudar una tarea, primero verifica el estado y los artefactos actuales antes de decidir el siguiente paso.