Comment visualiser des captures d'écran ou des images dans l'environnement Agent ?
Permettez aux outils de lire réellement les images et de distinguer les échecs de prévisualisation et d'analyse.
Les images nécessitent une capacité de visualisation d'images
L'outil de fichier de Agent fait la distinction entre la lecture de texte et la visualisation de bitmaps. Les captures d'écran et autres images doivent utiliser le processus de visualisation d'images plutôt que de lire des fichiers binaires comme du texte. La possibilité d'analyse dépend également du modèle actuel et du support de l'environnement.
Demander à Agent de décrire le contenu qui peut être confirmé dans l'image aide à déterminer s'il a réellement obtenu l'image.
Comment poser des questions efficaces à Ask
Spécifiez l'emplacement de l'image et la zone d'intérêt, comme les états des boutons, les messages d'erreur ou les différences entre deux captures d'écran. Si vous avez besoin de vérifier vous-même, vous pouvez également demander des pièces jointes téléchargeables.
Lors de la comparaison de deux captures d'écran, indiquez l'ordre, les conditions de la page et les différences qui vous intéressent. Laissez l'agent décrire d'abord les changements visibles, puis discuter des raisons possibles ; si les captures d'écran proviennent de résolutions différentes ou d'états de connexion différents, ces différences de conditions doivent d'abord être enregistrées.
- Confirmez que le fichier de capture d'écran a été généré et qu'il n'est plus en cours d'écriture.
- Spécifiez l'image à visualiser et la question précise.
- Vérifiez si le contenu de l'aperçu correspond à la cible.
- Fournissez du texte supplémentaire ou des images partielles plus claires pour le texte flou et petit.
Lorsque le format ou la capacité n'est pas pris en charge
Les images trop grandes, les fichiers non bitmap et les modèles qui ne prennent pas en charge les résultats d'images peuvent renvoyer des erreurs différentes. Les PDF ou SVG ne peuvent pas être traités directement avec des méthodes de capture d'écran ordinaires ; le texte peut être extrait ou converti selon le format pour la visualisation. Les descriptions de modèles n'équivalent pas à une vérification au niveau des pixels ; les nombres importants, les états des icônes et les chemins doivent être vérifiés élément par élément par rapport à l'image réelle.